可以不去的。

根据实际情况，如果楼主已经进入公务员录用公示阶段，仍然是可以放弃的，只要提前跟招聘单位说明，可以随时放弃。