视情况而定。如果公积金是违规提取的，要按照规定退回公积金，但如果符合规定，是不需要退回的。根据《住房公积金管理条例》规定，职工有下列情形之一的，可以提取职工住房公积金账户内的存储余额：购买、建造、翻建、大修自住住房的；离休、退休的；完全丧失劳动能力，并与单位终止劳动关系的；出境定居的；偿还购房贷款本息的；房租超出家庭工资收入的规定比例的。