质保金能不能退还，主要看合同约定。如果合同中明确规定质保期内施工方不维修，业主可要求退还质保金，则施工方需要退还质保金；如果合同中没有明确约定，则施工方不维修并不代表业主可以要求退还质保金，业主需要按照合同约定通过法律途径解决问题。