我们村庄在4年前因为属于在化工厂5公里范围内，进行了搬迁，当时补偿的费用是1000块钱一平方米，政府承诺的在我们镇上统一盖房回迁，回迁价格1700块钱一平方米，我们当时都按照所选的房屋的面积全额交了钱，包括燃气开口费，暖气开口费什么都的都交了。现在过了4年了，一直没有动工，这个月政府忽然下通知，让我们统一去市郊去上房，房屋价格也由1700块钱一平方，涨到了3500块钱一平方，现在我们每家每户都得额外再付一倍的钱，不光拆迁的钱不够，还需要贷款，请问这样合理吗？我们该怎么维权？