苍某联系到某地产屋面挂瓦活，找我与其一起干，没有签任何合同协议，我方投资较多，因管理不当一直赔钱，干了一个多月苍某提出让我撤出，现在活干完了，我找他要钱，他让我跟他分摊我撤出前赔的那部分，请问是他让我撤出的我来有义务分摊赔的钱吗？