要因为40w和对象分手吗？ 房子的首付让我崩溃

先介绍一下我和我对象，谈了两年半了，也到了谈婚论嫁的地步，先说想分手的原因：
原因就一个，对象家里太穷了，本来我父母的嫁娶观念比较严重，意思就是女儿出嫁是父母是不用怎么花钱的，但是我父母已经妥协了，说只要男方父母出40万首付，我爸妈也愿意给我出40万首付，就为了给我和对象买房，但是！我对象家里一分钱拿不出来，实在没钱就把家里的房子挂上去卖，但是一年了根本无人问津，我算是清楚了，房子也根本卖不出去，意思就是他父母那40万根本拿不出来，如果他父母不拿40，我爸妈那40估计也拿不到了，因为我爸妈觉得凭啥他家娶妻一分钱不出？因为买房的首付都还是问题，其他什么彩礼婚宴，我压根没想过，为了理解他家穷，我都说不办婚礼了，但是现在首付都没有，我真的无可奈何。
我对象和我自己工作都很稳定，收入也还行，我俩在一起2年半存款基本有近40w，所以只要把首付凑上，我觉得后面的还贷生活还是可以的，总的来说，就是房子的首付让我崩溃，让我不断的犹疑，一边想他家真的一分钱没有，一边想，我和他努努力三年也有40了，为了这40放弃他我真的于心不忍，各位给我点意见