房屋有瑕疵能否解除合同

吴律师，您好！我于本月16日通过A中介看房，然后B中介得知后就直接跟我们交谈说他们能帮忙促成稍低价格的交易，帮我们去谈价格，事后也没有带我们去看房。 通过A中介看房的过程中，我发现床头柜上有裂缝，墙壁上的涂料已经脱落，就提出异议问墙面是否有渗漏的问题。房主说是有点，但是已经让物业对墙面刷了层防水胶。当天我们也没在意，觉得稍微有一点点的裂缝我们是可以接受的。于是与第二天在B的房产公司签了居间合同，当天支付定金一万，后于第二天又支付定金二万。 22日，我们再次去房主家里看房，那天下雨，进去后房子有裂缝的墙面并不是我当天看到稍微有点裂缝，而是近两米的距离都是裂缝，房东也没主动交代裂缝的事宜。虽然墙面没渗水，但是整个墙面都冒水珠。后又看了阳台，发现阳台有漏水现象，墙面的涂料也脱落，墙上也潮湿返潮冒着水珠。 24日我们提出要解决合同，让房主返还定金。但是房主不肯。 就此事，我能否以房主的房屋不适合居住为由，构成根本违约，要求房主解除合同返还定金。 盼回复，谢谢！