房屋买卖协议无法达成共识需要退还定金。因为法律有规定，如果因当事人一方原因未能订立商品房买卖合同，应当按照法律关于定金的规定处理；如果因不可归责于当事人双方的事由，导致商品房买卖合同未能订立的，出卖人应当将定金返还买受人。房屋买卖协议无法达成共识要退还定金吗的法律依据
《最高人民法院关于审理商品房买卖合同纠纷案件适用法律若干问题的解释》第四条
出卖人通过认购、订购、预订等方式向买受人收受定金作为订立商品房买卖合同担保的，如果因当事人一方原因未能订立商品房买卖合同，应当按照法律关于定金的规定处理；因不可归责于当事人双方的事由，导致商品房买卖合同未能订立的，出卖人应当将定金返还买受人。