可以退，但是需要交付违约金。
与买房人签订认购书，主要原因在于：房屋一旦被买房人选中，开发商就必须向买房人预留该房屋，并愿意就该房屋与买房人签订正式的《商品房买卖合同》；如果买房人不与开发商签订《商品房买卖合同》，那么就会给开发商的销售造成影响甚至是损失，买房人需要依照《房屋认购协议书》的约定承担违约责任。
订金可退但定金不可退。具有预付款性质的“订金”，只要当事人是在合法、自愿的基础上约定不予退还的，都应依法从其约定。买房人给付的定金在总额的20％以内的，在自己的原因不想买房的情况下，不能主张返还定金。而超过20％的部分，可以主张返还。
交了首付，如果沟通得当是可以退的，人与人的交往，还是需要多加沟通。