需要房产过户

离异后，男方购房不想因为有二套房影响过户女方名下婚前房产夫妻共有，离异后协议书规定女方所有，且女方独自还贷。目前男方需要购房，不过户，就是名义上的有房户。但是建设局拒绝办理过户，原因就是有银行贷款。真的如此，没办法办理过户吗？