我通过贷款的方式购买了一套二手房，买卖双方的贷款资料都已齐备。现在卖方以银行服务欠佳为由，撤回了贷款材料，并要求我必须将剩余房款以现金方式结清。请问，卖方如此行为算不算违约？