就问题本身而言，给出的答案是：不需要给对方抚养费。

题主描述中，其实涉及到两个问题：一个问题是抚养费的问题，结论如上；另一个问题是房贷问题。关于房贷是否继续支付，看协议而定。

这两个问题，相互之间不具有条件关系，是相对独立的。

以下分别就这两个问题做一个说明：

关于抚养费的问题

首先我们需要搞清楚抚养费是给谁的。

抚养费的给付对象，是未成年子女，而非前配偶。

即便离婚、未成年子女归了一方，另一方依然有义务对孩子进行抚养。

因此，离婚时未成年孩子协议（或者判决）给一方之后，另一方有义务继续支付抚养费——抚养未成年子女，是父母的义务，与父母是否离婚没有必然关系。

那么，当双方变更了孩子抚养权，对方就不再具有“替孩子索要抚养费”的权利。相反，可以向对方索要孩子抚养费的。

关于房贷的问题

“经协商婚内房产留给了妈妈”，说明：离婚的方式是协议离婚。双方就婚姻财产如何分割，通过协议的方式达成了共识。

协议，是双方意见一致的结果，具有法律效力，对双方均有约束。

因为房子是贷款购买，所以，当前阶段应该还没有变更为女方个人产权，只是通过协议的方式约定好了（处于抵押状态的房产，变更产权人很难）。那么，关于房子后续贷款的偿还问题，就要看双方之间是否在协议中明确。

如果协议写明了由男方负责，那么，男方依然要承担房贷偿还的责任。

如果协议中没有写明、仅仅是与女方的口头约定，那么，男方可以完全不承担偿还责任。