申请变更抚养费时，被告的确定常见有以下两种情况：
一、离婚协议约定抚养费的情况
当夫妻双方选择通过协议离婚的方式结束婚姻关系时，通常会在离婚协议中对子女抚养费的相关事宜作出明确约定。
在这种情况下，如果后期因为各种原因需要变更抚养费，那么应当以不直接抚养子女的一方作为被告。
具体来说，离婚协议是夫妻双方在平等、自愿的基础上，就子女抚养、财产分割等一系列问题所达成的具有法律效力的约定。
当其中一方认为现有的抚养费数额已经不能满足子女的实际生活需求，或者由于自身经济状况发生变化等原因，认为抚养费需要进行调整时，其实质上是针对对方所承担的抚养费支付义务提出了新的诉求。
所以，在这种情形下，以不直接抚养子女的一方为被告是合理且符合法律规定的。
二、法院判决确定抚养费的情况
若抚养费是经由法院判决确定的，当出现法定的需要变更抚养费的情形时，同样应以不直接抚养子女的一方为被告。
例如，随着子女的成长，其实际生活需要不断增加，如教育费用、医疗费用的增长；或者社会经济发展导致物价普遍上涨，原本确定的抚养费数额已不足以维持子女的正常生活等。
此时，直接抚养子女的一方为了保障子女的合法权益，可以依法向法院提起诉讼，要求对抚养费进行变更。
综上所述，一般都是以不直接抚养子女的一方作为申请变更抚养费诉讼的被告。

案情回顾:

小朱与小李协议离婚，约定小李支付抚养费。后因孩子教育、医疗费用增加，小朱认为抚养费不足以满足孩子生活需求，欲变更抚养费，但小李认为按协议无需变更，双方产生争议。此外，小胡与小丽经法院判决确定抚养费，后因物价上涨等原因，小胡想变更抚养费，小丽不同意，引发纠纷。

案情分析:

1、小朱与小李协议离婚约定抚养费的情况，小朱因孩子实际需求增加要求变更抚养费合理，小李作为不直接抚养子女一方，应作为被告，因其有支付抚养费义务，需根据实际情况考虑是否变更。
2、小胡与小丽经法院判决确定抚养费，出现法定变更情形时，小丽作为不直接抚养子女一方应作为被告，小胡有权为保障孩子权益提起变更抚养费诉讼。