一般情况下，父亲不能要求子女返还抚养费。
因为抚养未成年子女是夫妻的法定义务。
特定情况下，即因养子女成年后虐待、遗弃养父而解除收养关系的，养父可以要求养子女补偿收养期间支出的抚养费。

《民法典》第一千一百一十八条
收养关系解除后，经养父母抚养的成年养子女，对缺乏劳动能力又缺乏生活来源的养父母，应当给付生活费。因养子女成年后虐待、遗弃养父母而解除收养关系的，养父母可以要求养子女补偿收养期间支出的抚养费。
生父母要求解除收养关系的，养父母可以要求生父母适当补偿收养期间支出的抚养费；
但是，因养父母虐待、遗弃养子女而解除收养关系的除外。