父亲对孩子不管不问可以要回抚养权，但如果父亲因疾病或伤残无法抚养，虐待或对子女有不利影响，且子女愿意与另一方生活且该方有抚养能力，双方可以协商变更子女抚养关系。法律分析；爸爸对孩子不管不问可以要回抚养权，和子女一起生活的父亲一方因患严重的疾病或伤残无力继续抚养的。父亲一方不能尽到父母责任的，虐待子女，对子女身心健康确有不利影响的。八周岁以上未成年子女，愿随另一方生活，该方又有抚养能力的父母双方协议变更子女抚养关系的，应予准许。拓展延伸；如何确保孩子的福祉与权益得到妥善保障。