可以按照以下方法要回小孩的抚养权：1、父母一方可以和对方达成协议，约定变更孩子的抚养权，将孩子的抚养权要回来；2、对方不愿意变更孩子抚养关系的，父母一方只能去人民提起民事诉讼，人民经过审理，认为变更抚养关系的理由是正当的，应当同意变更孩子的抚养权，理由不是正当的，应当判决孩子的抚养关系不能变更。【本文关联的相关法律依据】。《最高人民关于适用《中华人民共和国民法典》婚姻家庭编的解释（一）》。第五十六条 具有下列情形之一，父母一方要求变更子女抚养关系的，人民应予支持。（一）与子女共同生活的一方因患严重疾病或者因伤残无力继续抚养子女。（二）与子女共同生活的一方不尽抚养义务或有虐待子女行为，或者其与子女共同生活对子女身心健康确有不利影响。