离婚后女方条件差的，男方不一定能夺回孩子抚养权，如果是因为女方患严重疾病或因伤残无力继续抚养子女的；不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响等的，可以夺回来。
一、女方出轨有什么办法要回抚养权吗
离婚时通常都会对孩子抚养权问题一并进行约定，原则上抚养权一旦确定，一般不会随意变更孩子的抚养权，但是有下列情形的可以变更子女抚养权：
(1)男方因患严重疾病或因伤残无力继续抚养子女的；
(2)男方不尽抚养义务或有虐待子女的行为，或其与子女共同生活对子女身心健康确有不利影响的；
(3)八岁以上未成年子女，愿随女方生活，该方又有抚养能力的；
(4)有其他正当理由需要变更的。
二、什么情况下下变更孩子的抚养权
以下情况下能变更孩子抚养权：
1、与子女共同生活的一方因患严重疾病或因伤残无力继续抚养子女的；
2、与子女共同生活的一方不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响的；
3、已满八周岁的子女，愿随另一方生活，该方又有抚养能力的。
三、离婚后孩子抚养权可以变更吗
离婚后孩子抚养权可以变更。有下列情况之一的会支持变更请求：
1、与子女共同生活的一方因患严重疾病或因伤残无力继续抚养子女的；
2、与子女共同生活的一方不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响的；
3、十周岁以上未成年子女，愿随另一方生活，该方又有抚养能力的；
4、有其他正当理由需要变更的。
【本文关联的相关法律依据】
《最高人民关于适用〈中华人民共和国民法典〉婚姻家庭编的解释（一）》第五十六条
具有下列情形之一，父母一方要求变更子女抚养关系的，人民应予支持：
（一）与子女共同生活的一方因患严重疾病或者因伤残无力继续抚养子女；
（二）与子女共同生活的一方不尽抚养义务或有虐待子女行为，或者其与子女共同生活对子女身心健康确有不利影响；
（三）已满八周岁的子女，愿随另一方生活，该方又有抚养能力；
（四）有其他正当理由需要变更。
第五十七条
父母双方协议变更子女抚养关系的，人民应予支持。