1、男方不抚养小孩离婚孩子应该归孩子母亲抚养。
2、但是子女由女方直接抚养的，男方就应当负担部分或者全部抚养费。
3、负担费用的多少和期限的长短，由双方协议；协议不成的，由人民法院判决。
4、父母与子女间的关系，不因父母离婚而消除。
5、父母对于子女仍有抚养、教育、保护的权利和义务，男方作为孩子父亲不得随意拒绝。