孩子給男方能不能要回撫養權要看是否更有利於孩子健康成長。父母雙方都有撫養和教育孩子的義務，都有權利爭取孩子的撫養權，不會因爲離婚等原因而消除。法律規定孩子在兩週歲以下的，一般由母親撫養，兩週歲以上的孩子，以更有利於孩子身心健康成長爲前提根據雙方撫養能力和撫養條件判定撫養權歸屬。法律規定一方如果有嚴重疾病、吸毒、家暴、虐待兒童等不利於孩子身心健康成長的，另一方要求變更孩子撫養權應給予支援。
法律依據：
《最高人民法院關於適用<中華人民共和國民法典>婚姻家庭編的解釋(一)》第五十六條 具有下列情形之一，父母一方要求變更子女撫養關係的，人民法院應予支援：
(一)與子女共同生活的一方因患嚴重疾病或者因傷殘無力繼續撫養子女;
(二)與子女共同生活的一方不盡撫養義務或有虐待子女行爲，或者其與子女共同生活對子女身心健康確有不利影響;
(三)已滿八週歲的子女，願隨另一方生活，該方又有撫養能力;
(四)有其他正當理由需要變更。
