离婚时子女的归属权，也就是抚养权的确定，并不是由某一个人单方面决定的，而是需要综合多方面因素，遵循“最有利于未成年子女”的原则来确定。
首先，从法律层面来看，不同年龄段的孩子，在抚养权归属上会有不同的考量重点。对于两周岁以下的子女，一般情况下会优先考虑由母亲直接抚养。这是因为这个年龄段的孩子对母亲的依赖程度较高，母亲在照顾婴幼儿方面通常也更有天然的优势。不过，如果母亲存在一些特殊情况，比如患有久治不愈的传染性疾病或者其他严重疾病，子女不宜与其共同生活；或者母亲有抚养条件却不尽抚养义务，而父亲要求子女随其生活；又或者因为其他原因，子女确实无法随母亲生活的，那么孩子也可能会判给父亲。
对于两周岁以上的未成年子女，父母双方都有权利争取抚养权。这时候法院会综合考虑父母双方的具体情况，看哪一方的条件更有利于孩子的成长。比如会考虑父母双方的经济收入、工作稳定性、居住环境、教育背景、个人品德等因素。如果一方已经做了绝育手术或者因其他原因丧失生育能力，或者子女随其生活时间较长，改变生活环境对子女健康成长明显不利，又或者一方无其他子女，而另一方有其他子女，这些情况都可能成为争取抚养权的有利因素。
如果孩子已经年满八周岁，那么孩子的意愿就会成为一个重要的参考因素。因为八周岁以上的孩子已经有了一定的自主意识和判断能力，他们的意见对于抚养权的确定会起到比较关键的作用。法院在判决时会认真听取孩子的想法，并在综合考虑其他因素的基础上，尊重孩子的选择。
除了以上这些因素，父母双方的抚养意愿和抚养能力也是非常重要的。如果父母双方能够通过协商达成一致意见，确定孩子的抚养权归属，那么法院通常会尊重他们的约定。但如果双方无法协商一致，就需要通过诉讼的方式，由法院根据具体情况进行判决。
另外，在确定抚养权归属之后，不直接抚养孩子的一方也有探望子女的权利，另一方有协助的义务。探望权的行使方式和时间可以由双方协商确定，协商不成的也可以由法院判决。
总之，离婚时子女归属权的确定是一个复杂的过程，需要综合考虑多方面的因素，最终的目的都是为了保障孩子的健康成长和合法权益。父母双方在处理这个问题时，应该以孩子的利益为出发点，尽量通过和平协商的方式解决，避免对孩子造成不必要的伤害。