码头扛包的活，辛苦是辛苦，但是维持一家人温饱是可以的，安顿下来一阵子，安南方发现自己又怀孕了，夫妻俩商量等南方生下孩子后先回内地去养身子，考虑到妻子一个人也没有什么工作，回去可能日子过得也很艰难，严忠昌就把南方送上船后，独自带着两个孩子在香港稳定了下来。

由于刚严忠昌还得上工，无暇顾及刚出生的儿子，所以他把孩子寄养在隔壁的鞠文娴家里，文娴的丈夫常年在国外，久出不归，她和母亲靠平日给人织毛衣相依为命，儿子放在她们这里忠昌很放心，但也是无奈之举。