斐沙太太早逝，只有獨生子Joseph Fisher。幸而Joseph的妻子誕下了八名子女，家庭總算十分熱閙。不過，斐沙還收養了一名日本籍養女和一名中國籍養子， 更使家族非常熱閙，彷如一個國際大家庭。據斐沙後人憶述，這兩名日本籍和中國籍的養子養女，自小就和其他家族成員一起生活，相處融洽。斐沙待他們如親生兒女，至於為何要收養這兩名養子女？就不得而知了。
斐沙的日本籍的養女，為人活潑，打扮、穿著趨時。斐沙被日軍俘獲及送入集中營後，曾向日軍要求與斐沙一同進入集中營，以便照顧患病年老的斐沙，但因她是日籍人士，要求被拒，還被日軍强行送返日本，自此下落不明。
至於斐沙的中國籍養子，他本姓陳，雖然他認斐沙為養父，卻堅決保留原姓。斐沙尊重他的決定，而養子也視梁十妹為生母。淪陷期間，陳姓養子對梁十妹照顧有加，克盡孝道。抗戰勝利後，這位養子最初留港，後返中國，文革期間被批鬥，六十年代逝世。其後人於六十年代南赴香港，投奔養母梁十妹，至今與斐沙後人尚有聯絡。
從養子養女的事蹟，可以看到人性光輝的一面：「患難見真情。」 至於陳姓養子堅決不改姓，除表現出志氣外，其落葉歸根卻遭逢厄運的經歷，也反映了時局變遷主宰了尋常百姓的一生命運。
