黃飛鴻去世後，妻子晚年回憶：他長相怪異，我們沒啥夫妻感情

只不過讓人沒想到的是，夫妻關係的考驗結束之後，自己最疼愛的兒子也出現了意外，厄運似乎一直停留在黃飛鴻身邊，始終不願離開，在他的4個兒子之中，黃漢森最有天賦，也表現最好，所以最得黃飛鴻的真傳，但卻發生了意外。

黃海森因為表現太過出色，引起他人的嫉妒，最終在廣西梧州擔任「護勇」的時候遭到他人暗算，不幸英年早逝，這件事對黃飛鴻的打擊非常大，他擔心再有類似的情況發生，所以決定從此之後不再傳給兒子武術。

後來隨著外國入侵，中國功夫在槍炮面前變得不堪一擊，黃飛鴻決定返回廣州，將醫館的生意做大，從此只治病救人不再習武，基本處於半隱居的狀態，生活十分艱苦。

1924年8月，廣州地區發生了武裝暴亂，黃飛鴻的醫館寶芝林也在戰火之中被摧毀，生活上的打擊和事業上的不順讓黃飛鴻的身體越來越脆弱，最終在1925年，這位風雨飄搖之中的武學大師在廣州西方醫院去世。

莫桂蘭的回憶