我小學快畢業時，父親正在湖南、江西一帶抗日，父親知道我快要進初中了，從很遠的地方寄給我一支綠色花紋的水筆，鼓勵我考取初中好好讀書，這時父親已是六十軍特務（警衛）團團長。不久，父親出事了，被蔣介石的嫡系將領薛岳關進了長沙模範監獄。導火線是父親的一個營長，也是他的拜把兄弟王世高，因公幹出外，留下很年青的妻子由父親照管，後來王妻與別的男人發生了關係，父親認為是丟盡了他的臉，他無顏對王世高，一氣之下叫人把這個女人殺了，這在封建性很強的舊軍隊裡，一般不會受到什麼懲處，薛岳藉此事把父親丟大獄的根本原因是，他想趁盧漢返滇時，企圖分化滇軍，父親是盧漢的親信，他要拔掉這棵釘子。正好父親幹了這麼一件殘忍的蠢事，給薛造成把他丟大獄的口矢。王世高知道此事後，挺身而出說人是他殺的，與父親無關，父親和王世高在公堂上演了一出“搶生死牌”的現代戲，據說當時在長沙市傳為佳話，說這兩人太義氣了。由於王世高出來頂罪，致使當局難於判處父親死刑，只好把兩個人都關在監獄裡。當時日本飛機轟炸很厲害，監獄裡沒有防空掩護，薛岳等人判不了他們死刑，也要讓日本飛機給炸死，但雖然日本飛機多次轟炸，父親未傷毫毛，倖免一死，後來盧漢設法把父親營救回滇。

1941年我考入國立西南師範附中，記得是初中一年級下學期，父親被營救返滇後不久，就回昭通看望我們，這算是我第三次見到父親。那時我是住校，一天下午父親很氣派地帶着隨從提了一支火腿到學校送給校長，不少同學都看到父親，我覺得很羞人似的，不高興別人議論此事。父親此次回昭，明顯地流露了對蔣家王朝的不滿，對我講“蔣、宋、孔、陳”，四大家族怎麼過着窮奢極侈的生活，抗日的戰士怎麼艱苦抗戰流血犧牲，這是我第一次從父親那裡知道中國有個“四大家族”，父親可能是因為大難不死，帶着母親去梭山掃墓祭祖，大殺豬羊,請所有佃戶吃飯，並宣布佃戶不再向我家交租，誰種誰收。他的這些舉措，當時轟動了那片貧窮寂靜的山寨，我因讀書沒有與他們一塊去，遺憾未親眼見到父親義舉的場面。到放暑假時，父親要返昆明，叫我同他一齊到昆明玩一轉，這是我第二次來昆明，到昆明後，第一次見到父親的姨太潘娘，潘娘比較會做人，對我還可以，以後我與她相處的時間也較多。