為了達到自己目的，戴笠又使出一招，派人打發走潘有聲，讓他去昆明做生意，還給潘有聲發了商人夢寐以求的專員委任狀和滇緬公路通行證。潘有聲一走，戴笠再也按捺不住強行占有了胡蝶。面對戴笠強大的勢力，胡蝶無以反抗，雖痛苦難耐，也只好違心順從。自此，胡蝶開始了在重慶被幽禁三年的日子。

　　潘有聲做生意回來，胡蝶被幽禁的日子看起來還是很富貴的。戴笠為了不讓胡蝶對潘有聲有負疚感，潘有聲一走他就讓胡蝶住進楊家山公館。胡蝶嫌公館的窗戶狹小，樓前景物不好看，戴笠馬上派人在公館前重建別墅。還從印度空運來胡蝶喜歡吃的水果，買來一大堆鞋子讓胡蝶選。甚至花費上萬的銀元弄了個大花園，每天陪胡蝶在花園里散步。而這樣富貴的幽禁換得的是胡蝶不能與丈夫相見的痛楚。

　　胡蝶每天透過洋房的窗子，看著這隔世的桃源，都會情不自禁地掉淚。她覺得自己已經死了，那個純潔的胡蝶沒有了，那個電影上風光的胡蝶沒有了，那個能與洋行丈夫過普通生活的胡蝶也沒有了。她現在只剩下一具美麗的軀殼。沒有愛沒有事業，什么都沒有。

　　戴笠是愛胡蝶的，但是這樣的愛如果建立在別人的痛苦之上，也就成了很猥瑣的一種愛了。戴笠可不管這些，他要與胡蝶結婚，他逼迫著潘有聲與胡蝶離婚。

　　胡蝶不愛戴笠，卻被迫與他過起同居生活。這也是胡蝶與阮玲玉的不同，阮玲玉無論與哪個男子在一起都是為了愛，如果沒有愛便寧愿自毀自己。胡蝶不，她在被幽禁的日子，在被他強占身體的日子，可以一滴淚也不掉地等待時間來化解這場屈辱。

　　戴笠對胡蝶說：我今生最大的心愿是與你正式結為夫妻，為了你，我什么都可以不要。

　　戴笠準備在1946年下旬迎娶胡蝶，這時，他搭乘的飛機遇難，戴笠喪生于此，胡蝶終于結束了被幽禁的日子，重新獲得自由。

　　后來在胡蝶的回憶錄中，她沒有提及這段歷史，只是寫了些無關緊要的小事情，大多來自于工作，從這點上也可看出胡蝶處世的圓潤，哪像阮玲玉，死都死了，還要寫封遺書，把所有的事情說的清清楚楚，交待的清清楚楚。一個努力記住痛苦的人，她必然總在痛苦中生活。阮玲玉比胡蝶輸就輸在這里。想三十年代紅遍上海灘的那些電影女明星，自殺的不少，精神分裂的也不少，而受了那么多磨難的胡蝶能一直活到那么老真是不易。

　　胡蝶是一個有經歷的女人，也是一個懂得善待自己的女人，她永遠不會為別人而活著，更不會為了別人傷害自己。