相識的第五個年頭，他們的愛情像金黃的果實，散發出寧靜溫暖的馨香，他是她的精神支柱，她有高興的事與他分享，受到委屈則向他傾訴。這年秋天，胡蝶的父親突然被查出患有肺癌晚期，為了卻父親的心愿，胡蝶決定和潘有聲結婚。這年，胡蝶已27歲，雖風采依舊，人卻明顯發胖，再扮演純情少女難免矯情做作。當初，她選定了胡蝶這個藝名，就是渴望能像蝴蝶一樣美麗、自由，有朝一日飛累了，可以在花香滿徑中悠然棲息。如今，多年的演藝生涯，讓她起了深深的倦意，潘有聲的懷抱無疑就是她所盼望的溫暖的棲息地。

吉日定于1935年11月23日，婚禮采取中西合璧的方式，中午在教堂由牧師證婚，晚上到酒樓舉辦喜宴。胡蝶穿起了純白色結婚禮服，“婚紗長三丈，上綴大小蝴蝶甚多”，明星公司的同仁們齊聲唱響了專為胡蝶所作的《胡蝶新婚歌》：胡蝶，你可實現了你全部的希望，胡蝶，幸福緊跟著你咧。假使你遭遇到不賞心的事，不必皺眉啊也不必憂愁……

婚后，胡蝶漸漸淡出影壇，每年只接拍一兩部影片。她把大部分時間用在陪伴家人身上，常為自己的廚藝得到丈夫的夸獎而“沾沾自喜”。上海淪為孤島后，明星公司的拍攝場地被日軍占領，無奈之下胡蝶舉家遷往香港躲避戰亂。但不久，香港也淪陷了，日本人“邀請”她赴東京拍攝一部名為《胡蝶游東京》的紀錄片，宣揚所謂的“中日友善”。她不愿意趟這渾水，只好設法應付，她說：“我懷孕三個月了，現在去不了，等我分娩以后再說吧。”雖暫時把日本人敷衍過去，但她深知，躲得了初一，躲不過十五，繼續留在香港，早晚要出事，于是她又拖家帶口偷偷遷回內地。

幾經輾轉，一家人終于抵達重慶，借住在朋友家，生活重得暫時安穩。潘有聲同朋友合辦了一家公司，從事茶葉和木材生意。胡蝶參加抗日電影《建國之路》的拍攝。誰也沒想到，一只可怕的魔掌正悄悄伸向他們平靜美好的小天地。1944年春，胡蝶到電影外景地工作多日，疲憊不堪地回到家中，還沒放下行李，朋友心急如焚地跑來告訴她，幾天前，潘有聲無緣無故被警察抓走了，至今下落不明。丈夫突然被捕，胡蝶心急如焚。冷靜下來后，她隱隱猜測到了禍從何起。權傾朝野的戴笠，對她垂涎已久，幾次企圖靠近都被她婉言拒絕。

為營救心愛的丈夫，胡蝶決定深入虎穴。這天深夜，面容憔悴的胡蝶走進重慶曾家巖戴笠的寓所，懇求他放了自己的丈夫。潘有聲很快被釋放了，胡蝶卻沒能走出來。“軟禁”的日子里，胡蝶想過一死了之，但她深知，如果以死抗爭，心狠手辣的戴笠豈能放過她的家人。她流著淚對丈夫說：“姓戴的只能霸占我的身體，卻霸占不了我的心……我的心永遠屬于你。”萬般無奈的潘有聲，只得孤身回到上海，開始了隱居生活。

抗戰勝利第二年，戴笠乘坐的飛機失事，胡蝶終于結束了兩年的幽禁生活，回到了潘有聲的身邊。曾經給胡蝶帶來無數光環榮耀的上海，再不能承載他們的悲歡，他們立刻前往香港定居。在香港，胡蝶又拍起電影，她還幫助丈夫開了一家暖瓶廠，生產蝴蝶牌暖水瓶，過起了夫唱婦隨、同甘共苦、怡然自得的日子。胡蝶越來越離不開潘有聲了，她說：過去的奮斗、光榮和屈辱均已過去，今后的日子要守著潘有聲來好好“消磨”。