戴笠,于是情急之中心生一计,按胡蝶开的丢失珠宝、衣物的账单,派人去外国购置,然后谎说是追回了一部分财物。胡蝶是见过世面的女子,看见戴笠追回的宝物并不是自己的原物,却也不声张,只淡淡地说了些感激的话。不过,对戴笠而言,这也初步博得胡蝶的好感。为了达到自己彻底占有胡蝶的目的,戴笠又使出一招,派人打发潘有声去云南做生意,还给潘有声发了商人梦寐以求的专员委任状和滇缅公路通行证。潘有声一走,戴笠再也按捺不住强行占有胡蝶的冲动。面对戴笠强大的势力,胡蝶知道反抗无用,她是从容淡定的人,虽痛苦难耐,也只好违心顺从。
自此,胡蝶开始了在重庆被幽禁三年的日子。
胡蝶被幽禁的日子看起来还是很富贵的。戴笠为了不让胡蝶对潘有声有负疚感,就让胡蝶住进杨家山公馆。胡蝶嫌公馆的窗户狭小,楼前景物不好看,戴笠马上派人在公馆前重建别墅,还从印度空运来胡蝶喜欢吃的水果,买来一大堆鞋子让胡蝶选,甚至花费上万的银圆弄了个大花园,每天陪胡蝶在花园里散步。