戴笠为了彻底霸占胡蝶，送给胡蝶丈夫潘有声一张特别通行证，打发他到滇缅公路运输货物。胡蝶表面上支应着戴笠，心中却始终思念潘有声，时常闷闷不乐。为博美人欢心，戴笠想方设法满足胡蝶，并修建了神仙洞公馆。

戴胡此地同居两年

起初，戴笠和胡蝶同居杨家山公馆，但胡蝶讨厌该处山多地窄，于是，戴笠选定枇杷山神仙洞，建造豪华公馆。

据戴笠部下沈醉回忆，戴笠逼迫工人通宵赶工，修神仙洞公馆有3名石匠被砸死，12人重伤，轻伤者天天不断。

1944年初公馆建好后，戴笠又花1万多银元购置花木植于园中。公馆内所有服务人员都是他从江山老家招来。为了保密，戴笠在公馆外围修建围墙和电网，设置岗亭。

从1944年到1946年戴笠因飞机失事身死前，两人主要居住于神仙洞公馆。

抗战胜利后，戴笠准备与胡蝶结婚，嘱咐胡蝶飞往上海，与潘有声办理离婚手续。据说，胡蝶曾流泪对丈夫说:“姓戴的只能霸占我的身体，霸占不了我的心。”正在此节骨眼上，戴笠因飞机失事摔死于南京近郊。随后，胡蝶与潘有声离开上海，到了香港。

公馆至今保护完好

记者昨日看到，公馆保护完好。楼房青砖砌墙，爬满手指粗的藤蔓。大门采用罗马柱，两只石墩已经风化。屋内上朱红油漆的柏木铺就地板和楼梯，栏杆上刻饰精细，每层楼梯口和单个房间均设拱形木门。大门前是一方小院，青石板地面长着一株直径约1米的黄葛树。

文物管理部门介绍，戴笠在渝8年，关于其记载和影视文学等都提到过他为胡蝶修建的神仙洞公馆，但具体地址在哪，此前都没明确说法。

解放后，神仙洞公馆被划为市博物馆办公用房。博物馆搬迁后，楼房移交市文化局，如今装修一新，风格保持不变。据悉，该公馆将用作市文化局创作中心。