在大唐皇宫中，皇帝与寿王妃的关系，传开了——李隆基虽然做得秘密，但宫中的侍从人员太多，偶然一次，容易混过，自打马球之后，人们就发现了两者的关系不寻常。

在流泉中彼此赤足拾石子一事，被宫中人看成翁媳之间已确定有恋情了。后宫中人猜测着，皇帝如何安排寿王妃，人们看出皇帝的意向，绝不会满足于偷情的。但是，从骊山回长安，杨玉环仍然在寿王府，除了宫中有传说，外界、朝廷中人无有知者。那是由于宫中人不敢把尚未成形的事胡乱说出。

在初夏，皇帝忽然自大明宫移居于兴庆宫。兴庆宫在外郭城市区的兴庆坊，本是李隆基为藩王时的住宅，开元二年置为兴庆宫，到开元十四年，再扩充，取永嘉、胜业两坊各半坊之地，划入兴庆宫范围，正式营建为一座独立的宫城，这一项工程到开元二十年才完成，而且建筑了夹城复道，通大明宫，又通城南的游乐区曲江的离宫。兴庆宫造成后，皇帝曾在那儿受朝，也偶然在那边居住几天，但是，皇帝的主要居住处，仍是大明宫。这回，皇帝搬入兴庆宫居住，调动了不少人，看情形，会住上较长的时间。

人们不明白皇帝似近正式移居的原因。兴庆宫城杂处在市区中，在宫城上，可以听到民间的谈话和见到行人——但是，兴庆宫和寿王他们所住的诸王宅所在的入苑坊，距离很近，中间只陷一坊半地，有夹城相通，而寿王宅的后侧，又近夹城。

左监门将军高力士在皇帝移居兴庆宫之前，依调防的制度，调动了入苑坊的守卫，以及在夹城地区做了新的布置——从寿王宅的侧门乘车而出，即入新的夹城门，其他诸王的住宅不会发现。那是在禁区开了一条新的路，穿过军营而入夹城，再者，寿王宅的一边侧门，因禁区改制而被封闭了，从封闭的门出入，自然无人可知。

等待命运降临中的寿王夫妇，自仲春时起，有过数度不欢——杨玉环有时怨，有时又要把握时间行乐，但是，心情低沉的李瑁，却无法做沉醉式的行乐，和妻子单独相对时，时常会流泪。

为此而不满，她曾任性，要做毁灭式的抗命，事实上，自骊山回来之后不久，她曾拒绝皇帝的一次相召，又次，她又故意迟赴。

寿王惧祸，只有求恳妻子，这又使杨玉环不满，她在紊乱中，指丈夫对自己缺少真实的爱，她扬言要请皇帝早些送魏来馨入府。

虽然如此，但夫妻间的不欢，又至多持续三天，他们总是最恩爱的。

但在另外一面，杨玉环与皇帝之间的关系，因于时间和往来的次数增多而看来亲密了。杨玉环不可能拒绝皇帝，在顺应中，皇帝对媳妇渐渐趋于猖狂。

他吻过媳妇的鬓发，他搂抱过美丽的媳妇，她于顺应中依偎过皇帝，但她又尽力设法避免最后的事——那当然是很吃力的，不过，她又做得恰到好处。她明白自己能做到，原因只在于皇帝对自己迷恋式的爱。

当然，她明白，这样做，也不过是略微拖延时间而已。

在夏日的兴庆宫，最后事件终于来了。

兴庆宫的龙池之东，交泰殿以北，有一列狭长的屋宇，最初是李隆基为藩王时草率建筑的内射堂，当年，李隆基几乎每日在此练习弓箭。在那个时代，藩王们如果在外面勤习武事，会被疑，因此，他改在室内，而陪侍他射箭的通常是高力士。当兴庆宫营建时，这列屋在图样上是要拆掉的，高力士以此地具有纪念性，便奏请照原样重建，做技艺和游戏房，仍保有射箭的设备。

此地，有攀绳网、横云梯、单双杠、木马、爬圈、浪木等设备，武惠妃在世日，不好这些，皇帝便很少光临，但在武惠妃死后，李隆基为了排遣，每来兴庆宫时，总会入技艺房随喜一下。