肃宗太子时的太子妃原是韦氏，因李林甫酿造的政治危机，天宝五载（746）韦妃不得不削发为尼。天宝五载（746）年底，肃宗太子时的杜良娣亦因政治问题被牵连，被废为庶人。

两次大案，两次婚变，接踵而来。一波未平，一波又起，都与自身个人安危直接相关，肃宗身心由此蒙受巨大的创伤，精神受到极大刺激。之后在唐玄宗的安排下，肃宗续娶了张氏——张良娣，也就是现在的张皇后。

张良娣是一位十分有背景的女子。她是南阳西鄂人，祖母窦氏是唐玄宗的母亲昭成皇太后的妹妹。武则天执政时期，昭成皇太后被武则天所杀后，武则天下诏让窦氏入宫抚养李隆基。李隆基即皇帝位以后，为报达窦氏养育之恩，封她为邓国夫人。张良娣是窦氏第四子张去逸的女儿。韦妃没有了以后，张良娣得到李亨的专宠。

张良娣体态丰硕，而且秀外慧中而且口才十分好，能够体会理解肃宗的心理，在肃宗最无助的时候曾给了他感情上的支持。玄宗逃往西蜀的时候，多亏张良娣从旁劝谏，肃宗才定计北去灵武。

等到肃宗、张良娣一行到达了朔方灵武，以李光弼、郭子仪为首的各镇兵马也陆续到了。诸大臣都要求肃宗即位来稳定军心。于是肃宗在灵武城南楼即皇帝位，是为肃宗，改明年为至德元年，遥尊李隆基为上皇天帝。

因为这段历史，肃宗对于张皇后是言听计从，很多朝政大事也多经张皇后参议，以至于后来张皇后独立处理一些事情而不经肃宗之手。同时，自鱼朝恩做监军取得不错的效果后，肃宗开始信用宦官李辅国、程元振等操纵军政大权，宦官势力日益嚣张。张皇后又暗与李辅国连成一片，结为一党。

肃宗生有十四子，长子李豫，原被封为广平王，后进封为楚王，公元758年被立为皇太子。次子越王李系、三子齐王李倓以及其他十三个皇子对太子之位虎视眈眈，尤以齐王李倓为最，因李倓之母便是张皇后。

肃宗即位后，最初决定授建宁王李倓为元帅集天下兵马讨伐叛军，后经李泌入谏劝说，才下诏命广平王李豫为天下兵马元帅，统诸将东征，以至于后来立为太子。

对于李豫被立为太子，张皇后心存不满，便与李辅国拉上关系，勾接朝中重臣，意欲废太子而立齐王。后来又一想太子废后还有个越王，怎么也轮不到齐王啊，这出力不讨好的事张皇后一向是不做的，遂按下这个念头一心一意捞权势。

李辅国傍上张皇后之后，通过张皇后的力量取得了肃宗信任后，立刻投入到肃宗的旗下，并屡次在肃宗面前讲张皇后的不是。肃宗不察，也给了李辅国一部分权限，使李辅国平空做大了。

李辅国接着又推荐程元振在肃宗那儿谋得要职后，二人遂与张皇后日渐疏远。张皇后便开始另外物色合作伙伴，而此时回京听封的徐来立刻跃入张皇后的眼睛。

徐来手握重兵，又立有军功，唯一的靠山玄宗皇帝也靠边站了。张皇后便在肃宗的枕头边上吹风，将和政公主抛出套牢徐来。肃宗对此却是瞎子吃饺子——心中有数。趁徐来进宫谢恩之际演了一出敲山震虎之戏。

徐来熟读后世的《三言》，对于庄周梦蝶里的片断记忆犹新，尤其是庄周之妻的表现更是记忆深刻。

徐来遂拜伏于肃宗面前，说道“臣连番征战，身上多处负伤，请陛下准臣还乡养病。”肃宗大笑着将徐来扶起，立刻赐了长安郊外的一处庄园以做休养之处，并美其名日“现在天下还不太平，朕早晚还需要与爱卿议事，军职可以兼着滴。”

回府后徐来立刻打点行装，带着和政公主和一众将官出了长安城，向着长安南二十里外的一所庄园进发。

草草安顿下来之后，徐来便带人将庄园前前后后考察了一遍后得出一个结论——此处易做别墅。

按风水先生的说法就是此处前有照，后有靠，左右山环绕，是一处风水宝地，如果人居住则大富大贵，如果做阴宅则子孙位列三公。

徐来怕大军猛地闲下来会生事，于是组织高级将领召开了一次动员会议，要将此处建一个大型别墅区——玲珑别业。

考虑到大家的积极性，于是每位参会的将领人手分一套，多出来的三百五十多套对外销售，这个收入拿出三成做大家的活动经费，凡是参与工程的兵卒每人一两银子酒钱。

诸将一听立刻来了兴趣，当场在徐来手绘的草图上划分了自己的地盘，徐来立刻着手要清冥和阿财请人规划和做预算。

三个月后选了一个吉日破土动工，十万大军只用了二十天就完成了全部工程。徐来又另修了一条通往长安城的高速路。所谓高速路，无非就是做了一条宽可四辆大车并排行驶、路面全部用光滑的青石砌成，路两边用木栅栏给围住，每隔一里路就安排一个岗哨。

普通官道车马从庄园到长安城门要二个时辰，而走这条高速路则只需半个时辰。当然这条路只服务于庄园内的住户。

庄园内的别墅共有四百三十套，其中独栋五十套，双拼一百套，三联四联共二百八十套，每套面积从四百平方米到一千平方米不等，私家花园算赠送面积。

别墅主休建筑三层，地下一层，地面二层，留有超大车马房。房间格局从六室二厅到十八室六厅，并有独立书房和健身室，阳台、厨房、卫生间应有尽有。每套别墅根据面积不等允许自带三至十名亲兵打理内务。

较成都商铺先进之处就是用大量水车往顶层蓄水池送水，所以室内有了自来水。整体建设风格则采用现代中式。

别墅外围则按清冥的建议做了一道小型城墙，外用濠沟接通河水，再外面则布了数个陷井。唯一的出口就是高速路的入口。