据记载，杨贵妃曾两次被遣回娘家。第一次是天宝5年，即杨贵妃被册封的第二年，贵妃因嫉妒触怒了玄宗，被遣回娘家。贵妃被赶出宫后，玄宗忽然感到人去楼空，有一种不可名状的孤独感和空虚感。玄宗茶饭不思，还动不动就对左右侍从乱发脾气，并且令人将御膳送到杨家，当夜将贵妃接回宫中，从此对贵妃更加宠爱。
第二次是天宝9年，贵妃因违背玄宗旨意，被遣送娘家。后来贵妃认为自己骄悍不逊，有些过分，便剪下一绺头发，让人带给玄宗并说：“有罪当死，身上的一切都是皇上恩赐，只有头发可以献上报答皇恩。”玄宗大为感动。通过这两次，两人之间那种难分难舍的感情又更深一层。
按照皇家惯例，后妃触怒圣上，只能在宫中处治，重则斩杀，轻则囚禁或被打入冷宫，从不见有送回娘家的。玄宗却开了这个特例，如同寻常夫妻吵架一样，留下了回旋和好的余地。由此可见，玄宗并非视贵妃为玩物，他们能象普通夫妇一样互相迁就。两人之间的感情超越了帝王与妃子的关系，可以说，玄宗是将贵妃当作伴侣、妻子看待的。
天宝十载秋，七夕之夜，玄宗与贵妃凭肩而立，因仰天感牛郎织女重逢的悲欢场面，密誓要生生世世结为夫妻，言毕，抱手呜咽。这就是白居易《怅恨歌》所写的“七月七日长生殿，夜半无人私语时，在天愿作比翼鸟，在地愿为莲理枝”。在七夕之夜，对天起誓，足见爱的至深，情的至诚。说明他们生死与共超乎寻常的爱情的确是存在的。
有一年宫中的橘树结了许多柑橘，玄宗发现其中有一个“合欢实”（即两个柑橘长在一起）。他欣喜万分，与贵妃一起玩赏，并说此橘似通人意，知你我心心相印，固如一体。然后同坐一席共尝“合欢实”。
玄宗与贵妃虽是帝王与妃子的关系，但从日常生活的点滴中，可以发现，他们象一对和睦相爱的夫妇，更象热恋中的少男少女。
马嵬坡兵变，不舍贵妃，即舍江山，熟轻熟重，玄宗自然知晓，国家危难的关键时刻，当公与私发生冲突时，玄宗只能舍小家保大家。
贵妃死后，玄宗一直耿耿难忘，忧虑难眠，几次要求罗公远帮他招魂，以求与贵妃相见，罗公远拒绝了玄宗的请求，以人鬼殊途劝解。
收复长安后，玄宗回到宫中，想祭供贵妃，要改葬，后因政局而罢，于是让人画了贵妃的像挂在殿中，朝夕与之相伴。对于宫中的一草、一木、一房、一院都令其触景伤情。“芙蓉如画柳如眉，对此如何不垂泪”。“夕殿萤飞思悄然，残灯挑尽未成眠。迟迟钟鼓初长夜，耿耿星河欲曙天。鸳鸯瓦冷霜华重，翡翠衾寒谁与共。悠悠生死别经年，魂魄不曾入梦来。”玄宗也就是在这样孤独伤感的思念中，日渐衰老，几年后就追随贵妃而去，这已是后话了。