玄宗见之惊惋，即使力士召还。《资治通鉴》中只有六个字“杨贵妃复忤旨。”杨贵妃忤的是什么旨呢？《杨太真外传》记载：750年，天宝九载二月的一天，杨贵妃偷偷地吹唐玄宗大哥宁王李宪的紫玉笛，被唐玄宗看见了，以忤旨又被送出宫外。贵妃出宫后，剪下一绺青丝，托中使张韬光带给玄宗，玄宗大骇，又令高力士把她召回。
这两种说法都不可信，因为宁王死于开元二十九年二十九年十一月（（742年1月15日））薨，天宝九年（750年），已经死了八年。杨贵妃不可能与死人有染。对于杨贵妃吃姐姐的醋的说法，也仅在《集灵台.其二》作者张祜：虢国夫人承主恩，平明骑马入宫门。却嫌脂粉污颜色，淡扫峨眉朝至尊出现，不足为据。而且，在天宝年间，杨贵妃和她的姐妹们关系一直不错，说明唐玄宗和虢国夫人之间是清白的。
这次杨贵妃被撵可能是玄宗给杨家的一个下马威。因为杨贵妃的得宠，杨家也跟着显赫起来。随着地位的升高，杨家便无法无天了。杨家接受招待的规格已经超出了规定的界限；大肆收受贿赂；不仅如此，他们甚至还骑到了皇室的头上。《新唐书》中记载：“出入宫掖，恩宠声焰震天下。
每命妇入班，持盈公主等皆让不敢就位，建平、信成二公主以与妃家忤，至追内封物，驸马都尉独孤明失官。”皇上的亲妹妹在三位夫人面前只能让座而不敢就坐；唐玄宗的女儿信成公主因为和杨家人有矛盾，竟沦落到追回内府封赠东西，如再不处理，恐怕整个江山都成了杨家的了。玄宗生气了，杨家就是仗着有个贵妃撑腰，于是，杨贵妃再一次被撵回了家。
杨贵妃这次被送回家，是玄宗使用杀鸡给猴看的策略，就是要灭灭杨氏家族的威风。这一招果真很灵，杨家人慌了神，可又不好出面求情，杨贵妃更是终日以泪洗面。因为，这一次唐玄宗并没有急着把贵妃接回去，而且送走之后就再没有了消息。玄宗虽然没有派人去接杨贵妃，但心中还是很想念的。
一个叫吉温的人来游说唐玄宗，正中玄宗下怀。唐玄宗立刻派人看望贵妃，还将自己的御膳分了一半给她。杨贵妃见皇帝派人来看她了，感动地泪流满面，马上伏地认错，还剪下了自己的一缕头发，献给玄宗。唐玄宗一看到贵妃的青丝，派高力士将杨贵妃接回了宫。
杨贵妃知道玄宗没有她，便寝食不安，于是更为骄纵，杨家“出入禁门不问，京师长吏为之侧目”。陈鸿《长恨歌传》记载：居易歌曰姊妹弟兄皆列土，可怜光彩生门户；遂令天下父母心，不重生男重生女。