虢國夫人的妹妹是四大美人之一的楊貴妃。楊貴妃生於蜀中，天寶十一年（752年），李林甫死，用其堂兄楊國忠當宰相，管領四十多個特派官。十二年，加贈司空。

國忠的大兒子楊暄，與延和郡主成婚，又拜為銀青光祿大夫、太常卿、兼戶部侍郎。小兒子楊朏，與萬春公主成婚。貴妃的堂弟秘書少監楊鑑，與承榮郡主成婚。一門之中，有一個貴妃，兩個公主，三個郡主，三個夫人。

楊貴妃得寵於唐玄宗以後，唐玄宗將虢國夫人和楊貴妃的兩個姐姐一起迎入京師。唐玄宗稱楊貴妃的三個姐姐為皇姨，並賜以住宅，天寶初年分封她們三人為國夫人，分別為虢國夫人、韓國夫人和秦國夫人。時在天寶七載（748年）冬十一月庚午。

當時，三夫人秉承恩澤，出入宮掖，勢傾朝野，公主以下皆持禮相待。建平公主和信成公主以與妃家忤，至追內封物，駙馬都尉獨孤明也因此失官。

史書未記載虢國夫人的名字，在電視劇中，通常稱她為“楊玉瑤”，具體來源不得而知。有指為“楊玉瑤”一名為現代影視劇杜撰。“玉瑤”一名與楊貴妃傳說的小字“玉環”，符合起名的字輩，但與她們父輩的字輩衝突（父輩字輩第三個字同為“王”字部首）。

虢國夫人的兒子裴徽，與代宗的女兒延光公主成婚，女兒則是讓帝李憲的兒媳。 唐玄宗賜與楊國忠的府第，在宮廷東門的南邊，與虢國夫人府第相對。韓國、秦國兩夫人的府第，也都屋脊棟宇相連線。玄宗去時，一定五家都走到，並允賜宮廷燕樂。護從皇帝的時侯，每家是一隊，每隊穿一色衣，五家合隊相映，象百花爭豔，掉在路上的釵飾、鞋履、寶玉、珠翠，光彩耀眼，拾來成把。

曾經有人低身去看車子，幾天身上都有香氣。駝馬千餘，用劍南旌節儀仗作為前導。出去設筵席，回來有酒饌。遠近饋送的珍玩狗馬，內侍歌兒，來往不絕於道路。

後來秦國夫人先死，而虢國夫人、韓國夫人和楊國忠，更加興盛。虢國夫人又與楊國忠私通，毫不加點，每連上朝進見，兩人並馬馳奔，互相調笑，隨從官員男女百餘騎，舉著燭矩，如同白日，鮮衣美服，大搖大擺，路旁觀眾，形成一堵人牆。莫不驚歎。

天寶十四年（755年）十一月，安祿山見時機成熟，在範郡造反，以誅楊國忠為藉口，列舉楊國忠、虢國夫人、貴妃三人罪行，沒人敢上奏。馬嵬兵變，貴妃賜死的時候，虢國夫人先到陳倉的官店，國忠被誅的訊息傳到，縣令薛景先立即率領吏卒追她，她跑進竹林裡，以為賊兵到了，先殺了兒子，接著又殺姑娘。

國忠的妻子裴柔說：“娘子怎麼不給我行個方便呢？”於是虢國夫人把她和她的女兒也一同殺掉了。接著自刎，但沒死。被捉著關到牢裡，她還問：“你們是官軍，還是賊軍？”獄吏說：“都有。”結果血凝住喉頭，死了！她們被一併埋在東城十多步路北的楊樹下……

安史之亂後，楊貴妃、楊國忠相繼遇難，虢國夫人與子女及楊國忠妻子裴氏一同逃奔陳倉，縣令薛景仙聞訊追趕。虢國夫人殺死兒子裴徽，並殺楊國忠妻裴柔，自刎未死，後被抓獲關入獄中，不久死去，葬陳倉郊外。