李白根据唐玄宗和杨妃在宫中在沉香亭观赏牡丹花而想出来的。

诗句“云想衣裳花想容”出自大诗人李白的诗作《清平调·其一》。唐玄宗天宝二年（743年）或天宝三年（744年）春天的一日，唐玄宗和杨妃在宫中在沉香亭观赏牡丹花，伶人们正准备表演歌舞以助兴。唐玄宗却说：“赏名花，对妃子，岂可用旧日乐词。”因急召翰林待诏李白进宫写新乐章。李白奉诏进宫，即在金花笺上作了三首诗，此诗句便是其中一首诗的一句。