敕賜李白為閒散清閒學士，所到之處，官司支給酒錢，文武官員軍民人等毋得怠慢；倘遇有事當上奏者，仍聽其具疏奏聞。

李白拜受敕命。玄宗又賜與錦被金帶與名馬安車。李白謝恩辭朝。他本無家眷在京，隻要奴秀士等；當下收了行裝，彆了眾僚友，出京而去。在朝各官，俱設席於長亭餞送。惟楊國忠、高力士、安祿山三人，挾恨不送；賀知章等數人，直送至百裡以外。方分袂而彆。李白因聖旨許他閒散清閒，出京以後，不即回籍；且隻向幽燕一起，但馳名山名勝的地點，肆意行遊，端的逢州支鈔，過縣給錢，觸景題詩，隨地喝酒，好不適意。一日行至幷州界中，該處所官員，都來迎候。李白一概推卻，隻借第宅安設行李，帶了幾個從人，騎馬出郊野，要旅遊本處山川。正行之間，隻見一夥軍牢打扮的人，執戈持棍，押著一輛囚車，飛奔前來。見李學士馬到，閃過一邊讓路。李白看那囚車中，囚著一個男人。阿誰男人，怎生模樣兒？

皎皎如玉，光嫩如瑩。體愈香，雲鬢慵整偏嬌樣。羅裙厭長，輕衫取涼，臨風小立神駘宕。細打量，芙蓉出水，不及美人妝。

安祿山隻因平時私與楊妃戲謔慣了，今當玄宗麵前，不覺失口戲言，幸得玄宗不疑；但楊妃已先為國忠危言所動，隻恐弄出事來，自這天今後，每見安祿山，必切切私囑，叫他說話緊密，出入謹慎。祿山亦曉得國忠責怪他，恐為他所算。又想國忠還不敷懼，那李林甫最能窺察人之隱微，這不是個好惹的，今楊李之交方合，倘二人合算我一人，老邁不便，不如討個外差暫避，且可徐圖弘遠之業。但恐貴妃與虢國夫人不捨他，是以遲疑未決。那邊楊國忠暗想：“安祿山將來必與我爭權，我必當翦除之；但他方為天子所寵幸，又有貴妃與虢國夫人等助之，孔殷難以動搖；隻不成留他在京，須設個法兒，弄他到邊上去了，漸漸的算計他便是。”正在籌量，卻好李林甫上奏一疏，請用番報酬邊鎮節度使。本來唐時邊鎮節度使，都用有才略、有聲望的文臣，如有功勞，便可入為宰相。今林甫單獨擅權，欲絕邊臣入相之路，奏稱文報酬邊帥，怯於矢石，無以禦侮；不若儘用番人，則勇而習戰，可為國度保衛。玄宗允其所奏，因而邊鎮節度使，都要改用番人。