至德二年(757年)四月，郭子儀大軍來到長安以北，杜甫冒險從城西金光門出長安，越過對立的兩軍，到鳳翔(今陜西寶雞)與蘇宗會師。5月16日被蘇宗授予左拾遺，故稱“杜拾遺”。沒想到，杜甫不久就因為搶救房屋觸怒了蘇宗，被流放到化州(今華縣)，負責祭祀、音樂、學校、選舉、醫療、考試。到了愛荷華後，杜甫非常沮喪和煩惱。他經常到西溪河畔的正仙閣(今杏林鎮舊觀臺附近)去解憂。他在《題正亭》、《初秋苦辣物語》、《獨立》、《瘦馬行》等詩中，表達了對仕途失意、世態炎涼、奸詐之人的感嘆和憤懣。杜甫被宰相張高救下，被釋放。但“皇帝在記錄上不是很用心”，從此蘇宗不再重用杜甫。今年九月，長安被收復。11月，杜甫回到長安，仍留在那裏收集遺體。他雖然忠於職守，但最終因方毅案受到牽連，於甘源元年(758年)六月被降職參軍。