唐代的幕府要求是很严格的。杜甫每天天刚亮便入府办公，夜晚才能出来。严武击败吐著，也收复失地，立下功业，可是他用度毫不限制，杜甫对严武不加限制的用度也常有所提醒。他们常一起登山临水饮酒赋诗互相唱和，那知这却给杜甫招来了幕僚的妒息、攻击。在极端痛苦的时刻，杜甫想到孔雀不免被辱，历史上多少伟大人物也难免受困，以此勉强自慰。这时杜甫的身体也渐渐难以支持了。他早年就有肺病、疟疾，这时又得了一种新病风痹。坐久了，四肢感到麻痹。

每当夜深人静，明亮的月光透过窗棂，凄厉的角声时断时续，杜甫独宿幕府，感到无限凄凉。

“我应当做垂钓的渔翁，桃田的农夫，可是为了生活，为了和严武的友谊，却来到了节度使幕府，简古成了笼中鸟这种单调呆板的生活，这种被嫉妒受攻击的日子，怎么能继续下去?”

“风尘流落， 已将十年。 兄弟分散，音书断绝。不知哪年哪月，才能重返家园，兄弟团聚?”杜甫又想到了故乡，想到了分散的弟兄。

杜甫辗转反侧，夜不成寐。他终于写成了《宿府》一首:

清秋幕府井梧寒，独宿江城蜡炬

永夜角声悲自语，中天月色好谁看?

风尘荏苒音书绝，关塞萧条行路难。

已忍伶俜十年事，强移栖息一枝安

杜甫短期请假回到了草堂。

“你还是辞了这个官职吧。”知道他在幕府中的景况后，杨氏关切地说。

沉默了一阵之后，杜甫说:“一 方面是幕府生活的折磨，一方面是挚友一个个病死了。去年八月，房琯病死在阆中僧舍。最近郑虔含冤死在海角，苏源明因为米贵，饿死长安。我远在巴蜀，不能前去吊祭。在我一生中，广文和源明是最了解我、最同情我的人，可现在都死了……”

杜甫假满回到节度署中后，又海次写诗给严武提出辞职，次年春天， 严武终于答应了他的请求。

杜甫在幕府里周旋了几个月，受尽苦楚，好容易回到草堂，本想过他平时向往的田园生活，不料正当他在美好的春日伐竹除草修理茅屋时，严武在四月里忽然死去了。

严武一死，杜甫失去了依靠，只得在五月率领家人离开草堂，坐船东下。临行，写了这样一首诗:

五载客蜀郡，一年居梓州。如何关塞阻，转作潇湘游。

万事已费发，残生随白鸥。安危大臣在，不必泪长流。

译成现代汉语，便是:

五年做客成都，中间滞留梓州一年多。为什么又要东下潇湘?难道不知道关山险组，遍地干戈!

过去是万事无成，现在是一头黄发，今后还不是仍旧像白鸥一样，飘无定所！

国家的安危，自有大臣考虑，你何必牵肠挂肚，涕泪纵横。

全诗寄托了诗人对大半生浪迹四方壮志未酬的无限感慨。