杨炎刚当上宰相，坚决要为元载报仇，所有元载政敌的党羽无一幸免。适逢裴胄的一个部下将裴胄为官多年积攒的杂俸等钱贪污了，杨炎命酷吏员宇深查此事，裴胄被贬汀州司马。不久征召入朝担任少府少监，授予京兆少尹，因此官名犯父亲名讳而不就任，改任国子司业。升迁湖南观察都团练使，移任江南西道观察都团练使。先前江西观察使李兼裁减南昌军一千多人，收回部分资金粮食，作为月进献给朝廷，裴胄到任后，奏明事件的本末，取消了月进。适逢荆南节度樊泽移军镇守襄阳，宰相正商议替代人选，皇上首先提出由裴胄代替樊泽。裴胄一贯简俭，当时各道节度观察使竞相盘剥百姓增加赋税，以进奉为名，制作奇锦异绫。另外如有宦官前来宣读诏命，总是竭尽公家钱财来博取他们的欢心。裴胄对待他们很有分寸，都不过数金，除常规的赋税之外没有横征暴敛，设宴慰劳时也不过三爵酒，从不狂饮（纵情）作乐。当时的武将都蓄养了许多杂役宾客，这些宾客微有过失就奏请流放或处死。裴胄出身于书生，奏请将书记梁易从贬退，君子鄙视他招纳废退宾客不按礼法行事，众议也批评他。裴胄于贞元十九年十月去世，时年七十五岁，追赠右仆射，谥号为成。