郗司空在北府，桓宣武恶其居兵权。
司空郗愔镇守北府的时候，桓温不满他掌握兵权。
郗于事机素暗，遣笺诣桓： 方欲共奖王室，脩复园陵。
郗愔对情势的了解一向很糊涂，还派人送信给桓温说： 正想和您一起辅佐王室，进军中原，修复被敌人毁坏的先帝陵寝。
世子嘉宾出行，于道上闻信至，急取笺，视竟，寸寸毁裂，便回。还更作笺，自陈老病，不堪人闲，欲乞闲地自养。
当时他的嫡长子郗超正出门去，在半路听说送信的人到了，急忙拿过他父亲的信来看，看完了，把信撕得粉碎，回去后又代他父亲另外写了封信，诉说自己年老多病，经不住世事烦扰，希望能找个闲散的官位修养。
宣武得笺大喜，即诏转公督五郡，会稽太守。
桓温收到信非常高兴，立刻下令把郗愔调为都督浙江东五郡军事、会稽太守。