绾素以德行著闻，质性贞廉，车服俭朴，居庙堂未数月，人心自化。御史中丞崔宽，剑南西川节度使宁之弟，家富于财，有别墅在皇城之南，池馆台榭，当时第一，宽即日潜遣毁拆。中书令郭子仪在邠州行营，闻绾拜相，座内音乐减散五分之四。京兆尹黎干以承恩，每出入驺驭百余，亦即三日减损车骑，唯留十骑而已。其余望风变奢从俭者，不可胜数，其镇俗移风若此。
绾有宿痼疾，居职旬日，中风，优诏令就中书省摄养，每引见延英殿，特许扶入。时厘革旧弊，唯绾是瞻，恩遇莫二。绾累抗疏辞位，频诏敦勉不许。及绾疾亟，上日发中使就第存问，尚书御医，旦夕在侧，上闻其有间，喜见容色。数日而薨，中使在门，驰奏于上，代宗震悼久之，辍朝三日。诏曰：
王者之于大臣也，存则寄其腹心，均于肢体，参于军国之重，叙以阴阳之和；殁则诔其事功，加之命数，告于宗庙之祭，襚以绂冕之章，则九原可归，百辟知劝。故朝议大夫、守中书侍郎、同中书门下平章事、集贤殿崇文馆大学士、监修国史、上柱国、赐紫金鱼袋杨绾，性合元和，身齐律度，道匡雅俗，器重宗彝。宽柔敬恭，协于九德；文行忠信，弘于四教。内无耳目之役，以孝悌传于家；外无车服之容，以贞实形于代。西掖专宥密之地，南宫领选举之源。以儒术首于国庠，以礼度掌于高庙，简廉其质，条职同休。顷以任非其才，毒流于政，爰登清净之辅，庶谐至理之期。道风既穆于朝班，俭德已行于海内。虽贤人之业，冀于可久；而夫子之命，末如之何。方有凭依，遽此沦谢，屏予之叹，震悼良深。所怀莫从，长想何及。况历官有素丝之节，居家无匹帛之余，故饰以华衮，增其法赙，备膺典策，载贲朝经。可赠司徒。
又诏文武百僚临于其第，遣内常侍吴承倩会吊，赠绢千匹、布三百端。上深惜之，顾谓朝臣曰：“天不使朕致太平，何夺我杨绾之速也！俯及大敛，与卿等悲悼同之。”宰辅赙赠恩遇哀荣之盛，近年未有其比。太常初谥曰：“文贞”。诏曰：“褒德劝善，《春秋》之旧章；考行易名，礼经之通典。垂范作则，存乎格言。朝议大夫、中书侍郎、同中书门下平章事、集贤殿崇文馆大学士、修国史、上柱国、赐紫金鱼袋、赠司徒杨绾，履道居贞，含和毓德，行为人纪，文合典谟。清而晦名，无自伐之善；约以师俭，有不矜之谦。方册直书，秩宗相礼，辞称良史，学茂醇儒。委在枢衡，掌兹密命，弥契沃心之道，累陈造膝之诚。将以布天下五行之和，同君臣一德之运，遽轸藏舟之叹，未展济川之才。素业久而弥彰，清风殁而可尚。自古饰终之义，皆锡以美名。谥法曰：‘忠信爱人曰文，平易不懈曰简。’宜谥曰文简。”比部郎中苏端，性疏狂，嫉其贤，乃肆毁黩，异同其议。上怒，贬端为广州员外司马。
绾俭薄自乐，未尝留意家产，口不问生计，累任清要，无宅一区，所得俸禄，随月分给亲故。清识过人，至如往哲微言，《五经》奥义，先儒未悟者，绾一览究其精理。雅尚玄言，宗释道二教，尝著《王开先生传》以见意，文多不载。凡所知友，皆一时名流。或造之者，清谈终日，未尝及名利。或有客欲以世务干者，见绾言必玄远，不敢发辞，内愧而退。大历中，德望日崇，天下雅正之士争趋其门，至有数千里来者。以清德坐镇雅俗，时比之杨震、邴吉、山涛、谢安之俦也。
崔祐甫，字贻孙。祖晊，怀州长史。父沔，黄门侍郎，谥曰孝公。家以清俭礼法，为士流之则。祐甫举进士，历寿安尉。安禄山陷洛阳，士庶奔迸，祐甫独崎危于矢石之间，潜入私庙，负木主以窜。历起居舍人、司勋吏部员外郎，累拜御史中丞、永平军行军司马，寻知本军京师留后。性刚直，无所容受，遇事不回。累迁中书舍人。时中书侍郎阙，祐甫省事，数为宰相常衮所侵，祐甫不从；衮怒之，奏令分知吏部选，每有拟官，衮多驳下，言数相侵。时硃泚上言，陇州将赵贵家猫鼠同乳，不相为害，以为祯祥。诏遣中使以示于朝，衮率百僚庆贺，祐甫独否。中官诘其故，答曰：“此物之失常也，可吊不可贺。”中使征其状，祐甫上奏言：
臣闻天生万物，刚柔有性，圣人因之，垂训作则。《礼记郊特牲》曰：“迎猫，为其食田鼠也。”然则猫之食鼠，载在礼典，以其除害利人，虽微必录。今此猫对鼠不食，仁则仁矣，无乃失于性乎！鼠之为物，昼伏夜动，诗人赋之曰：“相鼠有体，人而无礼。”又曰：“硕鼠硕鼠，无食我黍。”其序曰：“贪而畏人，若大鼠也。”臣旋观之，虽云动物，异于麋鹿麝兔，彼皆以时杀获，为国之用。猫受人养育，职既不修，亦何异于法吏不勤触邪，疆吏不勤扞敌？又按礼部式具列三瑞，无猫不食鼠之目，以兹称庆，臣所未详。伏以国家化洽理平，天符洊至，纷纶杂沓，史不绝书。今兹猫鼠，不可滥厕。若以刘向《五行传》论之，恐须申命宪司，察听贪吏，诫诸边候，无失徼巡。猫能致功，鼠不为害。
代宗深嘉之。衮益恶祐甫。
代宗初崩，发哀于西宫，衮以独受任遇，哀逾等礼。例，晨夕临者，皆十五举音，而衮辄哀恸涕泗，或中墀返哭，顾慕若不能去，同列者皆不悦。及衮与礼司议群臣丧服，曰：“案《礼》，为君斩衰三年。汉文权制，犹三十六日。国家太宗崩，遗诏亦三十六日，而群臣延之，既葬而除，约四月也。高宗崩，服绝轻重，如汉故事，武太后崩亦然。及玄宗、肃宗崩，始变天子丧为二十七日，且当时遗诏虽曰：‘天下吏人三日释服’在朝群臣实服二十七日而除，则朝臣宜如皇帝之制。”祐甫执曰：“伏准遗诏，无朝臣庶人之别，但言‘天下人吏，敕到后出临，三日皆释服’，则朝野中外，何非天下？凡百执事，谁非吏职？则皇帝宜二十七日而群臣当三日也。”衮曰：“案贺循注义，吏者谓官长所署，则今胥吏耳，非公卿百僚之例。”祐甫曰：“《左传》云：‘委之三吏。’则三公也。史称循吏、良吏者，岂胥徒欤？”衮曰：“礼非天降地出，人情而已。且公卿大臣，荣受殊宠，故宜异数。今与黔首同制，信宿而除之，于尔安乎？”祐甫曰：“若遗诏何？诏旨可改，孰不可？”衮坚诤不服，而声色甚厉，不为礼节。又衮方哭于钩陈之前，而衮从吏或扶之，祐甫指示于众曰：“臣哭于君前，有扶礼乎？”衮闻之，不堪其怒。乃上言祐甫率情变礼，轻议国典，请谪为潮州刺史。内议太重，改为河南少尹。
初，肃宗时天下事殷，而宰相不减三四员，更直掌事。若休沐各在第，有诏旨出入，非大事不欲历抵诸第，许令直事者一人假署同列之名以进，遂为故事。是时，中书令郭子仪、检校司空平章事硃泚，名是宰臣，当署制敕，至于密勿之议，则莫得闻。时德宗践祚未旬日，居不言之际，衮循旧事，代署二人之名进。贬祐甫敕出，子仪及泚皆表明祐甫不当贬谪，上曰：“向言可谪，今言非罪，何也？”二人皆奏实未尝有可谪之言，德宗大骇，谓衮诬罔。是日，百僚苴绖序立于月华门，立贬衮为河南少尹，以祐甫为门下侍郎、平章事，两换其职。祐甫出至昭应县，征还。寻转中书侍郎，修国史，仍平章事。
上初即位，庶务皆委宰司。自至德、乾元中，天下多战伐，启奏填委，故官赏紊杂。及永泰之后，四方既定，而元载秉政，公道隘塞，官由贿成。中书主书卓英倩、李待荣辈用事，势倾朝列，天下官爵，大者出元载，小者自倩、荣。四方赍货贿求官者，道路相属，靡不称遂而去，于是纲纪大坏。及元载败，杨绾寻卒，常衮当国，杜绝其门，四方奏请，莫有过者，虽权势与匹夫等。非以辞赋登科者，莫得进用。虽贿赂稍绝，然无所甄异，故贤愚同滞。及祐甫代衮，荐延推举，无复疑滞，日除十数人，作相未逾年，凡除吏几八百员，多称允当。上尝谓曰：“有人谤卿所除拟官，多涉亲故，何也？”祐甫奏曰：“臣频奉圣旨，令臣进拟庶官，进拟必须谙其才行。臣若与其相识，方可粗谙，若素不知闻，何由知其言行？获谤之由，实在于此。”上以为然。“)