常衮登第后由太子正字授补阙起居郎，永泰元年（765年）授中书舍人。大历十二年（777年）拜相，杨绾病故后，独揽朝政。以文辞出众而又登科第为用人标准，堵塞买官之路。对朝中众官俸禄亦视其好恶而酌定。封河内郡公。德宗即位后，被贬为河南少尹，又贬为潮州刺史。不久为福建观察使。常衮注重教育，增设乡校，亲自讲授，闽地文风为之一振。建中四年（785年）死于任上。享年五十五岁，追赠为尚书左仆射。
云辟御筵张，山呼圣寿长。玉阑丰瑞草，金陛立神羊。
台鼎资庖膳，天星奉酒浆。蛮夷陪作位，犀象舞成行。
网已祛三面，歌因守四方。千秋不可极，花发满宫香。
静忆溪边宅，知君许谢公。晓霜凝耒耜，初日照梧桐。
涧鼠喧藤蔓，山禽窜石丛。白云当岭雨，黄叶绕阶风。
野果垂桥上，高泉落水中。欢荣来自间，羸贱赏曾通。
月满珠藏海，天晴鹤在笼。馀阴如可寄，愿得隐墙东。
可怜云木丛，满禁碧濛濛。色润灵泉近，阴清辇路通。
玉坛标八桂，金井识双桐。交映凝寒露，相和起夜风。
数枝盘石上，几叶落云中。燕拂宜秋霁，蝉鸣觉昼空。
翠屏更隐见，珠缀共玲珑。雷雨生成早，樵苏禁令雄。
野藤高助绿，仙果迥呈红。惆怅缭坦暮，兹山闻暗虫。
稍稍晨鸟翔，淅淅草上霜。人生早罹苦，寿命恐不长。
二十学已成，三十名不彰。岂无同门友，贵贱易中肠。
驱马行万里，悠悠过帝乡。幸因弦歌末，得上君子堂。
众乐互喧奏，独子备笙簧。坐中无知音，安得神扬扬。
愿因高风起，上感白日光。
塞外悲风切，交河冰已结。瀚海百重波，阴山千里雪。
迥戍危烽火，层峦引高节。悠悠卷旆旌，饮马出长城。
寒沙连骑迹，朔吹断边声。胡尘清玉塞，羌笛韵金钲。
绝漠干戈戢，车徒振原隰。都尉反龙堆，将军旋马邑。
扬麾氛雾静，纪石功名立。荒裔一戎衣，灵台凯歌入。
吾观天地图，世界亦可小。落落大海中，飘浮数洲岛。
贤愚与蚁虱，一种同草草。地脉日夜流，天衣有时扫。
东山谒居士，了我生死道。目见难噬脐，心通可亲脑。
轩皇竟磨灭，周孔亦衰老。永谢当时人，吾将宝非宝。