目不忘，善写文章，长于辩论，如果发挥其长，在那个乱世出英雄的时代，定能脱颖而出。但是，他的坏脾气也许是天生的，后来也不克制，急躁、傲慢、怪诞，动不动就开口骂人，因而得罪了不少人，到最后喷痛快了，也就糊里糊涂、年纪轻轻丧了命。
孔融笔下评价祢衡道：淑质贞亮，英才卓砾。初涉艺文，升堂睹奥。目所一见，辄诵于口；耳所瞥闻，不忘于心。性与道合，思若有神。弘羊潜计，安世默识，以衡准之，诚不足怪。忠果正直，志怀霜雪。见善若惊，疾恶若仇。任座抗行，史鱼厉节，殆无以过也。鸷鸟累伯，不如一鹗。使衡立朝，必有可观。飞辩骋辞，溢气坌涌，解疑释结，临敌有余。昔贾谊求试属国，诡系单于；终军欲以长缨，牵致劲越。弱冠慷慨，前世美之。路粹、严象，亦用异才，擢拜台郎，衡宜与为比。如得龙跃天衢，振翼云汉，扬声紫微，垂光虹蜺，足以昭近署之多士，增四门之穆穆。钧天广乐，必有奇丽之观；帝室皇居，必蓄非常之宝。若衡等辈，不可多得。