范冲（四川成都人），《资治通鉴》参编者范祖禹的长子，赵鼎姻亲。来常第二年（1128）秋被招入朝，奉命重修神宗、哲宗两朝实录，又兼高宗侍读，为高宗讲解《春秋左传》，时寓规谏。后任孝宗老师、龙图阁直学士。绍兴十一年（1141）底，卒于婺州（金华），后葬于黄冈山永年寺傍容车山。

魏矼（安徽沥阳人），唐相魏征之后，来常当年（1127）任常山知县，第四年（1130）奉调入京，历任监察御史、殿中侍御史等职。绍兴四年（1134）扈驾从征，受命督视各路抗金军马。当时刘光世、韩世忠、张浚三大将势均力敌，互怀私隙，莫肯协心。魏矼从中周旋，终使三帅重归于好，合力御敌，屡战屡捷。后因与秦桧政见不合，要求卸任，一直隐居永年寺，直到绍兴二十一年（1151）终老。至此，赵鼎、范冲、魏矼三人永远地留在了常山这片土地上。

赵、范、魏三贤，在各自职位上忠实地实践着自己的报国雄心，作出了可歌可颂的业绩。同样，他们在常山期间，也做了不少好事。他们因政见相同，意气相投，经常与黄岗山永年寺高僧了空和尚一起吟诗唱和，针砭政局时弊，畅谈爱国抱负，探求治国之策；组织同迁常山的北方名士，主动与当地百姓打成一片，帮助排忧解难；出面筹集资金，帮助永年寺建成了文殊殿，修葺原有寺院舍屋，等等。当地百姓有感于“三贤”的为人处事，敬仰之心无以言表，于是将他们筹资新建的永年寺文殊殿称为“三贤堂”，将他们相互吟唱的诗作汇编成《三贤唱和诗》传世。

翁蒙之（福建武夷山人），历任常山尉、监登闻鼓院、军器监丞等，相对“三贤”而言是个晚辈。绍兴十八年（1148），赵汾奉旨护送其父赵鼎的灵柩回到常山，时任衢州太守的章杰为讨好秦桧，暗令常山县尉翁蒙之在葬礼现场拘捕参加葬礼的士大夫，并搜查赵鼎私人信件，以求找到可供谋害赵鼎等人的证据。翁蒙之为人正直尚义，提前修书告知赵汾，因此后来搜查时根本找不出什么问题，从而使赵家幸免于这场灾祸。就因为这件事，当地百姓牢牢记住了翁蒙之，将他与“三贤”相提并论，合称为“四贤”。

许多年后的一个初春，一个暴雷将原本完整的永年寺后山岩劈出一块大石壁。事后人们发现大石壁上隐约可见四个人影，其中三人居左上角，呈站立相拥状，另一个立于右边，呈抱拳仰望状。这也许是一个偶然的自然现象，可常山人们凭着对赵鼎、范冲、魏矼和翁蒙之的崇敬之情，认定大石壁是一面天镜，照映下了这四位贤人的高大形象，尊称这块大石壁为“四贤壁”。