齐高帝建元二年（公元480年）初春的一天，南京建康的大街上，熙熙攘攘，人来车往，一片喧宣闹声。忽然，在这闹哄哄的人群尽头，出现了一队人马，一辆华丽的马车跑在最前面，叮叮的车铃声有苦奏地响着。

车上坐着一一个人，手里拿着一卷皇帝的书，春风得意地向四外张望着,看那派头还真不小呢。他就是皇宫的尚书令褚渊。街上的行人纷纷闪到路旁，车队前呼后拥，鱼贯而过，直驰城外，留下一路飞腾的烟尘。这队人马到什么地方去呢?原来，褚渊奉齐高帝之命，专程去京日（今江苏镇江市）， 招聘一位赫赫有名的大隐士，这位隐士就是南齐的史学家、《晋书》的作者臧荣绪。要问减來绪为哈这样有名气，连皇帝都亲自下语书召他入宫，那还得从头说起。

臧荣绪是山东莒（今山东莒县）人，生于晋安帝义熙十年（公元414年）。他的祖父曾当过建陵的县令，他的父亲叫臧庸民，在国子学里担任助教。国子学是当时封建国家的最高学设在都城建康，专门培养王宫贵族的子弟。国子学的教师叫博士，助教是博上的副手，也常常给弟子讲学。

臧荣绪的家庭虽不是出身显贵的门阀大族，可也算个有一定地位的小官僚家庭，臧荣绪早年是受这种封建家庭薰陶的。臧庸民十分注意教育自己的儿子，臧荣绪几岁时就开始认字，以后又读“五经”。经书是儒家经典，它包括《诗》《书》、《礼》、《易》、《春秋》五部书。父亲经常对臧荣绪说，学了“五经”，就会懂得处世做人的根本，就不愁将来做不上大官。制臧荣绪似乎是理解父亲的心思。他很爱学习，而且非常刻苦，不久就能把“五经”的一些内容整段地背诵下来。父亲心里当然很满意，可臧荣绪并不满足，他总想找些其它书来读，以满足自己广泛的兴趣。但是父亲不允许，他只要臧荣绪专心致志地学好“五经”，其它什么书都不许接触。

有一天，臧荣绪偷偷钻进父亲的书房，找出一本司马迁的《史记》，刚翻了两页就被吸引住了。他兴奋地读着，忽而激动地念出声来，忽而又凝神沉思。那时正是盛夏时节，窗外一群孩子在做着游戏，树上的蝉声此起彼伏。可这切都没有把臧荣绪吸引到外边来，他被这本书迷住了。

突然“啪”的一声，吓了他一跳。抬头一看，父亲的一只大手按在桌上，满脸怒气地站在面前。他想躲也来不及了。父亲大发雷霆，叫臧荣绪跪在地上，把他严厉地训斥了一顿，还用竹板使劲打他的手，手被打得又红又肿。臧荣绪委屈极了，蒙头大哭了一场。