颜氏家族自根据颜鲁公文集和明代《陋巷志》等史籍记载，颜氏先人可直接追溯到黄帝轩辕氏。黄帝姬姓，娶西陵女嫘祖，生昌意。昌意娶蜀山女，曰昌仆，生高阳。高阳娶胜溃女，生称。称生卷章，卷章生吴回，吴回生陆终，陆终有六子，其五子曰晏安，其封国在邾。颜氏出自晏安，初为曹姓。历经唐、虞、夏、商，至周武王伐纣克商，建立周王朝，封晏安裔孙侠为邾子。侠生非（辉），非生成，成生车辅，车辅生将新，将新生訾父，訾父生夷甫，夷甫字伯颜，谥武公，《公羊传》称之为颜公。夷甫生二子：长子夏父，次子友。因颜公春秋时有功于周（齐），齐威公命为小邾子，别封其子友于郳，封国为小邾，附属于鲁，世代事鲁，为卿大夫。友为纪祖念本，别于曹姓其他支派，便以父字伯颜的“颜”为姓，始称颜友。所以说，颜友为颜姓第一人。后因小邾成了鲁国的附庸，所以颜友的后人多在鲁国任职。自颜友开始，友生爽，为鲁下大夫。爽生连，连生皦，皦生鸣，为鲁上大夫。鸣生音，为鲁司寇。音生羽，羽生训，训生简，简生箱，俱为鲁下大夫。箱生甝，甝生景，景生整，整生恤，恤生求，俱为鲁司寇。求生有，为鲁邑宰。有生颜无繇，字路（季路），谥“文裕”，为鲁卿士，小孔子六岁，是孔门早期弟子。无繇娶齐姜氏，于公元前五百二十一年（鲁昭公二十一年）生颜子。颜子名回，字子渊，是孔子最得意的弟子。颜回品学兼优，为后世儒家所称誉，同时对中华民族的传统文化，特别是道德文化，产生了深远的影响。自汉代始，历代帝王对其屡称“先师”、“复圣”，名列四配之首，七十二贤之冠，在人民的心目中有着极高的声望。颜子的祖先世代为卿士、大夫，名门望族，颜氏家族源远流长。