在《史记·孔子世家》的记载中，有许多同时代的隐士对于“知其不可为而为之”的孔子极尽嘲笑“矮化”之能事。或讽刺他“四体不勤，五谷不分”；或嘲笑他“自腰以下不及禹三寸，垒垒若丧家之犬”；或策反孔子的学生:与其追随“避人之士”（指孔子），不如跟随避世之士（指隐士）；或暗示孔子应改弦易辙，“往者不可谏，来者犹可追也”。《庄子·德充符》塑造了一个肢体残缺名叫“叔山无趾”的人物，向孔子求教并进而论道，最后使得孔子甘拜下风，自惭形秽。这是一个典型的例子，实际上《庄子》一书中还有许多“矮化”孔子的故事。

道家“矮化”孔子在历史上是有传统的。《列子·汤问》编造了一个故事:孔子东游，看见两个小孩在辩论早晨的太阳和中午的太阳哪个离我们近？双方从形状、温度出发各执一词，究竟谁对谁错，“‘孔子不能决也，两小儿笑曰:‘孰为汝多知也？’”实际上这个问题有相当的难度，两千多年后天文学家经过精密的计算后才能得出答案。但孔子不是圣人吗？按照宋儒朱熹的说法:“圣贤无所不通，无所不能，哪个事理会不得？”但是无所不知的圣人对小孩的疑问也不能回答，这不能不说是一种巧妙的讽刺。

第三种形象是“正统化”。自从汉代董仲舒提出罢黜百家、独尊儒术的主张以来，孔子的形象就逐渐趋于正统化。董仲舒声称:“《春秋》大一统者，天地之常经，古今之通谊（义）也。……诸不在六艺之科，孔子之术者，皆绝其道，勿使并进。邪辟之说灭息，然后统纪可一，而法度可明，民知所从矣。”原先对孔子的形象无论是“圣化”还是“矮化”，都是一种民间行为。现在董仲舒借助国家机器的力量，把孔子思想置于至高无上的地位，来强行统一天下人的思想，使之成为一种国家的意识形态。董仲舒极力推崇孔子所作的《春秋》一书，认为“《春秋》之道，大得之则王，小得之则霸”。《春秋》一书具有“大一统”的观点，追求“六合同风，九州共贯”，包含了国家政治版图与意识形态的双重统一。因此，统治者掌握了《春秋》一书的思想本质，就可以称王天下，至少也可以称霸天下。

稍后，刘向《说苑·建本》指出:“有国家者，不可以不学《春秋》。生而尊者骄，生而富者傲，生而富贵又无鉴而自得者鲜矣。《春秋》，国之鉴也。”明确指出《春秋》是统治者必修的教科书。这样看来，孔子到了汉代，在国家政治思想领域已树立了合法正统的形象:他的著作《春秋》是治理天下的一面镜子，孔子本人则是王者之师。

第四种形象是“神化”。孔子在汉代除了被官方及御用学者董仲舒等人独尊而“正统化”之外，还受到另一批公羊学派儒生的高度“神化”。在《春秋纬·演孔图》、《孝经援神契》等书中，从孔子的出生、相貌至行为方式进行了一系列精心编造的“神化”:1、孔子并非是俗人凡胎，他诞生于人神交合之中。孔子父母“祷尼丘山，感黑龙之精，以生仲尼”。2、孔子生有异相殊表:“孔子长十尺，海口，尼首，方面，月角日准，河目龙颡，斗唇昌颜”，“手垂过膝，耳垂珠庭，眉十二采，目六十四理，立如凤峙，坐如蹲龙”。3、孔子作为奉天承运的“素王”，编撰《春秋》、《孝经》，为后世制定了治理天下的大法，带领七十二位弟子朝拜北斗星，这时天空“白雾摩地，赤虹自上而下化为黄玉，长三尺，上有刻文，孔子跪受而读之，曰:宝文出，刘季握，卯金刀，在轸北，字禾子，天下服。”孔子在此预言刘邦将取代秦王朝而登上帝位。