孔文举十岁时，随他父亲到洛阳。当时李元礼有很大的名望，任司隶校尉;登让拜访的都必须是才子、名流和内外亲属，才让通报。孔文举来到他家，对掌门官说：“我是李府君的亲戚。”经通报后，入门就坐。元礼问道：“您和我有什么亲戚关系呢?”孔文举回答道：“古时候我的祖先仲尼曾经拜您的祖先伯阳为师，这样看来，我和您就是老世交了。”李元礼和宾客们无不赞赏他的聪明过人。太中大夫陈韪来得晚一些，别人就把孔文举的应对告诉他，陈韪说：“小时候聪明伶俐，长大了未必出众。”文举应声说：“您小时候，想必是很聪明的了。”陈韪听了，感到很难为情。

孔文举有两个儿子：大的六岁，小的五岁。有一次孔文举白天睡觉，小儿子就到床头偷酒来喝，大儿子对他说：“喝酒为什么不先行礼呢?”小的回答说：“偷来的，哪能行礼呢!”

孔融被捕，朝廷内外都很惊恐。当时，孔融的儿子大的才九岁，小的八岁，两个孩子依旧在玩琢钉戏，一点也没有恐惧的样子。孔融对前来逮捕他的差使说：“希望惩罚只限于我自己，两个孩子能不能保全性命呢?”这时，儿子从容地上前说：“父亲难道看见过打翻的鸟巢下面还有完整的蛋吗?”随即，来拘捕两个儿子的差使也到了。