李贺的父亲名叫李晋肃，博学多才，然而一生未居要职。他曾在西南蜀地担任“边上从事”，与著名诗人杜甫打过交道。李贺的出生对于李晋肃而言是“中年得子”，因为那时他已经年过四十。然而，李晋肃在六十岁左右就辞世了，那时的李贺还未迈入青年期。
父亲很宠爱李贺，给他从巴蜀地区买过一个奴仆，让他陪伴儿子。这个奴仆和李贺的感情非常好，李贺在诗里多次提到他，叫他“巴童”。巴童常常陪着李贺东奔西走，因为李贺多病，还要替他煎药。
除了巴童，在这个家里，李贺的亲人只剩母亲郑氏和弟弟了，唯一的姐姐已经出嫁。李贺常在深夜读书、写诗，郑氏一边支持着儿子写作，一边不由得为其担心。在旁人眼中，李贺是一个神童，六岁就会写诗，并以长短之歌名动京师。当时的大儒韩愈、皇甫(shí)对他也是啧啧称奇，还亲自登门造访，李贺则当场写下了《高轩过》等佳作。郑氏这时候还不知道，若干年后，自己儿子小时候的种种天赋，会被人们讲成神奇的传说。但是只有她最清楚，李贺所获得的一切天才之名，以及一切被编造出来的神童故事，都是他用刻苦读书的日日夜夜换来的。
