西汉河东平阳(今山西临汾西南)人。霍去病与霍光之父。曾以县吏供事于平阳侯家，与侯家侍者卫少儿私通而生去病，后供事完毕归家，另娶妇生光，遂隔绝不相闻。少儿妹卫子夫被武帝立为皇后，去病因是皇后姊子贵幸，征匈奴有功，得知中孺为其生父，遂至河东拜谒，为其多买田宅奴婢，并将异母弟霍光带至长安为郎。