1、司马迁出身于中下层官吏家庭。高祖司马昌，当秦始皇时，作主铁官。曾祖司马无泽，在汉初作长安的一个“”。祖司马喜，没有作官，而有第九等爵位，为五大夫。
2、他的家庭在汉文帝时可能是所谓“中人之家”，以农业、畜牧致富，因而能够出粟买爵。司马迁说自己“耕牧河山之阳”，不一定就是亲自参加耕牧。
3、 司马迁后代一说，司马迁自称“生龙门，耕牧河山之阳”（《史记·太史公自序》），又称其数世祖茔均在高门，即今陕西韩城，但此地至今无一姓司马者。