胡耀邦家族屬西嶺胡氏，派輩為允謙甫育 元奇志中 名成祖耀 德厚家興。據《胡氏族譜》記載：始遷祖，即西嶺一世祖允欽公，行建十，"由江右撫州樂安縣浯塘徙居湖南瀏陽縣南鄉十三都西嶺下遂為西嶺開基始祖"。何時遷瀏，是譜未做交待，據譜載允欽公生卒年分析，應該在明萬曆年間。允欽生謙馗、謙旭，謙馗生茂甫、憲甫，茂甫生育生、育澄，育澄生元漢、元叨、元略、元紋，元漢生奇龍、奇思、奇凰、奇逢、奇青、奇富，奇思生志饒、志膏、志立，志饒生中康、中壽、中泮，中泮生名鏡、名鐘。名鐘生於清道光五年（1825年），歿于同治十年（1871年），字秀卿，號毓元，配藺氏，生成杓、成檻，繼娶鄒氏，生成翰。成翰生於清咸豐九年（1859年），歿于光緒二十二年（1896年），原名成彩，字海文，號彰武，"業儒博通經史，崇尚聖道，倡建孔家坪族祠，並作記勃（似應為勒）石"，配劉氏生祖倫、祖淮。祖倫，字元圃，號伯龍，生於清光緒三年七月十三日（1882年8與26日），1950年與夫人隨其子耀邦生活，1954年4月12日病逝于北京，葬八寶山，1958年秋，由共青團湖南省委派專車接送遺骨回故里安葬。配劉氏。劉氏夫人（劉明倫）生於清光緒六年九月初七（1880年10月10日），1966年8月病逝北京，後將骨灰接回家鄉與夫合墓。生6子4女，子耀芬、耀傑、耀英幼殤，二子耀襄也早逝，三子耀馥（福）生於一九一一年六月十一日，一九九二年八月初十去世，中國共産黨黨員，一生務農，"天下無先例，一代皇兄是農人"。