趙高與秦王，乍一看就是兩家，頂多主仆關系，但是歷史卻并非如此，趙高并不是趙國人，而是秦國人，并且是一個秦王的后代。這也就不難解釋為什么趙高如此收到重用，不但是因為他有才，更大的原因是因為跟秦始皇還是本家，并且趙高自宮以表忠心，能不受重用嗎？

關于趙高的身世，在史書中記載十分簡略，僅見于司馬遷在《史記·蒙恬列傳》的記述：“趙高者，諸趙疏遠屬也。趙高昆弟數人，皆生隱宮，其母被刑僇，世世卑賤。秦王聞高強力，通于獄法，舉以為中車府令。”據此，清代有名的史學家趙翼，在《陔余叢考》卷四十一《趙高志在復仇》條云：“高本趙諸公子，痛其國為秦所滅，誓欲報仇……卒至殺秦子孫而亡其天下。則高以勾踐事吳之心，為張良報韓之舉，此又世論所及者也。”這種說法，據他自己說出自《史記索隱》，影響頗大，連郭沫若先生主編的《中國史稿》第二冊中“秦末社會矛盾的激化”章節中也引用了這個觀點，認為“趙高原是趙國遠支宗室外的后代，因其父犯罪被處宮刑，當了宦官……騙取了秦始皇的信任。”

但是，對趙翼的這一觀點，不少學者并不認同。因為查遍今本《史記》三家注中“索隱”部分，并無這種內容。《史記 ·蒙恬列傳》說趙高為“諸趙疏遠屬也”，并不能理解為“趙諸公子”。“諸趙”一語，應是指秦國的王室，因為秦王室雖是贏姓，但卻又以趙為氏。對于此，《史記》中有明文記載：太史公曰：“秦之先為贏姓。……然秦以其先造父封趙城，為趙氏。”《史記·秦始皇本紀》也說：秦始皇“及生，名為政，姓趙氏。”可見，所謂“諸趙疏遠屬也”乃指趙高是秦王室的本家，因而所謂“趙高乃趙諸公子，痛其國為秦所滅，誓欲報仇”之說是站不住腳的。

翻閱先秦史料，對“趙高并非趙國公子”之論，還可以找出一些旁證。如早于司馬遷《史記》的《淮南子》一書就以“趙”為秦王室的姓氏，在其《人間訓》一節中寫道：“秦王趙政，兼并天下而亡。”《泰族訓》中也說：“趙政晝決獄而夜理書。”還有《漢書·陸賈傳》也言“秦任刑法，卒滅趙氏。”這里說的趙氏也是指秦王室無疑。在其后的三國和六朝文學作品中，也是以“趙”為秦五族的姓氏的。如曹植《求自試表》：“絕纓盜馬之臣赦，楚趙以濟其難。”

這里說的“絕纓”“盜馬”是兩個有名的歷史典故，絕纓是楚客報絕纓的故事，說的是楚莊王對臣下酒后對愛妃失禮的寬容，盜馬說的是秦穆公，曾經走失了幾匹好馬，被生活在歧山之下的三百多個鄉人捉住吃了。官吏抓住這些人準備嚴懲。穆公說：“君子那能因為幾個牲畜去懲治人呢？我聽說吃了好馬肉的人，不喝酒會傷身體。”于是穆公賜酒請他們大喝一頓，并赦免了他們。文中“絕纓盜馬之臣赦，楚趙以濟其難。”中不說楚秦而說楚趙，明確告訴我們在先秦時代，秦王室是以趙為姓氏的。

關于趙高是秦王室的本家，還可從東晉時王嘉的志怪小說《拾遺記》記述的一則故事反映出來：“秦王子嬰立，凡百日，郎中令趙高謀殺之”，子嬰夢見秦始皇的鬼魂對他說：‘余是天使也，以沙丘來。天下將亂，當有同姓欲相誅暴。’”子嬰因此“囚高于咸陽獄”。這則故事雖然荒誕不經，不足為信，但從中也可看出有六朝以前的人，認為趙高是秦王室的同姓者這一點是無庸置疑的。