出身上流家庭
　　1885年11月11日，在美國西海岸加州聖加布里埃爾的家中，巴頓出生在自己媽媽出生的那個屋子。小巴頓的母親是加州人，她從小就生活在優渥的環境中，受過良好的教育。當時，她年僅24歲，年輕漂亮，舉止端莊，談吐不凡，一派貴夫人的風度。
　　小巴頓的姨母叫安妮．威爾遜，對巴頓疼愛有加，曾在他就讀西點軍校期間與他作伴陪讀。小巴頓的外公班傑明．戴維斯．威爾遜是帕莎蒂娜市的大地主、洛杉磯首任市長，也是加州最大的葡萄酒和白蘭地酒製造商。
　　小巴頓出生的房子是巴頓的外祖父班傑明．戴維斯．威爾遜在大約1830年建的，這裡曾經有他的牧場。
　　當巴頓外祖父的牧群沿著河谷順著高山來到丘陵從雷德蘭茲、洛杉磯向下延伸時，他就住在這裡，不像後來的許多人透過政府授予的形式得到牧場那樣，巴頓的外祖父買下了這片牧場。
　　小巴頓的父親喬治．史密斯．巴頓是一名地方檢察官，身材高大，英俊瀟灑。1877年畢業於維吉尼亞軍校，曾擔任加州聖馬利諾首任市長，之後繼承了威爾遜事業，生活富裕。
　　巴頓的祖先原為蘇格蘭人，是蘇格蘭東部亞巴登的地主。巴頓家族第一個從蘇格蘭移民到美國維吉尼亞州的祖先是羅伯特．巴頓，是一名契約工，後來迎娶安妮．戈登．摩塞為妻，從而晉身到上流社會。
　　巴頓家族中有多人參與過美國重要戰事並殉職，其中包括羅伯特．巴頓的岳父，獨立戰爭中的大陸軍將領休爾．摩塞。摩塞將軍在特倫頓襲擊戰中表現突出，之後在普林斯頓之戰中負傷而死亡。
　　和許多擁有高貴血統的家族一樣，父親喬治和母親露茜，用小嬰兒祖父和父親的名字，給他取名為喬治．史密斯．巴頓。由於和他的爸爸的名字一樣，習慣上，人們稱呼他小喬治或小巴頓。巴頓的祖父是家族第一個叫喬治．史密斯．巴頓的人，出生於維吉尼亞州的菲德堡。
　　1852年，巴頓的祖父以全班24人中的第二名畢業於維吉尼亞軍校，同時也是卡巴奧發兄弟會的成員。畢業後繼續修讀法律，並在查爾斯頓執業。南北戰爭期間，巴頓的祖父擔任聯盟國軍維吉尼亞第二步兵團連長，後晉升為第二騎兵團團長、上校，參加厄爾利將軍對聯邦首府華盛頓進行的偷襲戰。
　　美國內戰期間，巴頓的祖母蘇珊．鐸登．格蕾瑟和4個孩子還有祖母的一個兄弟一起生活，這個兄弟叫威廉．格拉西爾，曾是聯盟海軍的一位上尉。內戰結束一年之後，巴頓祖母的另一位居住在加州叫做安德魯．格拉西爾的哥哥給了祖母600美元的路費，讓她陪著她瞎了眼的老父親和4個孩子取道巴拿馬去加州。
　　他們在舊金山登陸後又換乘另一艘船到聖保羅，到洛杉磯後父親一家人和巴頓的安德魯舅舅住了一段時間。
　　後來，巴頓的祖母找到了一所土坯房子並在一家女校教書以謀生。巴頓的父親那時只有10歲，也幫著支撐家庭。
　　透過巴頓的祖母，巴頓家族和威廉．鐸登家族拉上了親戚關係，而後者又是喬治．華盛頓的直系親屬。此外，還有一些家系和英格蘭國王愛德華一世及他的妻子法王菲利普二世的女兒瑪格麗特有關係。
　　巴頓家族的後人們都以這些尊貴的祖先為榮，他們有著先天的勇氣和騎士風度，自然也高人一等。
　　巴頓家族的後代們認為，他們的血液中有著天生領導權和一種與生俱來的榮譽感和責任感，他們有意識地按照自己的偶像的形象來塑造自己，不僅在舉止風度上效仿，在事業上也以他們為榜樣。
　　喬治．休爾．史密斯對4個繼子視如己出，最大的孩子喬治．威廉．巴頓，也就是小巴頓的父親，為了紀念生父和繼父，按照合法的程序，在1868年把自己的名字改為喬治．史密斯．大巴頓。
　　到了小巴頓的時候，再次從父親和爺爺那裡繼承了名字，成為第三代喬治．史密斯．巴頓，天生的貴族血統，帶給小巴頓的不僅是貴族的出身，更主要的是一種高貴的精神力量，讓小巴頓終生為了自己家族的榮譽而奮鬥。