Джордж родился в семье иммигрантов. У него было 2 сестры и младший брат. Часть детства прошла на небольшой ферме в Сеукли. Когда юноше исполнилось 10 лет, семья перебралась в Аллегейни.
Будущий игрок не успел насладиться удобством современного района Плезант-Вэлли — в 12 лет он остался без отца. Тяжелое финансовое положение вынудило Джорджа отправиться работать на фабрику по производству пробок. Ему платили скромные $5 в неделю. Больше всего юношу беспокоил не доход, а скучная и монотонная работа.
«Я думал, что мог бы делать что-то лучше, чем резать пробки, поскольку умел делить 6 на 2», - так Джордж Смит описывал свои амбиции в детстве.