Petty, narozený v roce 1950 v Gainesville na Floridě, měl drsné dětství, ale handshake od Elvisa ve věku 17 let vyvolalo zájem o rockovou hudbu. David Rolland z Broward Palm Beach New Times v roce 2014 se vydal na trek, aby navštívil místa důležitá pro Pettyho, včetně jeho dětského domova:
První skupina Pettyho, Mudcrutch, žila na farmě v Gainesville, která byla „špína levná“ a „daleko od sousedů, kteří by si mohli na hluk stěžovat,“ Gainesville Sun napsal v roce 2008.
Red Slater, přítel kapely, který žil na farmě několik let, řekl Slunci:
Kapela se přestěhovala do Kalifornie v roce 1974, aby byla velká, ale skupina se rozpadla a několik bývalých členů se shromáždilo Tom Petty a Heartbreakers, a zbytek, jak se říká, je historie (ačkoli Mudcrutch se sešel v roce 2007 a vydal dva alba).
Pettyho Encino v Kalifornii má docela historii. V roce 1987 - rok před tím, než Traveling Wilburys (super skupina Petty vytvořená s Georgem Harrisonem, Bobem Dylanem, Royem Orbisonem a Jeffem Lynnem) vydal svůj debut -
žhář zapálil dřevěné schody domu, a téměř všechno kromě studio pro nahrávání sklepů bylo ztraceno. Petty a rodina přestavěli místo a podle Realtor.com:A přicházíme na Petty's Lake Sherwood ústup. to bylo uvedené na prodej zpět v květnu, a je stále na trhu za 5,895 milionů dolarů. Místo zvané Casa Della Madonna bylo místo postaveno v roce 1931 a cítí se spíše jako jezero Como než v Kalifornii. Nemovitost o rozloze 5 300 čtverečních stop je na téměř akru se soukromým přístavištěm. V obývacím pokoji jsou stěny z místního přírodního kamene a v roce 2004 byl přidán klidný hlavní apartmán s hlubokou kamennou vanou a balkonem s krbem.