„Rozdíl mezi zbabělcem a hrdinou je jeden krok stranou.“
Gena od malička fascinovali zpěváci, tanečníci a svět filmu. Když uviděl první film, rozhodl se, že se stane hercem. Miloval Jamese Cagneyho a chtěl být jako on. Jeho matka si přála, aby se stal hercem, aby ho někdy mohla vidět na stříbrném plátně. Bohužel se slávy svého syna nedožila, zemřela při požáru v roce 1962.
Když bylo Genovi 13 let, otec beze slova opustil rodinu. O 3 roky později se svoji matku a o 12 let mladšího bratra po nezdaru v lásce rozhodl opustit i Gene a nechal se odvést k U.S. Marine Corps. Při odvodu námořníkům lhal o svém věku, takže na své sedmnácté narozeniny již byl mariňákem. Jak sám říká, nechtěl zbytečně čekat s nástupem k armádě. Většinu času sloužil jako radista v Číně v Čching-tao a Šangaji. Jeho vojenská kariéra skončila na Havaji. Po nehodě na motorce, při níž si zlomil pravou nohu, levé koleno a pravé rameno, mu do kolene musely být voperovány šrouby, proto byl ze zdravotních důvodů z armády propuštěn.
Po ukončení aktivní služby se protloukal v různých krátkodobých zaměstnáních v New Yorku. Jako pomocný režisér pracoval v televizi i rozhlase, se kterým měl zkušenosti již z armády, pracoval v lékárně. Dělal portýra i stěhováka. Nejhorší se mu zdála práce v budově Chrysler, kde přes noc leštil kožený nábytek. V roce 1956 se Hackman oženil s bankovní úřednicí Fay Maltese, se kterou má syna a dvě dcery.