Pe plan sentimental, viața lui nu a fost tocmai liniștită. S-a căsătorit în 1958, iar după cinci ani s-a născut prima lui fiică. Al doilea copil a venit în urma unei aventuri extraconjugale, iar al treilea i-a fost dăruit de soție. După 30 de căsnicie, Chuck Norris a divorțat.
S-a căsătorit a doua oară în 1998, iar a doua soție, cu 23 de ani mai tânără, i-a dăruit o pereche de gemeni. Acum, Chuck Norris are nouă nepoți.