Njegova prva supruga Marija Eker Manolić tragično je izgubila život u požaru u svom stanu u Nazorovoj ulici u Zagrebu 2003. godine, u 82. godini. Požar je uzrokovao žar njezine cigarete koji je zapalio posteljinu na krevetu na kojem je nepokretno ležala, a vatrogasce je pozvala medicinska sestra koja ju je svakodnevno obilazila. Kad su stigli vatrogasci, Marija je još davala znakove života, no ubrzo nakon toga je preminula.
S drugom suprugom Mirjanom Ribarić, koja je od njega bila mlađa 36 godina, vjenčao se 2016. na otoku Krku. Njemu bilo 97 godina kada je drugi put uplovio u bračnu luku, a Mirjana je u kolovozu 2020. godine preminula zbog posljedica maligne bolesti.
Iste te godine u prosincu u medijima se pojavila informacija da je Josip i treći put stao pred oltar.
"Ne, nije točno, nisam se oženio, izmišljaju! Netko jako vodi računa o mom životu. Ušao sam u stotu godinu", rekao ja tada Manolić za Dnevnik.hr.
Inače, Joža Manolić rođen je u ožujku 1920. u Kalinovcu kraj Đurđevca, u tadašnjoj Kraljevini Jugoslaviji, umro u Republici Hrvatskoj, a između toga proživio je NDH i SFRJ.