Untuk saat ini, ia memilih mengambil jeda.

Ia mengaku menikmati hidup jauh dari sorotan publik. Kegiatannya kini lebih banyak melukis di atas kanvas dan mendalami kehidupan spiritual.

Sebelum menikah untuk ketiga kalinya dengan Min Ah, Jim pernah menikahi lawan mainnya di Dumb and Dumber, Lauren Holly.

Pernikahan itu bertahan setahun sampai 1997.

Ia juga pernah menikahi produser Melissa Womer selama delapan tahun sampai 1995. Dari pernikahan itu, mereka dikaruniai seorang putri bernama Jane.

Jim sempat dikaitkan dengan sejumlah aktris, seperti Renée Zellweger, Jenny McCarthy, dan January Jones. Sebelum Min Ah, ia juga dikabarkan menjalin hubungan dengan Ginger Gonzaga selama setahun.