Người vợ đầu tiên của James Arness là Virginia Chapman. James Arness kết hôn với Virginia Chapman vào năm 1948 và hai người ly hôn vào năm 1963. Chapman chết vì sử dụng ma túy quá liều vào năm 1977, tại Malibu, California. Cặp đôi đã có với nhau 3 người con: Jenny Lee, Rolf và Craig.
Con gái duy nhất của cặp vợ chồng Jenny Lee Arness đã tự tử năm 25 tuổi. Con trai của cặp đôi, Rolf Arness, đã trở thành Nhà vô địch Lướt sóng Thế giới vào năm 1970.
Chapman là một nữ diễn viên nổi tiếng được biết đến với các vai diễn trong "Perry Mason", "Highway Patrol" và "Gunsmoke". James Arness đã đóng vai Matt Dillon trong chương trình truyền hình "Gunsmoke" trong 20 năm.
