Mẹ ruột của Nicole Richie là Karen Escovedo, cựu trợ lý điều hành của Sheila E., người tình cờ là dì của Nicole. Escovedo có tổ tiên là Creole, Afro-Mexico và Tây Ban Nha.
Lionel Richie và Brenda Harvey chịu trách nhiệm nuôi dạy Nicole từ khi cô bé 2 tuổi. Họ nhận nuôi cô lúc 9 tuổi, nhưng hậu quả của một vụ bê bối gian lận, Brenda và Lionel chia tay. Nicole có hai anh chị em cùng cha khác mẹ tên là Sofia và Myles từ cuộc hôn nhân thứ hai của Lionel. Michael Jackson là cha đỡ đầu của cô và Nancy Davis là mẹ đỡ đầu của cô. Nicole và mẹ ruột của cô ấy là cuộc sống của nhau, nhưng Nicole coi Brenda và Lionel là cha mẹ của cô ấy.