Баща му е свещеник, брат му е философът Уилям Джеймс. Авторът никога не се е женил и сам се е обявявал за „заклет ерген“. Според някои от биографите си изпитвал невротичен страх от секса, други говорят за неизявена хомосексуалност. Джеймс прекарва по-голямата част от живота си в Англия, където малко преди смъртта си взима британско поданство.