Spencer jest synem Jamesa i Margaret Duttonów, dwojga osadników, którzy utrzymują się z pracy w Montanie po tym, jak porzucili życie w biedzie w Tennessee, by poszukać lepszej przyszłości. Spencer i jego rodzeństwo są początkiem długiej linii rodowej. Przez pokolenia jego rodzina walczyła o powiększenie i ochronę ziemi, którą zdobyli własnymi siłami.