Torbjørn Prytz, gårdbruker i Skarmodalen