Köpmannen George Seaton byggde åren 1916-17 ett jaktslott på kullens krön. Han hade under en tid sökt efter en plats där han kunde upprätta ett jaktslott och fann till slut Hyltenäs kulle som passade hans önskemål perfekt. Slottet uppfördes i två våningar i fykant med en öppen gårdsplan i mitten. Första våningen byggdes i tegel och den andra i slamsten och trä i korsvirkesstil. Inredningen var smakfull och påkostad. Äkta mattor och gedigna möbler, kopparstick och oljemålningar av hög klass prydde salar och gallerier. I bottenvåningen inrymdes sällskapsrum, matsalar, bibliotek, garage och stallar. I den övre våningen fanns bla makarna Seatons sovrum, bostäder för tjänstefolket samt gästrum. Kungliga gästrummet var bla inrett med en specialsäng för den mycket långe Gustav V, som accepterat en inbjudan till slottet. I källarplanet fanns bla en stor festsal där väggarna var klädda med kakel golven belagda med marmor, samt två vinkällare som rymde 20 000 buteljer. Totalt hade slottet med säkerhet minst 35 rum.