Trollenäs Slott известен с 1300-х годов и принадлежал за все время своей истории всего 2 родам — Тотт/Thott и Трулле/Trolle. В 1559 первый двор на этом месте, возле мыса, который образуется на берегу речки Саксон/Saxån построил Tage Ottesen Thott. Замок и владения вокруг принадлежали его роду до 1682 года. После этого он перешёл вдове Нильса Трулле Хелле Розенкранц. Ее внук Фредрик Трулле передал в наследство Trollenäs и Fulltofta своему внуку Фредрику Тролле и его наследникам. Имущество передается в Trollenäs Gods AB и до сих пор принадлежит семье Трулле. В конце 1800-х он был превращен во французской ренессансный замок датским архитектором Фердинандом Мелдалем/Ferdinand Meldahl. Реставрация интерьера была поручена архитектору Аги Линдгрен/Agi Lindegren из Стокгольма.
С 1930 годов Ульф Трулле владел замком, унаследовав его от отца Нильса. 2 Нильса и 2 Ульфа — чередующиеся имена последних владельцев замка. С 2010 года управляющий директор замка и прилегающих владений вокруг него Trollenäs Gods AB Ульф Трулле/Ulf Trolle.
Согласно древним легендам род предшественников Trolle ведется от нечестивого язычника Gunnar Жестокого, который жил в 900-е годы. Говорят, что однажды ночью он превратился в оборотня. Гуннар был в постоянной вражде с троллем Skratte, которому он однажды отрубил голову. Отсюда название клана и фамильного герба с безголовым троллем на щите. Оба они отображены в различных картинах и объектах на протяжении веков. На фамильном гербе и на главном здании тоже можно увидеть тролля без головы. Гуннар Жестокий обычно принимает форму большого черного пса с горящими глазами, который, как правило, перегрызает горло и появляется в подвале под домом.
