Fidler zbudował swój nietypowy dom w 2000 roku na posesji znajdującej się 32 km na południe od Londynu. Minizamek posiada dwie niewielkie wieże i cztery sypialnie.
Całą konstrukcję Fiedler zasłaniał balami siana i brezentem - ale nie ukrył jej przed lokalnymi władzami. Te w 2007 roku nakazały mężczyźnie zburzyć budowlę, ponieważ naruszała ona plany zagospodarowania przestrzennego obowiązujące w tej okolicy. Fidler starał się doprowadzić do odwołania decyzji władz, ale próby te zakończyły się fiaskiem.
Sędzia orzekający w tej sprawie, Ian Dove, poinformował, że Fidler trafi do więzienia na trzy miesiące za opór wobec decyzji władz, jeżeli nie rozbierze swojego zamku do 6 czerwca 2016 roku. Z kolei Fidler zeznając przed sądem utrzymywał, że lokalne władze chcą zniszczyć mu życie. Poinformował również, że nie może rozebrać zamku, ponieważ odkrył w jego wnętrzu zagrożone gatunki nietoperzy i traszek.