Voß'scher Hof, Nortorf, Negativ zurück