Herrgården blir inte byggnadsminne trots höga kulturhistoriska värden.