El emplazamiento del actual castillo de Ortenburg estuvo ocupado ya en el año 600 por un fuerte que sería ampliado por Enrique I en el s. X para defender sus fronteras. La fortaleza fue reconstruida en estilo gótico tardío en el s. XV por Matías Corvino, rey de Hungría, tras dos devastadores incendios. La torre del ala norte conserva aún un relieve en el que está representado este último monarca. En 1698, en pleno Barroco, se le añadieron tres hastiales de estilo renacentista.