Die beiden Burgen (Unterburg und Oberburg) stammen von 1200-1230 und aus dem 14. Jahrhundert. Sie wurden im späten Mittelalter durch eine gemeinsame Vorburg verbunden. 1366 wurde „Duo Castra Hornberg“ erwähnt, die Unterburg war zu dieser Zeit schon Bestandteil der Vorburg. Im 17. Jahrhundert wurde die Burg zerstört, aber teilweise wieder aufgebaut. Die Unterburg und Vorburg sind heute noch in Benutzung. Der Bergfried weist einen sehr seltenen Grundriss auf. Die Burg befand sich mitunter im Besitz von Götz 
                                                                              von Berlichingen.