Hoewel een eerste voorganger van kasteel Liebeneck waarschijnlijk rond 1590 is ontstaan, is het gebouw boven het dorp Osterspai een volledige nieuwbouw uit de jaren 1870.
Waarschijnlijk vlak na zijn oprichting aan het einde van de 16e eeuw verplaatsten de heren van Liebenstein hun zetel van de burcht Liebenstein naar het representatieve en nieuwe herenhuis kasteel Liebeneck, genaamd "Grauborn". Maar in 1651 kwam het grondgebied van de von Liebenstein, waartoe naast Osterspai ook Kamp-Bornhofen behoorde, in handen van de baronnen van Waldenburg. Zij waren waarschijnlijk degenen die in de tweede helft van de 17e eeuw een barok jachtslot van Liebeneck maakten. De woonbehoeften van de latere eigenaar Rijksbaron Franz Georg Ernst von Preuschen van en tot Liebenstein voldeden echter niet meer - hij liet het jachtslot ingrijpend verbouwen. Van 1873 tot 1875 ontstaat zo de door architect Joseph Balthasar Fuchs ontworpen nieuwbouw in de stijl van de neorenaissance op de barokke fundamenten.

Het kasteel is in particulier bezit en alleen van buitenaf te bezichtigen.