Selon la tradition, Ali Pacha construisit le château pour sa sœur Shanisha, qui s'était mariée à Libohovë, et elle y vécut jusqu'à sa mort ; sa tombe se trouve près de la ville. Dominant toute la vallée du Drino, la forteresse occupait une position stratégique, et elle est aujourd'hui protégée comme monument culturel.
Il subsiste une vaste enceinte de hauts murs de pierre avec des tours d'angle polygonales, tandis que la résidence qui se dressait autrefois à l'intérieur a disparu. Depuis le château, de vastes vues s'ouvrent sur la vallée du Drino. Dans la ville en contrebas, repérez le grand platane du centre, protégé comme monument naturel, et les sources fraîches qui font depuis longtemps de Libohovë un lieu vert et bien arrosé.
Facile à combiner avec l'église byzantine de Labovë e Kryqit, Libohovë constitue une belle excursion depuis Gjirokastër.
