את המנזר ייסד במאה ה־17 בזיל הקדוש מאוסטרוג, מטרופוליט של הרצגובינה שמת כאן ב־1671. שרידיו שמורים בכנסיית המערה כנסיית ההצגה בבית המקדש ומושכים עולי רגל מכל הדתות המבקשים מרפא וברכה, כך שאוסטרוג הוא אחד מאתרי העלייה לרגל המתוירים ביותר בבלקן. אחרי ששרפה הרסה חלק גדול מהמתחם, הוא נבנה מחדש בין 1923 ל־1926, ואילו שתי כנסיות המערה הקטנות שרדו ושימרו את ציורי הקיר העתיקים שצוירו ישירות על הסלע.
למתחם שני חלקים. במנזר התחתון, עם כנסיית השילוש הקדוש שנבנתה ב־1824, נמצאים רוב מגורי הנזירים, ואילו המנזר העליון נאחז בצוק. עולי רגל רבים הולכים בשביל התלול, באורך של כ־3 ק״מ, ביניהם, חלקם יחפים. על המבקרים להתלבש בצניעות, עם כתפיים וברכיים מכוסות, ולצפות לתורים בסופי שבוע וביום חגו של בזיל הקדוש, 12 במאי.
גם למטיילים שאינם דתיים, הנוף והאווירה הופכים את הביקור באוסטרוג לבלתי נשכח.
