Pada bangunan pintu gerbang, penulis menjumpai relief burung Beri di bagian atasnya. Bentuknya yang unik masih dapat dilihat jelas meski beberapa bagian sudah mengalami kerusakan karena dimakan usia. Sementara pada bagian bawah pintu, terdapat beberapa anak tangga yang menghubungkan bagian luar dengan lorong. Bila masuk lebih ke dalam, akan dijumpai lagi sebuah pintu yang bagian atasnya berbentuk lengkung, mungkin berfungsi sebagai penanda sudah memasuki lorong.
Penulis sebenarnya ingin menelusuri lorong, namun diurungkan dan lebih memilih menyeberang jalan. Selanjutnya, penulis menuruni bangunan yang berada di kanan jalan dan menemunkan sebuah pintu yang berbentuk persegi. Pintu itu merupakan tembusan dari lorong yang menghubungkan bagian kanan dan kiri jalan. Tak seperti pintu utara yang dihiasi dengan relief burung Beri, pintu selatan ini sederhana, tanpa hiasan apa pun.
Lewat pintu selatan itulah, Penulis bisa mengintip bagian pesanggrahan yang lain. Terdapat bangunan yang memanjang ke timur, bersambungan langsung dengan lorong. Bangunan tersebut terbagi menjadi beberapa ruang yang masing-masing juga dihubungkan dengan sebuah pintu. Tak jauh dari pintu yang menghubungkan ke ruangan paling timur, terdapat sebuah sekat yang dihiasi ornamen-ornamen indah serupa motif kain batik. Sementara, di ruangan paling timur sendiri terdapat kolam segi empat yang hingga kini masih terisi air.
Seperti banyak pesanggrahan pada masa awal Kraton Yogyakarta, Gua Siluman juga memiliki areal taman dan kolam. Saat ini, di areal taman itu ditanam beragam tanaman hias sehingga areal ini tampak hijau. Tanaman hias itu tumbuh di pinggir dua buah kolam segi empat yang juga merupakan bagian dari bangunan pesanggrahan. Bagian pinggir dan dasar kedua kolam itu sebenarnya terbuat dari plesteran yang cukup bagus, namun sayang tak bisa dilihat karena airnya tak begitu bening.