Точное происхождение Слоновьей пещеры неизвестно. Предположительно это святилище было воздвигнуто как место для духовной медитации[1]. В одном из преданий говорится о том, что оно было создано из ногтя мифического великана Кебо Ивы. Однако, архитектурный стиль святилища скорее свидетельствует об XI веке, как дате его постройки. Храмовый комплекс содержит как индуистские, так и буддийские элементы. Так в Слоновьей пещере есть лингам и йони, символы Шивы, и изображение Ганеши, а у реки располагаются резные изображения ступ и чаттр — буддистских символов.

Слоновья пещера была обнаружена голландскими археологами в 1923 году, а фонтаны и бассейн для купания открыты лишь в 1954 году[2].