Situé sur les rives de la Saraswati, cours d'eau à présent disparu, le temple abrite de nombreuses sculptures de dieux et déesses hindous. Les experts en sont donc venus à la conclusion que ce temple semble avoir été un important lieu de culte du Seigneur Vishnu au cours des IXe et Xe siècles. Le temple a été nommé Prachi, soit Est, car les eaux de la Saraswati s'écoulaient vers l'est, aussi connue sous le nom de Prachi Saraswati.

Il est facile de repérer les trois portes en pierres de l'ancien temple qui sont maintenant les entrées du nouveau temple Prachi Shiva. Deux de ces arches méritent notre attention, car elles représentent les navagraha (les neuf corps célestes), les saptamatrikas (les sept mères) et les représentations des déesses Gange et Yamuna. On peut également apercevoir une représentation du Seigneur Vishnu sur le Lalatbimba, ce qui pourrait indiquer la présence d'un ancien temple dédié à Vishnu.