La région historique de Bairath est réputée pour les vestiges d’un temple bouddhiste circulaire (l’un des premiers connus de la sorte en Inde), des inscriptions datant d’Ashoka et un monastère. On peut également y voir des reliques des périodes moghole, rajpute et maurya. Bairath s’appelait jadis Viratnagar et était alors la capitale du roi Matysa, Virat. La légende dit que les Pandavas de l’épopée Mahabharata y ont passé une année au cours de leur exil. Le voyageur chinois Xuanzang considérait que Bairath était un lieu idéal pour les pèlerinages bouddhistes. D’autres fouilles ont révélé qu’il faisait partie de l’empire Maurya et que c’était un centre bouddhiste du 3e siècle avant J.-C. au 1er siècle après J.-C. Ce sont deux décrets gravés dans la roche qui ont permis de le prouver, ils feraient partie des 84 000 décrets et inscriptions sur des piliers rocheux gravés durant le règne d’Ashoka pour répandre et prêcher l’enseignement de Bouddha. La ville était également un centre important au cours du règne de l’empereur Moghol Akbar, qui y a bâti une fonderie de pièces de monnaie.