จากประตูชัยเข้าไปก่อนถึงตัวปรางค์ จะเห็นคลังเงินตั้งอยู่ทางทิศตะวันตก หรือทางด้านซ้ายมือ ปัจจุบันอาคารคลังเงินเหลือเพียงซากฐานขนาดใหญ่ เหตุที่เรียกอาคารหลังนี้ว่า "คลังเงิน" เพราะเคยพบเหรียญสำริดโบราณซึ่งด้านหนึ่งเป็นรูปครุฑหรือหงส์ อีกด้านหนึ่งเป็นอักษรโบราณ นอกจากนี้ยังพบทับหลังจำหลักเป็นรูปคนกำลังหลั่งน้ำมอบม้าแก่พราหมณ์