Cung điện, hiện nay chủ yếu phục vụ như một bảo tàng, lấy tên từ hình tượng thần khỉ Hanuman mặc áo choàng đỏ đứng ở bên trái lối vào cung điện chính.
Cung điện được đặt theo tên của một thương gia thấp kém đã trở thành vua của thành phố.