Núi Phú Sĩ được cho là có nguồn gốc từ một đống cát do các công nhân xây dựng ngôi chùa để lại.
Người ta thường nói rằng núi Phú Sĩ được tạo ra từ những đống cát mà những người thợ xây dựng của ngôi chùa để lại.