祇園寺蟻屬於佛教傳說，精舍建立時過去世世於地見蟻。 淨心誡觀發真鈔中本曰：“靈感傳云：須達共舍利弗，往圖精舍（即祇洹也），須達自捉繩一頭。舍利弗自捉一頭，共經精舍。（中略）舍利弗慘然憂色，即問尊者何故憂色？答曰：汝今見此地中蟻子不？答曰見。時舍利弗語須達言：汝於過去毗婆尸佛，亦於此地，為彼世尊，起立精舍。而此蟻子在此中生，乃至七佛以來。汝皆為佛起立精舍，而此蟻子亦在此中。至今九十一劫，受一種身，不得解脫。”
