伯耆稻荷神社的創建年代已不可考。相傳於平安時代晚期、後白河天皇在位期間，神使白狐曾現身預言：「近期將發生飢荒，當即刻儲備米、棉等物資」。寬喜2年（1230年）時果然爆發大饑荒，據說於隔年寬喜3年時，京都地區死者眾多，而此地因事前有所準備，居民得以倖免於難。