แม้ว่าจะไม่ชัดเจนว่าก่อตั้งขึ้นเมื่อใด แต่เป็นศาลเจ้าเก่าแก่ที่กล่าวกันว่าจักรพรรดิจินมูใช้เพื่ออธิษฐานขอให้การเดินทางไปทางทิศตะวันออกของเขาประสบความสำเร็จ ในปีที่สองของการครองราชย์ของจักรพรรดิฉุย (200) เมื่อจักรพรรดินีจินกู่เสด็จมาเยือนบริเวณนี้ น้ำบริสุทธิ์ก็เริ่มทะลักออกมาทันที ว่ากันว่าจักรพรรดินีพอใจกับสิ่งนี้และบูชาที่นี่ในฐานะน้ำพุศักดิ์สิทธิ์ ซึ่งเป็นสาเหตุที่ทำให้พื้นที่นี้ถูกเรียกว่า ``อิซุมิ'' กล่าวกันว่าโทโยโทมิ ฮิเดโยชิได้ขนส่งน้ำอิซุมิชิมิสึนี้ไปยังปราสาทโอซาก้าและใช้สำหรับพิธีชงชา ในปีที่ 2 ของเรอิกิ (716) เมื่ออิซุมิโนะเก็นก่อตั้งขึ้นและพื้นที่นี้กลายเป็นศูนย์กลางของการเมืองท้องถิ่น อิซุมิ โกชะ (โกชะ ไดเมียวจิน: โอโทริ/อิซูมิ) ถูกสร้างขึ้นถัดจากศาลเจ้าอิซุมิ อิโนอุเอะ ศาลเจ้าอิซุมิ คุนิ โซจะ ถูกสร้างขึ้นเพื่อประดิษฐานอานาชิ ฮิจิริ สุมิคาวะ และฮิเนะ ทางเหนือของห้องโถงหลักของศาลเจ้าอิซุมิ อิโนะอุเอะ อาคารหลักของโกชะ โซจะ ซึ่งสร้างขึ้นใหม่โดยฮิเดโยริ โทโยโทมิในปี 1605 ยังคงหลงเหลืออยู่และถูกกำหนดให้เป็นทรัพย์สินทางวัฒนธรรมที่สำคัญของชาติ