ในช่วงยุคโฮกิ (ค.ศ. 770-781) ชายคนหนึ่งชื่อโคซาจิ โยชิมิ ได้เพาะปลูกพื้นที่รอบๆ บริเวณที่ปัจจุบันเรียกว่า โยชิมิโนซาโตะ บนเส้นทางหลักนันไค และก่อตั้งหมู่บ้านขึ้น มีบันทึกไว้ใน Manzaiki ว่าเขาสวดภาวนาต่อ Kasuga Daimyojin ในเวลานี้ เทพเจ้าต่างๆ เช่น ทาเคมิคาซึจิ โนะ มิโคโตะ, อิวานูชิ โนะ มิโคโตะ และอาเมโนะโคยาเนะ โนะ มิโคโตะ ประดิษฐานอยู่ที่นี่ ด้านหลังมีอนุสาวรีย์ผู้ก่อตั้งการปลูกหัวหอมซึ่งหาได้ยากในญี่ปุ่น