ตระกูลไทระที่ล่มสลายเพราะการรบเก็นเปปลายยุคเฮอัน "ยานากิโนะโกะโชะ" ถูกใช้เป็นพระราชวังชั่วคราวของจักรพรรดิอันโตกุระหว่างสงครามเก็นเปช่วงระยะเวลาหนึ่งที่ตระกูลไทระไปใช้ชีวิตอยู่ในทะเล ในปี 1183 ตอนที่ตระกูลไทระซึ่งรับใช้จักรพรรดิอันโตกุได้ถูกไล่ออกจากเมืองโดยมินาโมโตะโนะโยชินากะและได้มุ่งหน้าไปยังดะไซฟุได้สร้างวังขึ้นในพื้นที่ที่เรียกว่ายานากิกะอุระซึ่งในตอนนั้นเกิดการเคลื่อนไหวของกลุ่มครอบครัวที่มีอำนาจในท้องถิ่น ดังนั้นบริเวณพื้นที่รอบๆทั้งหมดจึงถูกเรียกว่าไดริที่มีที่มาจากไดริที่หมายถึงเขตพระราชฐานชั้นในของวัง ในเขตศาลเจ้ามีแท่งหินสลักบทกลอนที่แต่งโดยลูกหลานของไทระถึงความทรงจำของชีวิตในเมืองหลวงที่เต็มไปด้วยความรุ่งโรจน์