Ginkakuji, Kyoto'nun Doğu Dağları (Higashiyama) boyunca bir Zen tapınağıdır. 1482'de shogun Ashikaga Yoshimasa, Emeklilik villasını bugünkü tapınağın zemininde inşa etti ve büyükbabasının Kyoto'nun Kuzey Dağları'nın (Kitayama) tabanındaki emeklilik villası olan Kinkakuji'den (Altın Köşk) sonra modelledi. Villa, yoshimasa'nın 1490'da ölümünden sonra bir Zen tapınağına dönüştürüldü.
Sanat takıntılı bir shogun'un emeklilik villası olan Ginkakuji, büyükbabasının zamanlarının Kitayama kültürünün aksine, higashiyama kültürü olarak bilinen çağdaş kültürün merkezi haline geldi. Kyoto'nun aristokrat çevreleriyle sınırlı kalan Kitayama kültürünün aksine, Higashiyama kültürünün tüm ülke üzerinde geniş bir etkisi vardı. O zamanlar geliştirilen ve rafine edilen sanat, çay töreni, çiçek aranjmanı, noh Tiyatrosu, şiir, bahçe tasarımı ve mimariyi içerir.