בשנת 1965 לואי הראשון קאהן הוזמן על ידי אקדמיית פיליפס אקסטר כדי לעצב ספרייה עבור בית הספר. האקדמיה תכננה את הספרייה החדשה במשך 15 שנה, אך התאכזבו באופן עקבי מהעיצובים שהאדריכלים והוועדה הציעו. האקדמיה הייתה מאוד קפדנית בידיעה איזה מבנה הם רצו: מבנה לבנים חיצוני שיתאים למבנים הגאורגיים של בית הספר ופנים עם הסביבה האידיאלית למחקר. השימוש הסימפטי של קאן בבריק וחשששותיו לאור טבעי, עמדו בעקרונות הספציפיים האלה שהאקדמיה תכננה לספרייה, וכך העיצוב נפל לידיו.קאן בנה את הספרייה בשלוש טבעות ריבועיות קונצנטריות. הטבעת החיצונית, אשר בנויה מלבנים נושאות עומס, כוללת את כל ארבעת הקירות החיצוניים ואת שולחנות הסנאים בספרייה מיד בתוכם. הטבעת האמצעית, בנויה מבטון מזוין, מחזיקה את ערימות הספרים הכבדות. הטבעת הפנימית היא פרוזדור דרמטי עם פתחים עגולים עצומים בקירותיה שחושפים מספר קומות של ערימות ספרים.