ขณะที่ครอบครัวของเธออาศัยอยู่ในนครนิวยอร์ก ซึ่งพ่อของเธอเป็นบุคคลสำคัญในกลุ่มบริษัทสแตนดาร์ดออยล์มิลลิเซนต์ โรเจอร์ส วัยเด็ก และพี่น้องของเธอ ต่างก็มีความสุขกับการไปเที่ยวพักผ่อนในช่วงวันหยุดและสุดสัปดาห์ที่เมืองเล็กๆ อย่างแฟร์เฮเวนมาตั้งแต่เกิด พวกเธอใช้เวลาอย่างมีความสุขและไร้กังวลที่นั่นกับพ่อแม่ ซึ่งทั้งคู่ก็เป็นชาวแฟร์เฮเวนโดยกำเนิด ท่ามกลางญาติพี่น้องและเพื่อนฝูง โดยเฉพาะอย่างยิ่งการใช้เวลาร่วมกับปู่ย่าตายายทั้งฝ่ายแม่และฝ่ายพ่อ

มิลลี่รักการวาดภาพและการอ่านหนังสือมาก ว่ากันว่าครั้งหนึ่งเธอเคยพูดระหว่างไปเยี่ยมแฟร์เฮเวนว่า " ฉันหวังว่าเราจะมีห้องสมุดดีๆ สักแห่ง!"เมื่อเธอเสียชีวิตในวัยที่ยังเยาว์ ครอบครัวที่โศกเศร้าของเธอจึงมองหาวิธีที่เหมาะสมในการระลึกถึงชีวิตอันแสนสั้นของเธอ เนื่องจากเธอเป็นนักอ่านตัวยง โดยเฉพาะบทกวี ครอบครัวโรเจอร์สจึงตัดสินใจที่จะสร้างและบริจาคห้องสมุดให้กับเมืองแฟร์เฮเวน โดยตั้งชื่อห้องสมุดตามชื่อของเธอ และตั้งชื่อตามพี่น้องของเธอด้วย

ในปีเดียวกับที่เธอเสียชีวิต ได้มีการจัดซื้อที่ดินและเริ่มวางแผนที่จะสร้างหอสมุดมิลลิเซนต์อันงดงามและหรูหราในแฟร์เฮเวน ซึ่งเป็นอนุสรณ์สถานทางศิลปะที่โดดเด่นและใช้งานได้จริง พิธีวางศิลาฤกษ์จัดขึ้นในเดือนกันยายน ปี 1891 ในช่วงเช้าที่เงียบสงบ โดยมีเพียงครอบครัวและบาทหลวง เจ.เอ็ม. ไลตัน เข้าร่วม หลังจากสวดมนต์เสร็จ แฮร์รี่ น้องชายของมิลลี่ ได้วางศิลาฤกษ์ ภายในศิลาฤกษ์มีภาพร่างของมิลลิเซนต์ บันทึกประวัติบรรพบุรุษของตระกูลโรเจอร์ส และสำเนาหนังสือพิมพ์แฟร์เฮเวนสตาร์ที่มีภาพของอาคารที่วางแผนไว้

ห้องสมุดมิลลิเซนต์ได้อธิบายหน้าต่างอนุสรณ์ที่ระลึกถึงเด็กหญิงตัวน้อยผู้ปรารถนาจะมีห้องสมุดที่ดีในเมืองแฟร์เฮเวนไว้ดังนี้:

"ในห้องสมุด ทางด้านซ้ายของทางเข้าหลัก มีหน้าต่างกระจกสีที่งดงามตระการตา สร้างโดยเคลย์ตัน แอนด์ เบลล์ แห่งลอนดอน แผงตรงกลางเป็นรูปของเอราโต เทพีแห่งบทกวี และใบหน้าของเธอนั้นคล้ายคลึงอย่างมากกับใบหน้าของเด็กหญิงผู้ซึ่งเป็นที่มาของการสร้างห้องสมุดแห่งนี้"

มาร์ค ทเวนยกย่องห้องสมุดว่าเป็น "อุดมคติ" ^{[ 1 ]}