สิ่งก่อสร้างที่เก่าแก่ที่สุดในบริเวณนี้คือบ้านหอคอย ในศตวรรษที่ 16 ซึ่งเป็นสถาปัตยกรรมป้องกันทั่วไปของเขตชายแดนสกอตแลนด์^{[ 1 ]}หอคอยนี้เป็นแกนหลักของสิ่งที่จะกลายเป็นบ้านมินโตในเวลาต่อมา

ที่ดินตกเป็นกรรมสิทธิ์ของตระกูลเอลเลียตราวปี ค.ศ. 1700 ^{[ 1 ]}ตระกูลเอลเลียตเป็นตระกูลชายแดนที่มีฐานะมั่นคงและมีฐานะสูงขึ้นเรื่อยๆ ตลอดหลายศตวรรษต่อมา จนกระทั่งได้รับการสถาปนาเป็นเอิร์ลแห่งมินโตในปี ค.ศ. 1813 ^{[ 1 ]}

ระหว่างปี ค.ศ. 1738 ถึง 1743 หอคอยเดิมถูกรวมเข้ากับคฤหาสน์สไตล์คลาสสิกที่สร้างขึ้นใหม่โดยวิลเลียม อดัม [ ^{1 ] การ}สร้างใหม่นี้ดำเนินการเพื่อเซอร์กิลเบิร์ต เอลเลียต บารอนเน็ตคนที่ 2 แห่งมินโตผู้ซึ่งต้องการปรับปรุงที่อยู่อาศัยของบรรพบุรุษให้ทันสมัยตามรสนิยมทางสถาปัตยกรรมร่วมสมัย

การออกแบบของอดัมได้ "ห่อหุ้ม" โครงสร้างเดิมจากศตวรรษที่ 16 ไว้ภายในคฤหาสน์สไตล์จอร์เจียนขนาดใหญ่สี่ชั้นอย่างมีประสิทธิภาพ แม้ว่าลักษณะการป้องกันของหอคอยเดิมจะยังคงอยู่ แต่รูปลักษณ์ภายนอกได้รับการเปลี่ยนแปลงให้กลายเป็นองค์ประกอบคลาสสิกที่สมมาตร

การปรับปรุงโครงสร้างครั้งสำคัญเกิดขึ้นระหว่างปี 1809 ถึง 1814 ภายใต้การกำกับดูแลของอาร์ชิบัลด์ เอลเลียต [ ^{1 ] [ 2 ] ระยะ}นี้ได้เปลี่ยนบ้านให้มีผังเป็นรูปตัว V โดยมีอาคารหลักสองหลังมาบรรจบกันที่มุมแหลม^{[ 2 ]}การจัดวางนี้สร้างลำดับห้องหลักที่จัดเรียงอย่างระมัดระวังตามแนวแกนด้านในของตัว V และสิ้นสุดที่จุดยอด^{[ 2 ]}แบบร่างทางสถาปัตยกรรมที่เก็บรักษาไว้ในหอสมุดแห่งชาติสกอตแลนด์บันทึกการเปลี่ยนแปลงที่เอลเลียตเสนอ และเป็นหลักฐานแสดงถึงการเปลี่ยนแปลงทั้งด้านภายนอกและการวางผังภายใน

หลังสงครามโลกครั้งที่สอง มินโตเฮาส์ได้เข้าสู่ช่วงการใช้งานเชิงสถาบันรูปแบบใหม่ ในปี พ.ศ. 2495 ทรัพย์สินนี้ถูกให้เช่าแก่โรงเรียนเครกเมาท์ ซึ่งเป็นโรงเรียนประจำหญิงล้วน และต่อมาโรงเรียนได้ซื้อบ้านหลังนี้ในปี พ.ศ. 2505 ^{[ 1 ]}โรงเรียนปิดตัวลงในปี พ.ศ. 2509 ^{[ 1 ]}

หลังจากโรงเรียนปิดตัวลง ที่ดินก็ถูกซื้อคืนโดยเอิร์ลแห่งมินโต ทำให้กลับมาเป็นกรรมสิทธิ์ของครอบครัวอีกครั้ง^{[ 2 ]}หลังจากนั้นบ้านหลังนี้ก็ถูกปล่อยทิ้งร้างเป็นส่วนใหญ่และทรุดโทรมลงอย่างมากในช่วงทศวรรษ 1970 และ 1980 ^{[ 2 ] [ 3 ]}

ในช่วงปลายทศวรรษ 1980 บ้านมินโตทรุดโทรมอย่างหนักหลังจากมีการใช้งานอย่างจำกัดมานานหลายทศวรรษ^{[ 2 ]}การรั่วซึมของสภาพอากาศ การทำลายทรัพย์สิน และการขาดการบำรุงรักษาเป็นเวลานานทำให้โครงสร้างเสื่อมโทรมอย่างรวดเร็ว โดยเฉพาะอย่างยิ่งหลังคา พื้นภายใน และงานก่ออิฐ^{[ 2 ]}แม้ว่าจะมีการหารือเกี่ยวกับข้อเสนอสำหรับการบูรณะหรือการพัฒนาใหม่เป็นระยะ แต่ก็ไม่มีการนำแผนการอนุรักษ์ที่ครอบคลุมมาใช้^{[ 2 ]}สภาพของอาคารเริ่มย่ำแย่ลงเรื่อยๆ และหน่วยงานท้องถิ่นและหน่วยงานด้านมรดกทางวัฒนธรรมต่างแสดงความกังวลเกี่ยวกับความปลอดภัยสาธารณะและการอนุรักษ์สิ่งที่ถือว่าเป็นโครงสร้างที่มีความสำคัญทางสถาปัตยกรรม^{[ 2 ]}

ในเดือนมีนาคม พ.ศ. 2534 มีการประกาศข้อเสนอให้รื้อถอนอาคารทีละก้อนเพื่อนำไปสร้างใหม่ในญี่ปุ่น ซึ่งเป็นส่วนหนึ่งของการพัฒนาคันทรีคลับ แผนนี้ถูกยกเลิกในเดือนสิงหาคม พ.ศ. 2535 โดยมีรายงานว่าเนื่องจากสภาพเศรษฐกิจ^{[ 2 ]}เอิร์ลแห่งมินโตคนที่ 6กล่าวในเวลานั้นว่าการรื้อถอนจะเริ่มขึ้น “เดือนหน้า” ^{[ 2 ]}

เมื่อวันที่ 22 สิงหาคม พ.ศ. 2535 ตัวแทนด้านการอนุรักษ์ได้ตรวจสอบบ้านหลังนี้ และรายงานว่าถึงแม้ส่วนกลางของด้านทิศใต้จะพังทลายลง และมีหินผุกร่อนอยู่บ้าง แต่โครงสร้างโดยรวม ยังคงแข็งแรงดี ^{[ 2 ] งานรื้อถอนเริ่มขึ้นโดยไม่มีการประกาศต่อสาธารณะในวันที่ 25 สิงหาคม [ 2 ]}ในเช้าวันที่ 27 สิงหาคม มีรายงานว่าการรื้อถอนกำลังดำเนินอยู่ และมีไฟไหม้ภายในอาคาร ส่งผลกระทบต่อไม้ภายใน^{[ 2 ]}ต่อมาในบ่ายวันนั้น Historic Scotland ได้ออกแถลงข่าวเพื่อยืนยันว่ารัฐมนตรีว่าการกระทรวงสกอตแลนด์ เอียน แลง ได้อนุมัติสถานะขึ้นทะเบียนประเภท A ฉุกเฉิน (“เฉพาะจุด”) ให้แก่ “บ้านมินโตและระเบียงสวน” ^{[ 2 ] [ 3 ]}

ต่อมาลอร์ดมินโตได้กล่าวว่าคำแนะนำจากผู้เชี่ยวชาญระบุว่าการพยายามทำให้โครงสร้างปลอดภัยนั้นไม่สมจริง และควรดำเนินการรื้อถอน^{[ 2 ]}ในวันที่ 31 สิงหาคม เขาได้ยื่นขออนุญาตรื้อถอนอาคารที่ได้รับการขึ้นทะเบียน ตั้งแต่วันที่ 1 กันยายน พ.ศ. 2535 หน่วยงานท้องถิ่นได้ออกประกาศเตือนอาคารอันตรายหลายฉบับ โดยเริ่มแรกเกี่ยวข้องกับแกนกลางและส่วนสำคัญของด้านทิศใต้^{[ 2 ]}การรื้อถอนกลับมาดำเนินการต่อโดยใช้เครื่องจักรหนักภายในลาน และมีการออกประกาศเตือนเพิ่มเติมเมื่อพบว่าส่วนอื่นๆ ไม่มั่นคง^{[ 2 ] [ 3 ]}ภายในไม่กี่วัน แกนกลางและปีกตะวันออกถูกรื้อถอนไปเกือบหมด เหลือเพียงปีกตะวันตก ปีกบริการลอริเมอร์ และระเบียงสวน พร้อมกับกองเศษวัสดุก่อสร้างประเภท A ที่ถูกรื้อถอนจำนวนมาก^{[ 2 ]}

กรณีนี้ได้รับความสนใจจากทั่วประเทศและกลายเป็นประเด็นถกเถียงกันอย่างกว้างขวางในแวดวงการอนุรักษ์^{[ 2 ]}นับตั้งแต่นั้นมาก็มีการอ้างถึงกรณีนี้ในการอภิปรายเกี่ยวกับการใช้ประกาศอาคารอันตราย ความรับผิดชอบของเจ้าของอาคารประวัติศาสตร์ และข้อจำกัดในทางปฏิบัติของการขึ้นทะเบียนตามกฎหมายในกรณีที่เกิดการเสื่อมสภาพอย่างมีนัยสำคัญแล้ว^{[ 2 ]}

หลังจากรื้อถอน พื้นที่ดังกล่าวก็ถูกเคลียร์และพัฒนาใหม่ในภายหลัง^{[ 2 ]}บ้านพักหลังใหม่ที่รู้จักกันในชื่อ Old Parr House ถูกสร้างขึ้นในบริเวณใกล้เคียง^{[ 4 ]}มีเพียงลักษณะภูมิทัศน์ที่เกี่ยวข้องเท่านั้น รวมถึงระเบียงสวนในช่วงต้นศตวรรษที่ 20 ซึ่งออกแบบโดยเซอร์โรเบิร์ต ลอริเมอร์ ที่ยังคงหลงเหลืออยู่เป็นเครื่องเตือนใจที่จับต้องได้ของบ้านหลังเดิม^{[ 2 ]}