เจ้าของคนแรกที่ได้รับการยืนยันอย่างแน่นอนคือ เซอร์จอห์น มิลเลอร์บารอนเน็ตคนที่ 4 ซึ่งตระกูลของเขามีบทบาทสำคัญในชิเชสเตอร์โดยเริ่มจาก การเป็น ผู้พิพากษาและนายกเทศมนตรี ก่อนที่จะเป็นสมาชิกสภาผู้แทนราษฎรตั้งแต่ปลายศตวรรษที่ 17 เซอร์ จอห์น ได้ล้อมรั้วสวนสาธารณะที่เวสต์ ลาแวนต์ เสร็จสิ้นภายในปี 1740 หลังจากนั้นเขาอาจได้อาศัยอยู่ในบ้านลาแวนต์หลังแรก (ส่วนกลางของอาคารปัจจุบัน)

เฮนรี เพลแฮมน้องชายของดยุคแห่งนิวคาสเซิล เขียนจดหมายถึงดยุคว่า "ท่านทราบความคิดของข้าพเจ้าเกี่ยวกับเซอร์จอห์น เขาเป็นคนเป็นมิตรและซื่อสัตย์มาก" ^{[ 1 ] : 157}สิ่งนี้ต้องพิจารณาควบคู่ไปกับข้อเท็จจริงที่ว่าดยุคแห่งริชมอนด์คนที่ 2สามารถบอกดยุคแห่งนิวคาสเซิลได้ว่าเซอร์จอห์นได้กล่าวว่าเขาไม่สนใจพ่อตาของเขาเลย ดร.คอมบ์ส^{[ 1 ] : 38}เชื่อกันว่าเซอร์จอห์นถูกวาดภาพให้เป็นบุคคลที่มีบทบาทน้อยกว่าในภาพวาดปี 1759 โดยจอร์จ สตับส์ซึ่งแสดงให้เห็นชาร์ลส์ เลนน็อกซ์ ดยุคแห่งริชมอนด์คนที่ 3ออกล่าสัตว์ (ภาพนี้แขวนอยู่ในห้องโถงด้านหน้าของกู๊ดวูดเฮาส์ ) เขาเสียชีวิตในปี 1772 และเลดี้ซูซานนา ภรรยาม่ายของเขายังคงอยู่ที่บ้านลาแวนต์จนกระทั่งเสียชีวิตในปี 1788 เมื่อบ้านหลังนี้ถูกนำออกขายโดยเซอร์โทมัส มิลเลอร์ บุตรชายคนโตของเธอ ซึ่งในขณะนั้นได้ย้ายไปอาศัยอยู่ที่แฮมป์เชียร์แล้ว^{[ 2 ]}

ในปี ค.ศ. 1791 บ้านหลังนี้ถูกซื้อโดยดยุคแห่งริชมอนด์คนที่ 3 ซึ่งต่อมาได้ให้เฮนรี บาธเฮิร์สต์ เอิร์ลแห่งบาธเฮิร์สต์คนที่ 2เช่าต่อ ในปี ค.ศ. 1798 ดยุคได้เริ่มทำการปรับปรุงบ้าน ซึ่งดูเหมือนว่าจะเป็นช่วงที่บ้านถูกปรับทิศทางให้หันหน้าไปทางทิศเหนือ (แผนที่แสดงให้เห็นว่าทางเข้าเดิมมาจากทางทิศใต้) ดูเหมือนว่าเขาจะเสียชีวิต (ในปี ค.ศ. 1806) ในขณะที่โครงการกำลังดำเนินอยู่

ผู้พักอาศัยรายต่อไปคือ Henriette Ann Le Clerc ซึ่งเชื่อกันว่าเป็นบุตรสาวนอกสมรสของดยุค เหตุการณ์ไฟไหม้ที่ทำลายอาคารหลังนั้นเริ่มต้นขึ้น ในห้องนอนของ Henriette ใน Richmond House ในลอนดอนในปี 1791 ^{[ 3 ]} Henriette ถูกพามาจากฝรั่งเศสโดยLady Louisa Conolly น้องสาวของเขา ในปี 1778 เมื่ออายุ 5 ขวบ เพื่อมาอาศัยอยู่ที่ที่ดินGoodwood ของเธอ ^{[ 1 ] : 265}พินัยกรรมของเขาได้ระบุชื่อเธอเป็นผู้รับผลประโยชน์คนแรก โดยได้รับสิทธิ์ครอบครอง West Lavant House และ Park ตลอดชีวิต รวมถึงที่ดินและฟาร์มอื่นๆ เธอแต่งงานกับพันเอก (ต่อมาเป็นนายพล) John Dorrien เมื่อวันที่ 28 มีนาคม 1808 Charles (นามสกุลดั้งเดิมของตระกูล Lennox) บุตรคนเดียวของ John และ Henriette เกิดที่ Lavant ในเดือนมกราคม 1809 หลังจาก John เสียชีวิตในปี 1825 Henriette ได้บริหารที่ดินของเธอ ซึ่งเธอได้กล่าวถึงในจดหมายหลายฉบับถึง ดยุคคน ที่5 ^{[ 4 ]}เธอใช้เวลาส่วนใหญ่อยู่ที่ Lavant สี่สิบปีหลังจากที่เธอย้ายเข้ามาอยู่ในบ้าน Lavant ทางAgricultural Gazetteได้ประกาศการเสียชีวิตของเธอเมื่อวันที่ 6 มกราคม พ.ศ. 2389

ต่อมาบ้านหลังนั้นก็กลับไปอยู่ในความครอบครองของ Goodwood Estate และถูกปล่อยเช่าให้กับผู้เช่าหลายราย

ในปี ค.ศ. 1907 บ้านหลังนี้ถูกขายให้กับนายมอร์ริสันและครอบครัว เขาอาจเป็นผู้รับผิดชอบในการตกแต่งห้องรับประทานอาหาร

บ้านหลังนี้ถูกขายให้กับพันตรีเฮนรี เฟรเดอริก โลว์และครอบครัว ต่อมาในปี 1921 ภรรยาม่ายของเขาขายบ้านหลังนี้ให้กับพันตรีจูเลียน เดย์และอิซาเบลลา จากนั้นเธอก็ขายอาคารหลังนี้ให้กับโรงเรียนลาแวนต์เฮาส์ซึ่งเป็นโรงเรียนเอกชนและเป็นสมาชิกของสมาคมโรงเรียนหญิงล้วนผู้ก่อตั้งและครูใหญ่คือโดรา กรีน^{[ 5 ]}ความพยายามระดมทุนในเดือนพฤษภาคม 2016 เพื่อช่วยโรงเรียนไม่ประสบความสำเร็จ และโรงเรียนก็ปิดตัวลงในฤดูร้อนปี 2016 ^{[ 6 ]}

อาคารนี้กำลังจะมีชีวิตใหม่ โดยยังคงรักษาทรัพย์สินทางประวัติศาสตร์ของทั้งอาคารและจริยธรรมทางการศึกษาของโรงเรียนไว้ได้ เนื่องมาจาก Launchpad Charitable Trust ^{[ 7 ]}