โอลิวิเยร์เติบโตในควิเบก และในวัยเด็กเขาเล่นให้กับทีม Lévis Commandeurs ในลีกฮอกกี้เยาวชนระดับ AAA ของควิเบก (QMAAA) ก่อนที่จะได้รับการคัดเลือกโดยทีมMoncton Wildcats ในการดราฟท์ผู้เล่น ของลีกฮอกกี้เยาวชนระดับเมเจอร์ของควิเบก (QMJHL) ปี 2013 ^{[ 6 ]}อย่างไรก็ตาม เขาอยู่กับทีม Wildcats เพียงฤดูกาลครึ่งเท่านั้น ก่อนที่จะถูกเทรดไปยังทีมShawinigan Cataractesเพื่อแลกกับสิทธิ์เลือกในรอบที่ 3 ในเดือนธันวาคม 2014 ^{[ 7 ]}ในขณะที่ถูกเทรด โอลิวิเยร์ทำคะแนนได้ 21 แต้มจาก 86 เกม^{[ 2 ]}หลังจากเข้าร่วมทีม Cataractes โอลิวิเยร์ได้เล่นใน Winter Classic ครั้งแรกของ QMJHL และทำประตูได้ในเกมที่ชนะVictoriaville Tigres 4–2 ^{[ 8 ]}

ก่อนเริ่มฤดูกาล 2015–16โอลิวิเยร์ได้รับการแต่งตั้งเป็นผู้ช่วยกัปตันร่วมกับอเล็กซ์ พาเวลชิค, แซคารี เทย์เลอร์, อเล็กซิส ดาอูสต์ และจิโอวานนี ฟิโอเร [ ^{9 ] ใน}บทบาทนี้ เขาช่วยนำทีมไปสู่รอบชิงชนะเลิศถ้วยประธานาธิบดีก่อนที่จะถูกคัดออกโดยทีมรูอิน-โนรันดา ฮัสกี้ส์^{[ 10 ]}

ในคืนเปิดแคมป์ฝึกซ้อม QMJHL ฤดูกาล 2017–18 โอลิเวียร์ถูกเทรดไปยังเชอ ร์บรูก ฟีนิกซ์โดยแลกกับสิทธิ์เลือกตัว 2 ครั้งในการดราฟต์ปี 2020 ^{[ 11 ]}ภายในเดือนกุมภาพันธ์ 2018 โอลิเวียร์ทำคะแนนได้ 42 แต้มกับฟีนิกซ์ และยังดำรงตำแหน่งรองกัปตันทีมอีกด้วย จากผลงานการเล่นตลอด 5 ฤดูกาลใน QMJHL โอลิเวียร์ได้เซ็นสัญญาระดับมืออาชีพฉบับแรกกับมิลวอกี แอดมิรัลส์แห่งอเมริกันฮอกกี้ลีก (AHL) เมื่อวันที่ 19 กุมภาพันธ์ 2018 ^{[ 12 ]}หลังจากการเซ็นสัญญา เขายังคงอยู่กับฟีนิกซ์และช่วยให้ทีมเข้าถึงรอบที่สองของรอบเพลย์ออฟ โดยทำคะแนนได้ 6 แต้มจาก 10 เกม^{[ 2 ]}จากผลงานการเล่นในฤดูกาลปกติและรอบเพลย์ออฟ โอลิเวียร์ได้รับรางวัล MVP และรางวัลขวัญใจแฟนๆ ของทีม^{[ 13 ]}

หลังจากจบอาชีพนักกีฬาระดับเยาวชน โอลิวิเยร์ได้เข้าร่วม ค่ายพัฒนาและโชว์เคสผู้เล่นดาวรุ่ง ของแนชวิลล์ เพรเดเตอร์ส ก่อนฤดูกาล 2018–19 ^{[ 14 ] [ 15 ]}ในฤดูกาลแรกของการเป็นนักกีฬาอาชีพ โอลิวิเยร์ทำได้ 4 ประตูและ 12 แต้มจากการลงเล่น 54 เกม และยังเป็นผู้นำใน AHL ในเรื่องการทะเลาะวิวาทถึง 9 ครั้ง ด้วยเหตุนี้ เขาจึงได้รับการเซ็นสัญญาใหม่กับเพรเดเตอร์สเป็นเวลา 2 ปีสัญญาระดับเริ่มต้นสำหรับฤดูกาล 2019–20 และ 2020–21 ^{[ 16 ]}

โอลิวิเยร์ได้รับการแต่งตั้งให้ดำรงตำแหน่งต่อกับทีมแอดมิรัลส์ในช่วงเริ่มต้นฤดูกาล 2019–20 โดยทำได้ 7 คะแนนจาก 17 เกม ก่อนที่จะถูกเรียกตัวกลับไปเล่นให้กับทีมเพรเดเตอร์สเป็นครั้งแรกในวันที่ 18 พฤศจิกายน 2019 ^{[ 17 ]}เขาได้ลงเล่นใน NHL เป็นครั้งแรก โดยลงเล่นในไลน์ที่สี่ให้กับทีมเพรเดเตอร์สในเกมที่แพ้ให้กับวินนิเป็ก เจ็ตส์ 2–1 ในวันที่ 19 พฤศจิกายน 2019 ^{[ 18 ]}

หลังจากฤดูกาลที่สี่ของเขาภายในองค์กร Predators โอลิเวียร์ถูกเทรดไปยัง Columbus Blue Jackets แลกกับสิทธิ์เลือกในรอบที่สี่ในปี 2022เมื่อวันที่ 1 กรกฎาคม 2022 ^{[ 19 ]}

เมื่อวันที่ 5 มีนาคม พ.ศ. 2568 โอลิวิเยร์ได้เซ็นสัญญาขยายเวลา 6 ปี มูลค่า 18 ล้านดอลลาร์สหรัฐกับทีมบลูแจ็กเก็ตส์^{[ 20 ]}