奥莉薇酒庄最早在12世纪已被作为葡萄园使用，在14世纪中期，奥莉薇家族(O’livery)购下此片葡萄园并以家族名称来命名。在接下来的数个世纪内，奥莉薇家族很快将酒庄的名声壮大起来，虽然具体表现我们无从得知，但从奥莉薇酒庄在整个中世纪时期活跃的地区贸易来看，酒庄应该有着不俗的表现。

奥莉薇家族对酒庄的掌管一直到1680年，接下来的两个世纪内，酒庄几经易主。所幸接管的家族均对葡萄种植和酿酒有着较大的投入，令酒庄一直在整个18、19世纪时期保持着较高的声誉和地位。酒庄主人变为Alexandre Watcher后的20世纪初，其后代Agnew Watcher及其丈夫Jacques de Bethmann共同经营酒庄。他们在20世纪前期入主奥莉薇酒庄并投下大量心血，令酒庄面积不仅扩展至惊人的上百公顷，更在1959年顺利被格拉夫商会列为16个列级酒庄之一。如今，酒庄的所有者是Jean-Jacques de Bethmann。奥莉薇酒庄 (Chateau Olivier)也成为法国的历史遗迹，它是雷奥良村两个真正拥有“城堡（chateau）”的酒庄。