Полное имя — Вивиан Мэри Хартли (Vivian Mary Hartley).
В семилетнем возрасте ее мать — набожная католичка — отдала дочь в монастырскую школу в Англии.
Вивьен Ли и Лоуренс Оливье прожили вместе 20 лет. Даже после развода актриса постоянно держала фотографии Лоуренса на своем прикроватном столике, а на номерном знаке своего «Роллс-Ройса» оставила буквы ВЛО (Вивьен леди Оливье) и попросила обращаться к ней как к леди Оливье.