Настоящее имя актёра — Робер-Шарль-Александр Кокийо (Robert-Charles-Alexandre Coquillaud). Родился в Париже. Между 1931 и 1943 годами сыграл в более чем 60 фильмах, почти исключительно в небольших или второстепенных ролях. Как пишет киновед Жинетт Венсендо, Ле Виган был «блестящим, экстравагантным актёром», который «специализировался на подозрительных / пользующихся дурной славой, угрожающих или диаболических персонажах» (specialised in louche, menacing or diabolical characters).
Во время немецкой оккупации Франции во время Второй мировой войны сотрудничал с нацистами и открыто выражал фашистские взгляды.
Во время съёмок в роли Жерико в кинофильме «Дети райка» (Les Enfants du Paradis) — фильме, который был намеренно выпущен в прокат в мае 1945 года, вскоре после освобождения Европы, — исчез и был заменён на Пьера Ренуара. В 1946 году был приговорён к 10 годам принудительного труда. После трёх лет работы в исправительном лагере был условно-досрочно освобождён под подписку. Бежал и укрылся от правосудия во Франкистской Испании, оттуда перебрался в Аргентину, где и умер в нищете 12 октября 1972 года в городе Тандиль.
С середины 1930-х годов был близким другом писателя Луи-Фердинанда Селина, сопровождал его и его жену в эвакуации в Германии. Выведен под собственным именем в биографической трилогии Селина («Из замка в замок», «Север», «Ригодон»).