Джанет Ли родилась в Мерседе, Калифорния, под именем Джинетт Хелен Моррисон. Она была единственным ребёнком Хелен Литы (урождённой Вестергард) и Фредерика Роберта Моррисона. Её мать была дочерью эмигрантов из Дании, а отец имел шотландско-ирландские и немецкие корни.
Была студенткой Университета Пасифик, изучала музыку и психологию.