Фрэнк Лавджой родился 28 марта 1912 года в нью-йоркском районе Бронкс, но вырос в Нью-Джерси. Его отец был торговцем мебелью из штата Мэн, а мать происходила из семьи ирландских эмигрантов.
В подростковом возрасте Лавджой начал работать мелким клерком на Уолл-стрит, но «обвал на бирже в 1929 году лишил его работы» Лавджой пошёл учиться в Университете Нью-Йорка, и ради заработка стал играть в репертуарных театрах. Вскоре он отправился на гастроли по Северо-Западу США, а в 1934 году дебютировал на Бродвее в спектакле «Судный день». В течение последующих двенадцати лет Лавджой сыграл в семи бродвейских спектаклях.