Ларсон родилась в Сакраменто, штат Калифорния. Она старшая дочь Сильвена и Хизер Десолнирсов. Её родители были хиропрактиками и вместе проходили практику. Развелись, когда Бри была ещё ребёнком. Позже Бри вместе с матерью и младшей сестрой Милэйн переехала в Лос-Анджелес. Ларсон обучалась актёрскому мастерству в Американской консерватории театра в Сан-Франциско. Первым языком, который знала Бри, был французский. В интервью журналу «Glamour» Бри рассказала, что взяла псевдоним Ларсон, потому что фамилия Дезольньер (девичья фамилия её прабабушки) достаточно труднопроизносимая (Десолнирс в английском варианте). Бабушка и дедушка Бри были франкоканадцами. Бабушка по отцовской линии Габриэль Дезольньер умерла в декабре 2015 года.
Любимые фильмы Бри Ларсон: «Женщина есть женщина» (1961), «Ангел-истребитель» (1962), «Игра» (1997), «Премьера» (1977), «Золотая молодёжь» (1989), «Я любопытна-фильм в жёлтом» (1967), «Обнажённая» (1993), «Красная пустыня» (1964), «Сцены из супружеской жизни» (1973), «Третий человек» (1949).