Франческо Скорсезе, дедушка Мартина по отцу, родился в Италии в коммуне Полицци-Дженероза в начале 1880-х годов. Мать Франческо умерла, когда ему было шесть или семь лет, поэтому после ещё одной женитьбы отца мальчик чувствовал себя брошенным. Вскоре он был усыновлён фермером, жившим по соседству. Работая в полях, Франческо начал думать об Америке, стране свободы, стране возможностей. В то время юноша был так называемым contadino — членом крестьянского класса фермеров, рыбаков и ремесленников. Он усердно работал на земле своего приёмного отца, у которого были большие планы на Франческо. Он желал, чтобы сын помогал ему ещё и по дому и когда-нибудь женился на одной из его дочерей, однако девятнадцатилетний Франческо был непреклонен: с каждым взмахом косы его желание отправиться в США всё увеличивалось. Отклонив предложение отца, он сел на судно и прибыл в Америку в начале XX века.
Что же до бабушки Мартина по отцу, Терезы, то она, как и её будущий супруг, родилась в Полицци-Дженероза. Тереза была великолепной кухаркой, создававшей классические блюда этого региона Италии. Маленькая, но волевая женщина покинула родину на небольшой лодке. После месяца странствий, голода и болезней Тереза увидела знаменитую зелёную леди с факелом — она наконец-то попала в США.
Дедушка Скорсезе по матери, Мартин Каппа, в честь которого позже назвали маленького Мартина, родился в коммуне Чиминна. Как и Франческо, Мартин почти не знал собственную мать и воспитывался приёмной семьёй. С достижением совершеннолетия высокий энергичный и элегантный молодой человек с необычными усами стал солдатом кавалерии.
Его будущая супруга, бабушка Скорсезе по матери, Доменика Каппа также родилась в Чиминне. Однажды она услышала стук копыт кавалерийских лошадей, проезжавших мимо её дома. Девушка выбежала на низкий балкон, откуда увидела солдат, восседавших на изнемогавших животных. Внезапно её глаза пересеклись с глазами симпатичного молодого воина в голубой униформе, на голове которого красовалась шляпа с большим белым пером. Они посмотрели друг другу в глаза и сразу же влюбились. После двадцати двух дней ухаживаний Мартин и Доменика поженились. В 1912 году родилась их дочь Сара. Мартин отправился в Америку, дабы найти новую жизнь для своей семьи. Оттуда он писал Доменике письма с просьбами приехать к нему, но она попросту боялась поездки и продолжала отказывать. Разочарованный Мартин сочинил последний призыв, угрожая уйти от неё, если она не приедет в срочном порядке. Доменика и Сара попали на следующее же судно, но только потому, что вместе с ними плыл родной брат девушки. Когда корабль уже был готов к отправке, Доменика обнаружила, что брат пропал — она была обманута. Путешествие было долгим и тяжёлым.
В конце концов, две совершенно разные семьи поселились в Нью-Йорке на Элизабет-стрит. Франческо, гордый мужчина безо всякого официального образования, устроился в Нью-йоркскую промышленную компанию, в верфях которой работал разнорабочим. Он, как и сотни других работников, находился под руководством вышестоящих, что совершенно его не устраивало. Мужчина покинул компанию и открыл десять продуктовых лавок. В начале 1900-х годов он обручился с Терезой в старой церкви святого Патрика. Скорсезе переехали на Элизабет-стрит, 241, а Каппа выбрали четвёртый этаж 232 дома через улицу.
Мартин Каппа работал на строительных лесах в небольшом городке Спрингфилд, что в штате Нью-Джерси, и возвращался домой только по выходным. Этот тяжёлый труд приносил ему сорок пять долларов в неделю — хорошие деньги для того времени. Не обходилось и без производственных травм — когда Мартин серьёзно повредил руку и выпал из рабочего графика, Доменика, профессиональная швея, приступила к работе, дабы уменьшить убытки. Как и многие итало-американки, женщина трудилась на дому, пытаясь выжить в демократическую эру свободного предпринимательства. Этому ремеслу она также обучала и дочерей, с интересом наблюдавших за её работой.
Мать Мартина Скорсезе, Кэтрин, родилась в 1912 году, а отец Чарльз (настоящее имя — Лучано) годом позже. Росли они в Маленькой Италии, где Кэтрин ходила в среднюю школу, которую бросила, так и не окончив. Вместо учёбы она устроилась на фабрику по производству одежды для детских кукол, проработав там до семнадцати лет. С наступлением совершеннолетия девушка перешла на другой завод на Второй Авеню. Незадолго после этого брат Чарльза пригласил её к мистеру Силверману, «королю Нью-Джерси», как его называли в народе, обрабатывавшему одежду, сделанную на фабриках Нью-Джерси. Кэтрин проработала у Силвермана тридцать девять лет.