Matthew Daddario, her ikisi de avukat olan Richard ve Christina Daddario'nun oğlu olarak New York'ta doğdu ve büyüdü. Bloomington'daki Indiana Üniversitesi'nde işletme okudu. Küçük kız kardeşi Catharine Daddario ve yine oyuncu olan ablası Alexandra Daddario ile ortanca çocuk olan Matt'in İtalyan, İrlandalı, İngiliz ve Macar/Slovak kökenleri vardır.