През октомври 2006 г. Мат се развежда с Мелиса Макнайт. От тази година до 2011 г. той напълно се дистанцира от медиите. „Не ми беше забавно, имаше много неща в личния ми живот... Не знам дали бракът ми беше обречен на провал, преди имахме страхотна връзка. Може би проблемът беше в болестта на дъщеря ми. Може би се загубих, като се фокусирах твърде много върху работата си“, споделя той в интервю. „Години и години почти не излизах от къщата. Исках да нямам ангажименти и да не съм никъде. И бях в състояние да го направя. Повечето актьори се обаждат на агентите си и питат какво имат за тях. Обадих се на моя и му казах да ми загуби номера за няколко години. Беше мрачно време. Почти получих нервна криза“, казва той пред The Mirror.