Бившият Джеймс Бонд има общо трима внуци, за които признава, че са „разтопили сърцето му“. Ролята си на дядо актьорът описва като „пречистваща и красива“. Броснан се е женил два пъти и от двата си брака има общо пет деца – биологични и осиновени. Той става дядо за пръв път на 44-годишна възраст.