Seine Kindheit war alles andere als unbeschwert, wie Brosnan selber in Interviews verriet. 1953 als einziges Kind eines Schreiners und einer Krankenschwester in Drogheda/Irland geboren, verließ der Vater die Familie, als der Sohn zwei Jahre alt war. Die Mutter fürchtete, in der katholischen Kleinstadt als Alleinerziehende anzuecken, zog nach London - und gab den kleinen Pierce zu seinen Großeltern. Seinen wenigen Freunden erzählte er, seine Mutter sei zu einem Kriegseinsatz in den Kongo geschickt worden. Bei seinen Großeltern fühlte er sich geborgen - bis beide starben. Er wurde weitergereicht zu einer Tante, die jedoch selbst gerade eine Familie aufbauen wollte und sich durch den Jungen gestört fühlte. Schließlich kam er zu einer anderen Tante, die ihn mehr akzeptierte.
Dennoch habe er sich stets als Außenseiter gefühlt, erinnert sich Brosnan. "Weil ich keine Vater- oder Mutterfigur hatte, habe ich mich selbst erzogen. Aus dem Schmerz heraus, keine Mutter mehr zu haben, erwuchs eine große Stärke, immer wieder eigene Entscheidungen zu treffen, das ganze Leben hindurch. Ich habe immer alleine eine Lösung gesucht. Es bringt mir nichts, mit anderen über meine Probleme zu reden."