De op 9 oktober 1943 geboren Peter Faber groeide op in Amsterdam-Noord. Zijn jeugd was niet makkelijk: zijn ouders gaven hem weinig liefde en sloegen hem vaak. Na een zware mishandeling door zijn vader en moeder was de maat vol en besloot hij als tiener te gaan zwerven door Amsterdam.

"Mijn ouders waren altijd onvoorspelbaar; ik heb ook nooit heimwee naar ze gehad", vertelde Faber in een interview met Omroep MAX. "In huis was voor mij onveilig, buiten was juist veilig." Als jonge jongen moest Faber al snel zijn eigen boontjes doppen: om te overleven had hij allerlei verschillende baantjes.

Bij een kapper in Amsterdam-Noord zag hij een advertentie van een openluchttheater van Tuindorp Oostzaan waarin werd gevraagd om spelers. Hij werd aangenomen als amateurspeler en kreeg zijn eerste rol in Midzomernachtsdroom van Shakespeare. Daarna volgde hij een mimeopleiding, werd hij belichter bij Theatergroep Carrousel en rolde hij verder het vak in met het maken van eigen producties.

In 1970 richtte hij theatercollectief Het Werktheater op. Daar leerde hij zijn tweede vrouw kennen, de actrice Shireen Strooker, met wie hij twee van zijn vijf kinderen kreeg. Faber trouwde vijf keer, maar scheidde net zo vaak.