Peter Albert wurde geboren am 31. Januar 1898 in Illingen. Peter Alberts Vater war Paul Bergmann und seine Mutter war Elisabeth Spaniol. Er hatte eine Schwester mit Namen Helena. Er war der jüngere von den zwei Kindern. Er hatte einen Halbbruder und eine Halbschwester, mit Namen Wilhelm Karl und Maria Karoline.