Am 3. August 1913 begannen vier Frauen, die Anton Pichlmair und vor allem Pater Rupert Mayer für diese Aufgabe begeistert hatten, ihre Vorbereitungszeit. Sie wurden als Schwester Maria (Angelika Schmuderer), Schwester Paula (Agatha Helmer), Schwester Josefa (Rosa Maier) und Schwester Martha (Anna Aschenmaier) am 29. Juni 1914 die ersten Schwestern von der heiligen Familie. Ihr Leben und Beten stellten sie unter den Schutz der heiligen Familie von Nazareth. Für ihre apostolische Tätigkeit wählten sie als Patron den heiligen Paulus. Anton Pichlmair wurde der erste Präses der Gemeinschaft, Pater Rupert Mayer SJ ihr erster Spiritual.