Agnes Philippine Walter gründete im Jahre 1902 als junge Arztwitwe eine Gebetsgemeinschaft im Dritten Orden des heiligen Franziskus und brachte ihr Vermögen und das Wohnhaus mit ein. Aus diesen Anfängen entwickelte sich die Kinder- und Jugendhilfe-Einrichtung St. Canisius und in deren Fortführung die Franz von Assisi-Gesellschaft. Als die Schwesterngemeinschaft ihre Einrichtungen an diese übergaben und in den neuen Klosterbau zogen, gründeten sie 2007 eine gemeinnützige Stiftung, die den Namen der Gründerin Agnes Philippine Walter trägt.
