Stadtbibliothek Bilke, Standkirche