Het gebouw, ook wel bekend als het Pand van Taat, moet plaatsmaken voor een bouwplan, waarin zorgverlener DSV een belangrijke rol speelt. Die wil er een woonzorgcomplex neerzetten. Verder komen er eengezinswoningen. Voor het oude pand van Olympia is inmiddels een sloopvergunning verleend. De gemeente is onaangenaam verrast door de aanvraag van het genootschap. ,,Het is opvallend dat de monumentwaardigheid van het pand nooit eerder ter sprake is gekomen of onderkend.’’