I 1813 købtes ejendommen af frøken Charlotte Amalie Scheel. Hun ophøjede stedet til enkesæde i 1872. Banken for Sorø og Omegn blev stiftet i 1895. Banken købte enkesædet i 1919, og rev det ned i 1925. I stedet byggedes samme år det nuværende hus tegnet af Sorø Akademis arkitekt Algot Lautrup-Larsen. Banken blev senere en filial af Privatbanken.