Het pand is een rijksmonument (10561) sinds 3 maart 1966. Kadaster A1874 (140 m2), sinds 1970 met tuindeel A2009 (68 m2). Als bouwjaar wordt 1906 aangegeven maar dit is aantoonbaar onjuist. Vermoedelijk is het in de tweede helft van de 17e eeuw gebouwd. Mogelijk was het eigendom van meestertimmerman Antonie van Baak.
Het pand heeft een gevel met rechte kroonlijst, en voor de zolderverdieping twee gebeeldhouwde oeils-de-boeuf.
Medicine doctor Johannes Jacobus Verzijl (1796 Middelburg -1841 Woudsend) woonde hier van 1821-1830. Het huis werd verkocht aan horlogemaker en deurwaarder Jan Herdes Crom (1792-1842), die ook het pand links ernaast kocht (ooit bakkerij, afgebroken 1967), mogelijk als werkplaats.
De Hervormde Gemeente kocht dit pand na het overlijden van Crom en verkocht het in 1861 aan Harman Antonie Bessem, schilder. Diens vader, aannemer en meesterschilder, woonde in het monumentale pand rechts ernaast, nu Kerkstraat 31.
Bessem was in 1846 getrouwd met timmermansdochter Jannetjen Ekker (1823-1873). Zij hertrouwde in 1861 met hoofdonderwijzer Jacobus Diderius van Westendorp (1835-1881) uit Gorssel. Haar kinderen verkochten het pand in 1874 aan de buurman, bakker Hendrik Vis (1839-1927).
Het complex, waartoe ook twee schuren in de Van Baaksteeg horen, ging over op familielid Barteld Post (1870-1912) die Vis in de zaak opvolgde rond 1900. Hendrik Vis bleef in dit grote huis naast de bakkerij wonen, en ook zijn dochter Trijntje tot haar overlijden in 1950. Bakker Jan Post, zoon en opvolger van Barteld, kocht toen het huis en ging er wonen in plaats van achter de krappe bakkerij. Er werd een doorgang in de scheidingsmuur gemaakt. Deze situatie duurde tot 1967.
Het pand kende daarna diverse eigenaren. De kavel die in 1832 A162 heette en 440 m2 groot was, is nu slechts 140 m2 omdat er aan de achterkant een grote parkeerplaats is gekomen (De Ervensteeg).
