Lindegården i Højbyen, der huset Kalundborg Museum, er i dag en bygning med uvurderlig kulturhistorisk værdi for byen. Lindegården består af seks bindingsværkslænger omkring to gårdspladser. Bygningerne er blevet til i flere faser, hvor den ældste del er fra begyndelsen af 1600-tallet.
Den 9. december 1806 overtog købmændene Wisti Raae og Niels Holst, Lindegården.En handel, der også omfattede arealer på gårdens overdrev længere mod vest kaldet Hestehaven. Wisti Raae havde allerede i 1795 købt den gård, der lå overfor Lindegården i Adelgade. I dag nr. 30. Her havde han indrettet krambod, fremstillede brændevin og malt, indrettet gode kældre til de flydende varer, store magasiner og stalde, samt en lejlighed til beboelse.
Nu kunne han kalde sig storkøbmand, brændevinsbrænder, maltgører, landmand og skipper med en galease i søen.
I 1808 blev Wisti Raae, der er født omkring 1764, eneejer af Lindegården og udvidede løbende sine aktiviteter, ved at opkøbe Lindevænget i nærheden til husdyrhold. Nu kunne han kalde sig storkøbmand, brændevinsbrænder, maltgører, landmand og skipper med en galease i søen. Wisti Raae, der havde tre sønner, døde i januar 1832 knap 68 år. Det blev den yngste, Peter Henrik Raae, der overtog Lindegården. Han døde af en hjerneblødning i 1859, 62, år. Tilbage sad enken, Birthe Raae, med fire børn. Blandt dem sønnen Visti på blot 14 år, der var udpeget til at tage over efter sin far.
Yderligere undersøgelser viste, at det var Kalundborgs grundlægger Esbern Snares vestre forborg, man var stødt på.
Birthe Raae måtte udleje gården i 11 år, indtil hendes søn Visti var fyldt 25 og blevet myndig, så han kunne tage over. Visti Raae, der selv skrev sit navn med W, giftede sig i 1870 med Vilhelmine Christiane Bodholt og flyttede ind på Lindegården. Visti Raae døde 6. august 1906, 61 år. Da parrets eneste søn, Peter Henrik Raae, var boghandler i Silkeborg, besluttede enken at sælge. Køberen af Lindegården og det tilhørende vænge, var murermester Jørgen Peter Christensen, der ville nedrive gården og udstykke Lindevænget, for at opføre villaer. Under forarbejdet stødte man på rester af en svær mur i kampesten og Nationalmuseet blev tilkaldt. Arkitekt C.M. Schmidt kunne hurtigt konstatere, at ruinerne mindede om de, der var fundet under Absalons Borg i København. Yderligere undersøgelser viste, at det var Kalundborgs grundlægger Esbern Snares vestre forborg, man var stødt på.
Gården blev ikke alene reddet fra nedrivning, men også fredet.
Planerne om villabebyggelse op mod Vor Frue Kirke fik mobiliseret kalundborgenserne, med kredslæge J.S. Møller i spidsen. Efter lange forhandlinger blev der i oktober 1907 indgået aftale om, at Lindegården skulle sælges til etatsråd Georg Bestle og hustru Caroline. Gården blev ikke alene reddet fra nedrivning, men også fredet. Året efter stiftedes en foreningen med Møller som formand, der ønskede, at etablere museum i Lindegården. Her lejede man tre lokaler af Bestle og åbnede den første udstilling allerede i 1910. Året efter belønnede Georg Bestle den initiativrige J.S. Møller, ved at udstedte et gavebrev og skænke Lindegården til Nationalmuseet. Kalundborg og Omegns Museum var en realitet.
Gravstedet, med en natursten og en skråtstillet tavle i Faxe-marmor, er bevaringsværdigt, da Wisti Raae var en driftig og kendt købmand i Kalundborg. I Højbyen blev bakken mellem Lindegården og Ruinparken tidligere kaldet Raaes Banke.
