Aan de Vismarkt, nabij de haven, staan 17e-eeuwse huizen. Hier kan men zich makkelijk een voorstelling maken van de activiteiten in de Gouden Eeuw, toen Heusden een belangrijke handelsplaats (gespecialiseerd in vis) was.