Op een van zijn wandelingen maakte Vincent schetsen van Het Steen, een gebouw aan de Schelde dat deel uitmaakte van het verdedigingswerk van Antwerpen. Ook maakte hij een naar eigen zeggen "uitvoerig" schilderij van Het Steen. Vincent probeerde het schilderij -dat niet overgeleverd is- te verkopen en ging daarom langs bij een aantal handelaren in de stad, waarvan er één interesse toonde:

“Ik ben met mijn gezigt van ’t Steen nog naar een ander geweest, die het goed van toon & kleur vond, die echter in een rommel zat van zijn inventaris op te maken en klein behuisd is, maar waar ik na Nieuwjaar kon terugkomen. Het is een goed ding voor als er vreemdelingen zijn die een souvenir van Antwerpen willen hebben en om die reden zal ik in ’t zelfde genre van stadsgezigten er nog wel meer bij maken.” Lees de hele brief

Het is echter onduidelijk of Vincent het werk uiteindelijk bij deze handelaar kwijt kon.

De twee tekeningen van Het Steen bevinden zich inmiddels in de collectie van het Van Gogh Museum in Amsterdam.