Die Zeichnungen von Jan van Goyen entstanden 1650 auf der Reise des Künstlers an den Niederrhein und 1651, als er die Umgebung von Amsterdam und Haarlem aus bereiste. Zahlreiche Skizzen benutzte van Goyen als Vorlagen für Motive in seinen Gemälden oder für größere Handzeichnungen. Der sehr flüssige Zeichenstil van Goyens und die Spontanität, mit der er seine Eindrücke mit schwarzer Kreide festhielt, gehören zu dem Herausragendsten der Zeichenkunst des 17. Jahrhunderts in Holland.

Berühmt ist das Titelblatt des Skizzenbuchs, das am 7. Juni 1650 entstand und auf dem Jan van Goyen sich selbst und seine Begleitung vor der Silhouette der Stadt Kleve gezeichnet hat.

Seit 1895 gilt das 1650/1651 entstandene Skizzenbuch einer Reise an den Niederrhein des Jan van Goyen als ein Begriff in der niederländischen Kunstgeschichtsschreibung. Es umfasste ursprünglich ca. 150 Blätter mit insgesamt 190 Zeichnungen.

Bekannt wurde das Skizzenbuch 1895 in einer Sammlung in den Vereinigten Staaten. Versteigert wurde es 1918 bei Dodgson in New York und 1937 bei Frederik Möller in Amsterdam. Danach wurde das Skizzenbuch auseinandergenommen und einzeln unter Passepartout gelegt. Eigentümer aller Blätter war der Amsterdamer Sammler und Kunsthändler A.W.M. Mensing, der alle Blätter 1957 an den New Yorker Händler Dr. Lilienfeld verkaufte. Dieser verkaufte die Blätter einzeln, wodurch der Charakter des Skizzenbuches verloren ging.

Bei dem Verkauf durch Dr. Lilienfeld gelangten die Blätter in zahlreiche Sammlungen und in bedeutende Museen, z.B. das Metropolitan in New York, das Art Institute in Chicago und das Rijksmuseum in Amsterdam, das die Blätter mit Motiven von Tiel und Nimwegen fast lückenlos erworben hat. Außerdem besitzt das Rijksmuseum Amsterdam das Skizzenblatt mit einer Ansicht der Schwanenburg zu Kleve vom Kermisdahl aus (als Seite 4 des Skizzenbuchs von van Goyen nummeriert).

1993 wurde eine große Gruppe von Skizzen aus der Sammlung C. F. Louis de Wild, New York und der Sammlung Mr. and Mrs. Carl Goldschmidt, New York bei Christie’s in New York versteigert.

Das Museum Kurhaus Kleve besitzt bereits ein Blatt aus dem Skizzenbuch, die „Die Klever Neustadt vom Galgenberg“, das 1964 direkt bei Lilienfeld in New York angekauft wurde.