Pour les amateurs de culture et d'histoire, la ville possède un centre historique doté de nombreux édifices et monuments témoignant de sa longue et riche histoire, qui lui a d'ailleurs valu son classement comme « Ville d'Art et d'Histoire »... An centre de ce patrimoine figure le Château de Dieppe, édifié entre le 14e et le 15e siècle, qui abrite aujourd'hui le musée de la ville, consacré à la mémoire maritime de la ville et qui possède l'une des plus belles collections d'ivoire d'Europe. Il faut d'ailleurs savoir Dieppe fut pendant près de trois siècles le centre du travail de l'ivoire en
France, du fait des importations massives de ce produit à partir du 15e siècle... Mais l'amateur d'histoire pourra apprécier la découverte de l'Eglise Saint-Rémy, réputée pour être l'une des plus belles églises de la région ; de l'église Saint-Jacques, des 12 e et 16 e siècles ; il pourra flâner sur le quai Duquesne et découvrir les arcades de la Bourse ainsi que du côté du quai Henri IV. Il découvrira également de nombreuses maisons de style régionaliste ou néo-normand de la fin du 20e siècle, notamment la maison Miffant, datant de 1624, un des rares vestiges datant d'avant l'incendie de la ville en 1694...