Manquait-il vraiment un château à Petit-Couronne ? Sans doute pas... On en comptait même jusqu'à quatre à la moitié du xxe siècle du château Cordonnier, situé dans l'actuelle enceinte de la Shell, il ne reste plus rien depuis la Seconde Guerre Mondiale. Idem pour le château Cavelier, bombardé et détruit après la guerre. Enfin, en 1987, les derniers vestiges du château du Rouvray disparaissaient après que le site eut été laissé à l'abandon par la Société Duquesne-Purina. Il n'en reste plus qu'un et non des moindres le château des Tourelles.
Léopold Naguet de Saint-Vulfran (maire de la commune de 1862 à 1875), estima un jour que sa particule valait bien un édifice et se décida en 1861 pour une demeure d'inspiration gothique le château des Tourelles était né. Les armes de la famille auraient figuré un temps sur les grilles, rappelant les origines des Naguet de Saint-Vulfran dont le fief était situé près de Pont-Audemer. Les deux tourelles asymétriques qui valent au château son appellation flanquent chaque angle de la façade, respectant scrupuleusement l'alternance de briques rouges et blanches. En pleine Première Guerre Mondiale, la Société des Hauts-Fourneaux devient propriétaire des lieux et y loge ses cadres dirigeants. Elle cèdera le château à la Ville en 1980 qui l'aménagera en 1996 pour accueillir les enfants de la halte-garderie jusqu’en 2010. En 2012, la Ville a lancé un chantier de réhabilitation du château. A l'issue de sa réhabilitation, il a été aménagé en Espace Jeunesse pour accueillir les jeunes de la Ville.
Aujourd’hui, le Château des Tourelles abrite l’Espace Jeunesse de la Ville.