L'histoire commence avec Jules Maupassant, le grand-père du romancier Guy de Maupassant (1850-1893). Il est né à Paris, rue des Blancs-Manteaux, le 9 novembre 1795 et est employé des contributions directes de Bernay (Eure) quand il tombe amoureux de la belle Aglaé « aux yeux rieurs et gais, aux cheveux bruns et au visage grassouillet », la fille de son patron, le receveur des finances Pluchard, lequel ne cache pas son hostilité au projet d'union des jeunes gens. Qu'importe, Jules enlève la demoiselle et l'épouse le 10 janvier 1821 à Pont-Audemer. Le mariage est célébré à à onze heures du soir, une coutume romantique en pratique à cette époque.
Jules Maupassant, le château des Elfes de La Neuville, Jacques Anquetil
Les jeunes époux s'installent à Rouen au 26 de la rue Beauvoisine, dans un vaste immeuble voisin de l'actuelle rue Jean Lecanuet. Jules s'exerce à la profession « d' Entreposeur des tabacs » tandis qu' Aglaé lui donne deux enfants : Gustave, le père de Guy, né en 1821 et sa sœur Louise en 1825. Cette dernière épousera en juillet 1846 le poète et avocat Alfred Le Poittevin (1816-1848), l'un des plus fidèles amis de Gustave Flaubert.
Portrait de Gustave de Maupassant (1838). Toile d'Hippolyte Bellangé (1800-1866) sur laquelle on distingue au fond la villa blanche de Jules Maupassant
Strictement rasé, lèvres minces, le front surmonté d’une touffe de cheveux blancs qui complète une ressemblance étonnante avec Adolphe Thiers (1797-1877), colérique au caractère bien trempé, un brin retors et chafouin mais aussi libre penseur ennemi de l'Empire » Jules se révèle aussi entrepreneur avisé. En 1835, il installe sur le plateau est de Rouen, à La Neuville, aujourd'hui La neuville-Chant d'Oisel (Seine-Maritime), une exploitation agricole de 300 hectares sur un pan de la séculaire forêt de Longboël qu'il avait acquis pour le faire défricher deux ans plus tôt.
Dans le parc de son domaine, dominant la vallée de l'Andelle, il fait bâtir une grande « villa blanche à l'italienne » d'un étage où, son épouse et lui reçoivent artistes et lettrés comme le peintre Hippolyte Bellangé (1800-1866), le ténor Léon Achard (1831-1905) ou le romancier Gustave Flaubert (1821-1880).
Après la mort d'Agaé le 26 mai 1850, abandonnant son domaine aux mains de sa fille Louise, Jules se réinstalle à Rouen où il décédera le 15 janvier 1875.
Le 29 septembre 1872 le domaine est vendu à un filateur du nom de Paul Lenepveu-Decaux. Ce dernier confie à l'architecte Émile Janet (1838-1920) le soin d'ajouter à la villa blanche un étage et une aile qui la transforme dès lors en château.
Après être passée au mains de Jacques Wattebled en 1924, Jacques Anquetil (1934-1987), le célèbre coureur cycliste normand en devient propriétaire en 1961 et s'y installe avec sa famille à partir de 1969. Il baptiste son château « château des Elfes ».
Aujourd'hui, le château est devenu un lieu de réceptions et de séminaires.