Il a, de plus, épousé l’aînée de la famille Descoings, négociants qui se sont enrichis grâce à l’achat de biens nationaux, comme de nombreux personnages de la Comédie humaine (voir Eugénie Grandet). À sa mort en 1805, il dispose d’une grande fortune qu’il laisse dans sa quasi-totalité à son fils, Jean-Jacques, en déshéritant sa fille Agathe, émigrée à Paris. Celle-ci a épousé Bridau, fonctionnaire intègre, honnête, qui voua sa vie à Napoléon. À la mort de son mari, Agathe se retrouve seule, avec peu de ressources pour élever ses deux fils Philippe et Joseph. Ses ennuis financiers suivront l’étoile napoléonienne. Philippe, militaire dans l’âme, fait le bonheur de sa mère, tandis que Joseph, le cadet, futur grand peintre, la désole. Hélas, bon à rien hors des champs de bataille, Philippe se refusera à servir les Bourbons après la chute de Napoléon. Un voyage aux États-Unis le rendra violent, buveur, menteur et voleur. Au plus fort de leurs problèmes d’argent, ils apprennent que leur oncle maternel, Jean-Jacques, est sous l’emprise d’une jeune et jolie paysanne, Flore Brazier, recueillie par leur père, et qui se surnomme Guillemets la Rabouilleuse (en français régional, une personne qui agite et trouble l’eau pour effrayer les écrevisses et les pêcher plus facilement). Jean-Jacques n’ayant pas d’enfants, Agathe et Joseph se rendent à Issoudun pour tenter de récupérer une partie de la fortune qui leur est due. Ils échoueront à cause de leur naïveté et de leur honnêteté et fuiront Issoudun, Joseph ayant été accusé à tort de tentative de meurtre par l’amant de la Rabouilleuse. Philippe, maintenant brouillé avec sa mère, tente également sa chance, avec plus de réussite. Il tue l’amant de Flore et oblige son oncle à épouser la Rabouilleuse. Son oncle meurt vite et Philippe épouse alors Flore. Il la tue par usure et dépendance aux vices parisiens. À la tête d’une fortune considérable après avoir été clochard, il réussit dans le monde et change de nom pour se donner le titre de comte, sans donner le moindre sou pour sauver sa mère malade. Il ne sait cependant anticiper les changements politiques et doit partir en Algérie, où il est tué. La fortune du père Rouget revient finalement à Joseph, alors artiste reconnu. .