Hugo örökösei azonban felháborodtak, mondván a szerző túl szabadon kezelte ősük művét. Azt is sérelmezték, hogy feltámasztotta Javert felügyelőt, aki az eredeti regényben öngyilkos lesz. Ezért beperelték a két folytatást megjelentető Plon kiadót.

2004-ben a párizsi fellebbviteli bíróság szimbolikus, egy eurós kártérítésre ítélte a kiadót, "mivel nem lehet folytatást írni olyan teljes műhöz, mint A nyomorultak." Az utódok ekkor a legfelsőbb bírósághoz fordultak, és elérték, hogy az esetet újra megvizsgálják "az író erkölcsi jogainak megsértése" címén.

A legfőbb francia törvényszék azonban úgy döntött, hogy nem ad helyt a panasznak, hanem kimondta: a regény folytatásának megírásával semmilyen bűncselekmény nem történt - már csak azért sem, mert Francois Ceresa "nem tekinti magát olyan tehetségnek, mint amilyen Victor Hugo volt."