Al marcharse de su hogar, Marie dejó a sus dos hijas a cargo de unos parientes, con la intención de reclamarlas cuando le fuera posible. Lamentablemente la mujer fallecía poco después, víctima de la tuberculosis, y Alphonsine y su hermana Delphine se separaron. Alphonsine vivía y trabajaba en la granja de estos parientes y, según el biógrafo Romain Vienne, fue violada por uno de los trabajadores contando once o doce años. Cuando se conoció el incidente, la niña fue devuelta a su padre.