Ashman боюсь, ваши предположения об алгоритме работы не совсем верны. Если вы видите лицо в библиотеке лиц как подтвержденное, значит оно будет использоваться при обучении. Всё верно, используются только подтвержденные для обучения, но 99% лиц на практике туда попадает через ручное подтверждение. Есть еще другие случаи (лица ну очень похожие на уже подтвержденные добавляются автоматом), но пока пороги настроены так, что это бывает редко.
При падении может потеряться кэш, но если у вас функция распознавания снова работает (выдает новых кандидатов), значит кэш уже восстановился. И восстанавливается он из базы данных, то есть из тех лиц, что видны в библиотеке. Так что заново подтверждать уже подтвержденные лица не имеет смысла. Они уже учитываются. Не может такого быть, чтобы обучение строилось только на последних подтвержденных лицах, а предыдущие игнорировались бы.