Кажется будет не слишком разумно загрузить все архивы в одну базу. Свои я бы как минимум разделил на: собственные съёмки, семейный архив, присланное. В своих съемках у меня много равов разных форматов. В семейном архиве в основном тифы и оцифрованные видео. В присланных соответственно то что из интернета и людей (от части то что в функции сохранения из телеграма но шире). Кроме того что базу раздует и она скорее всего начнет сходить с ума, нет большого резона пересекать распознавания лиц из членов семьи с теми кого фотографировал на вечеринках, при том что последних распознавать не будет лишним. В общем, простой выбор профиля обращающегося к разным базам данных было бы идеально.