Электронная версия «Книги Памяти»: работа продолжается

На сайте «Родная Вятка» продолжается работа по оцифровке «Книг Памяти» по Кировской области, Удмуртской республике, Республике Марий Эл и ряду других территорий, относящихся к географии портала. К настоящему времени в базу данных добавлено 232015 записей о людях (обработано 41% от общего числа страниц), в том числе  190595 по Кировской области (68%), 23719 по Удмуртии (18%), 7367 по Марий Эл (11%), 10334 по Татарстану (31%).

Вся работа выполняется на добровольных началах активными пользователями сайта «Родная Вятка». Приглашаем участвовать всех, кто хотел бы помочь в реализации этого проекта!

Создание электронной версии «Книги Памяти» – один из важнейших проектов, реализуемых на нашем портале уже на протяжении 4-х лет. Мы распознаём данные о персоналиях из опубликованных томов Книги Памяти и переводим их в формат базы данных с возможностями поиска и привязки записей к базе населённых пунктов. Всего в проект включено 53 тома печатных «Книг Памяти».

Цель проекта – сделать максимально доступной и удобной в использовании информацию из этого издания, хранящего сведения о героях Отечества – павших участниках Великой Отечественной войны. Несмотря на наличие в сети таких проектов как «Память народа», ОБД «Мемориал», где информации больше, бумажные «Книги Памяти» остаются важным источником. Информация в Книгах Памяти структурирована по содержимому, сгруппирована по районам, где родились или жили участники войны.

С момента последнего отчёта, который мы делали ровно год назад – 17 февраля 2018 г. (ссылка), были обработаны данные по следующим районам:

• Верхошижемский район, Кировская область
• Кирово-Чепецкий район, Кировская область
• Куженерский район, Республика Марий Эл
• Куменский район, Кировская область
• Оричевский район, Кировская область
• Оршанский район, Республика Марий Эл
• Пижанский район, Кировская область
• Подосиновский район, Кировская область
• Санчурский район, Кировская область
• Слободской район, Кировская область
• Советский район, Кировская область
• Сунский район, Кировская область
• Юрьянский район, Кировская область
• Яранский район, Кировская область

Всего на текущий момент:

• полностью или почти полностью обработаны 37 районов из 92.
• полностью добавлены на сайт следующие тома по Кировской области: Том 1, Том 2, Том 5, Том 8, Том 9, Том 10, Том 14, Том 19, КП ФСБ, по Удмуртии: Том 1.

О ходе добавления материалов в раздел «Книга Памяти» мы писали в комментариях к статье «Продолжается работа над электронной версией Книги Памяти».

Приглашаем участвовать!

Для того, чтобы принять участие в работе по оцифровке Книги Памяти по интересующим вас районам, сообщите нам об этом на форуме: https://rodnaya-vyatka.ru/forum/101222

Работа состоит из нескольких этапов:

1. Распознавание текста, проверка и исправление ошибок в программе распознавания текста. Сохранение результатов работы в текстовый файл.

2. Обработка текстового файла: перевод в формат 1 строка – 1 персона, устранение регулярных ошибок распознавания, исправление переносов.

3. Загрузка полученного файла в электронную таблицу, разбивка на колонки (ФИО и биографические данные), добавление служебных данных (номер тома,  номер региона, номер района, номер страницы).

4. Сопоставление с данными ОБД «Мемориал» и расстановка ссылок-идентификаторов страниц на указанном ресурсе (для последующего быстрого перехода к просмотру сканов). В ходе этой работы также производится устранение ряда допущенных ранее ошибок (пропуск или дублирование записей), а также добавление номера страницы, если он не был добавлен на предыдущем шаге.

5. Формирование идентификаторов записей и загрузка в базу данных портала.

6. Выполнение геопривязки записей (привязка по 1 записи, массовая привязка либо загрузка привязок по заранее подготовленному файлу).

Помощь нужна в основном на этапе 1-2-3, т.е. собственно с распознаванием текстов и корректировкой ошибок распознавания. Это достаточно трудоемкая работа, требующая внимания и усидчивости.

Для работы желательно иметь некоторый опыт работы в программах распознавания текста, текстовом и табличном редакторе, или твёрдое желание научиться.

Кроме собственно распознавания текста, мы выполняем привязку записей к базе населённых пунктов. В результате этой работы на страницах сёл и деревень появляются списки местных героев – павших воинов Великой Отечественной войны.

Как показала практика, наиболее эффективный путь решения этой задачи – обработка текста Книги Памяти по определенному району и составление списка географических объектов, там упоминаемых в качестве места рождения или места жительства воина. Объём такой таблицы значительно меньше, чем записей в Книги Памяти (из каждой деревни, как правило, несколько солдат). По этой таблице необходимо выполнить поиск населённых пунктов в базе сайта и проставить их ID. После обратного сопоставления с текстом Книги Памяти привязки мы загружаем на сайт. Как правило, после такой процедуры привязанными оказываются 70-90% записей (часть привязать к конкретному населённому пункту невозможно, т.к. место указано не точно – только сельсовет, не указано вовсе или указано ошибочно).

Если вы желаете помочь с привязкой записей – сообщите нам, мы подготовим файл для привязки по любому из обработанных районов.