Аннотация: Предметом настоящего исследования являются программные методы автоматизированной предобработки исторических источников и разработка эффективного решения задач при работе с источниками личного происхождения. В рамках статьи проанализировано актуальное положение в области использования современных программных методов. Авторы демонстрируют основной круг аргументов, по которым такие исторические источники с технической точки зрения необходимо рассматривать отдельно. Проведен методологический разбор особенностей применения оптического распознания символов на основе предобработанных данных. Особое внимание уделено преимуществам и ключевым параметрам эффективности конечного результата работы при использовании автоматизированной преодобработки текстов, в том числе при дальнейшем использовании OCR-методов.   Научная новизна исследования заключается в предложении и подробном описании программного решения сложившейся проблемы на основе методов машинного обучения. Разработанная программа имеет три фазы работы с цифровыми копиями источников личного происхождения. В ее основе заложены использование библиотеки OpenCV и решения ряда задач с помощью преобразования Хафа. Опираясь на общий анализ исследования мы можем выделить основные преимущества автоматизированной предобработки сканированных документов: сокращение времени, повышение точности, борьба с искажениями и оптимизация процесса. Представленные результаты успешной апробации разработанного решения позволяют судить о возможных сферах ее эффективного применения.

Ключевые слова: Источники личного происхождения, машинное обучение, искусственный интеллект, библиотека OpenCV, преобразование Хафа, предобработка, метод OCR, распознание, архивация, оцифровка

Abstract: The subject of this research is software methods of automated preprocessing of historical sources and the development of effective solutions to problems when working with sources of personal origin. The article analyzes the current situation in the use of modern software methods. The authors demonstrate the main range of arguments for which such historical sources from a technical point of view should be considered separately. A methodological analysis of the features of the application of optical character recognition based on preprocessed data is carried out. Special attention is paid to the advantages and key parameters of the effectiveness of the final result of work when using automated text processing, including the further use of OCR methods. The scientific novelty of the research lies in the proposal and detailed description of a software solution to the current problem based on machine learning methods. The developed program has three phases of working with digital copies of sources of personal origin. It is based on the use of the OpenCV library and solving a number of problems using the Hough transform. Based on the general analysis of the study, we can highlight the main advantages of automated preprocessing of scanned documents: reducing time, improving accuracy, combating distortion and optimizing the process. The presented results of successful testing of the developed solution allow us to judge the possible areas of its effective application.

Keywords: archiving, recognition, method OCR, preprocessing, Hough transform, artificial intelligence, OpenCV library, machine learning, Sources of personal origin, digitization

Аннотация: В статье представлен методологический опыт работы с источниками военных ведомств, которые дают немало сведений о миграционных перемещениях конкретных людей. Министерство обороны создало большие возможности для историков, составив и выложив в общий доступ базы данных по десяткам миллионов погибших и награжденных советских граждан. На основе этих материалов Центрального архива Министерства обороны (ЦАМО), выстроенных по десяткам параметров связанной персональной информации, а также по сведениям областных, районных и городских военкоматов региональные власти готовили и публиковали в печатном и электронном виде соответствующие Книги памяти земляков, как погибших на фронтах Второй мировой войны, так и вернувшихся живыми домой. Сопоставление места рождения и года рождения фигуранта в упомянутых базах данных с местом и временем его призыва в РККА при высокой репрезентативности персоналий дает весьма точное представление об объемах и направленности эмиграции из родных мест. Базы данных и иные массовые источники, исходящие от Министерства обороны РФ, являются важнейшей и обязательной основой изучения российских миграций на длинных непрерывных линиях комплексной социографической информации. Их принципиальным методологическим преимуществом выступает возможность создания целостных картин формирующих социальных процессов и явлений на уровнях от индивидуальных человеческих судеб до агрегаций страновых масштабов.

Ключевые слова: база данных, миграция, историческая демография, социальная мобильность, Великая Отечественная война, Тамбовская область, Книга памяти, Герои СССР, военнослужащие, военнопленные

Abstract: The article presents methodological experience of working with sources of military departments, which provide a lot of information about the migration movements of specific people. The Ministry of Defense has created great opportunities for historians by compiling and sharing electronic managed databases on tens of millions of dead and decorated Soviet citizens. On the basis of these materials of the Central Archive of the Ministry of Defense (CAMO), arranged according to dozens of parameters of related personal information, as well as according to regional, district and city military enlistment offices, regional authorities prepared and published in printed and electronic form relevant Books in memory of fellow countrymen who died on the fronts of World War II and returned home alive.   Comparing the place of birth and the year of birth of the person involved in the mentioned databases with the place and time of his conscription into the Red Army with a high representativeness of personalities gives a very accurate idea of the volume and direction of emigration from their native places. Electronic databases and other mass sources originating from the Ministry of Defense of the Russian Federation are the most important and mandatory basis for studying Russian migrations on long continuous lines of complex sociographic information. Their principal methodological advantage is the possibility of creating holistic pictures of formative social processes and phenomena at the levels from individual human destinies to aggregations of country scales.

Keywords: heroes of the USSR, Memory Book, Tambov Region, The Great Patriotic War, social mobility, historical demographics, migration, database, military personnel, prisoners of war

Аннотация: Целью исследования является реконструкция демографических стратегий сельских социумов. Объект исследования – отдельные поселения и сельсоветы (группы поселений) Тамбовской и Тверской областей (в общей сложности 2861 поселение и 371 сельсовет). Представленная работа предпринята в рамках большого проекта по фрактальному моделированию демографических стратегий аграрного населения Европейской России в длительной исторической ретроспективе – начиная с середины XIX века. Хронологические рамки статьи охватывают не только кризис аграрной сферы 1990-х годов, но и определённое восстановление некоторых сельских поселений в 2000 – 2010-х годах. Для проведения экспериментов с предлагаемой компьютерной моделью была создана база данных, в которой в формализованном виде представлены основные параметры исследованных поселений и сельсоветов. Авторы приходят к выводу, что, несмотря на все отличия, демографические стратегии тверских и тамбовских поселений эволюционируют в рамках одной и той же закономерности: Тверская и Тамбовская области просто находятся в немного разных фазах одного и того же процесса. Крестьянское общество в Тверской области имеет меньший потенциал в качестве миграционного донора и базы для естественного роста. Более старая и северная Тверская область дольше шла по пути раскрестьянивания и урбанизации. Тамбовское крестьянское общество несколько менее истощено и, следовательно, могло бы демонстрировать большие демографические успехи в случае удачной демографической политики.

Ключевые слова: фрактальное моделирование, историческая демография, демографические стратегии, сельское население, Тамбовская область, Тверская область, миграция, рождаемость, смертность, демографические факторы

Abstract: The aim of the study is to reconstruct the demographic strategies of rural societies. The object of the study is individual settlements and village councils (groups of settlements) of the Tambov and Tver regions (a total of 2861 settlements and 371 village councils). The presented work is undertaken within the framework of a large project on fractal modeling of demographic strategies of the agrarian population of European Russia in a long historical retrospective – since the middle of the XIX century. The chronological framework of the article covers not only the agricultural crisis of the 1990s, but also a certain recovery of some rural settlements in the 2000s - 2010s. To conduct experiments with the proposed computer model, a database was created in which the main parameters of the studied settlements and village councils are presented in a formalized form. The authors conclude that, despite all the differences, the demographic strategies of Tver and Tambov settlements evolve within the same pattern: Tver and Tambov regions are simply in slightly different phases of the same process. Peasant society in the Tver region has less potential as a migration donor and a base for natural growth. The older and northern Tver Region has been following the path of de-settlement and urbanization for a longer time. Tambov peasant society is somewhat less depleted and, therefore, could demonstrate great demographic success in the case of a successful demographic policy.

Keywords: death rate, birth rate, migration, Tver region, Tambov region, rural population, demographic strategies, historical demography, fractal modeling, demographic factors

Аннотация: Проблема сохранения историко-культурного наследия очень актуальна в наши дни. С каждым днем все больше памятников разрушается, при этом интерес соотечественников к достопримечательностям России постоянно возрастает. Заметно увеличение количества туристических маршрутов по Московской области, часть которых отражает интерес к многочисленным дворянским усадьбам. В Подмосковье было немало родовых имений известных семейств Российской империи, однако сегодня большая часть из них находится в руинах. Один из таких постепенно разрушающихся памятников культуры, имеющий богатую историю, – усадьба Сенницы, расположенная в городском округе Озёры Московской области.   В статье проводится анализ комплекса источников, на основе которых создается виртуальная 3D-реконструкция усадьбы Сенницы (кон. XIX – нач. XX вв.), когда имение принадлежало семье графа Ф.Э. Келлера. Источниковая база исследования весьма разнообразна: планы, чертежи, картографические материалы, фотографии, описи имущества, сметы на постройку. Автором работы описывается поэтапный процесс 3D-моделирования, в рамках которого использовалось программное обеспечение SketchUp и Twinmotion. Важное место уделено строительной истории Сенниц и личностям ее владельцев. Реконструкция строений усадебного комплекса Сенницы позволяет визуализировать облик разрушенного памятника культуры, а также продемонстрировать высокий потенциал применения методик 3D-моделирования в историко-культурных исследованиях. Данная работа проводится в рамках проекта кафедры исторической информатики исторического факультета МГУ им. М. В. Ломоносова по воссозданию облика дворянских усадеб Подмосковья.

Ключевые слова: усадьба, дворянская усадьба Сенницы, Ф Э Келлер, культурное наследие, Московская область, источниковедческие аспекты, 3D моделирование, виртуальная реконструкция, визуализация, колоризация

Abstract: The problem of historical and cultural heritage preservation is very relevant these days. Increasing number of monuments is being destroyed every day; however, our compatriots are continuously becoming more interested in landmarks Russia. There has been a marked increase in the number of tourist routes in Moscow region. Numerous noble estates represent an important part of the region’s cultural assets. In Moscow region, there are lots of former estates of prominent families of the Russian Empire: today many of these properties are in ruins. Manor Sennitsy situated in Ozyory district of Moscow region is one of such gradually decaying cultural monuments with a rich history. This study analyzes a set of sources, on the basis of which the author creates a virtual 3D-reconstruction of manor Sennitsy in the period of late 19th – early 20th century when it was owned by the family of Count F.E. Keller. The source base for the study is very diverse: plans, drawings, cartographic materials, photographs, inventories of property, construction cost estimates. The author describes gradual process of 3D-modelling, in the framework of which softwares SketchUp and Twinmotion were used. The article pays attention to the history of Sennitsy’s construction and its owners. Reconstruction of buildings of the Sennitsy manor complex allows to visualize an image of the destroyed monument of culture, as well as to demonstrate high potential of using 3D-modelling methods in history. This study is carried out within the framework of the Project of reconstruction of appearance of the noble estates of the Moscow region, supported by the Department of Historical Information Science of the Faculty of History of M.V. Lomonosov Moscow State University.

Keywords: virtual reconstruction, 3D modelling, source study aspects, Moscow region, cultural heritage, F E Keller, noble estate Sennitsy, manor, visualisation, colourisation

Аннотация: В статье представлены результаты проекта по созданию виртуальных моделей архитектурных памятников ландшафтного музея-заповедника "Василево" в Тверской области с их последующей 3D печатью и созданием масштабного макета. Музей-заповедник "Василево" расположен на территории усадьбы Львовых XVIII-XIX вв. и включает в себя усадебные постройки, а также 16 памятников деревянного зодчества XVIII-XIX вв., привезенных и установленных на территории заповедника их различных районов Тверского региона. Среди них - объекты культурного наследия федерального значения: деревянные храмы, памятники гражданской застройки. Музей является филиалом Тверского государственного объединенного музея и входит в туристический маршрут "Пушкинское кольцо Верхневолжья".   В результате реализации проекта авторов статьи были выполнены виртуальные модели и масштабные физические модели 19 архитектурных объектов музея-заповедника "Василево". В работе использовались технологии фотограмметрии, полигонального 3D моделирования, FFF 3D печати, макетирования. Процесс фотографирования для создания цифровой модели по технологии фотограмметрии осуществлялся с использованием профессионального БПЛА и зеркального фотоаппарата. Основным программным обеспечением являлись Blender, Autodesk Meshmixer, Agisoft Metashape. Опыт оцифровки объектов показал, что фотограмметрия позволяет хорошо запечатлеть передать в компьютерной модели мелкие детали, которые могут быть в дальнейшем отражены в масштабных моделях при 3D печати. В частности, это деревянные стены и перекрытия различной конструкции, каменная кладка, гравированные изображения и надписи на камне. 3D печать осуществлялась на 3D-принтерах Creality Ender 3 и Creality Ender 5. Материалом для печати являлась пластмасса полилактид. Напечатанные модели были раскрашены и укреплены в виде масштабного макета. Готовый макет был передан музею "Василево" и используется в целях музейного показа.

Ключевые слова: архитектура, виртуальная модель, 3D моделирование, 3D печать, музей, макет, деревянное зодчество, фотограмметрия, оцифровка, Тверская область

Abstract: The article presents the results of a project to create virtual models of architectural monuments of the Vasilevo Landscape Museum-Reserve in the Tver region with their subsequent 3D printing and creation of a large-scale layout. The Vasilevo Museum-Reserve is located on the territory of the Lviv estate of the XVIII-XIX centuries and includes manor buildings, as well as 16 monuments of wooden architecture of the XVIII-XIX centuries, brought and installed on the territory of the reserve of their various districts of the Tver region. Among them are objects of cultural heritage of federal significance: wooden temples, monuments of civil development. The museum is a branch of the Tver State United Museum and is included in the tourist route "Pushkin Ring of the Upper Volga region". As a result of the authors' project, virtual models and large-scale physical models of 19 architectural objects of the Vasilevo Museum-Reserve were made. Photogrammetry, polygonal 3D modeling, FFF 3D printing, and layout technologies were used in the work. The process of photographing to create a digital model using photogrammetry technology was carried out using a professional UAV and a SLR camera. The main software was Blender, Autodesk Meshmixer, Agisoft Metashape. The experience of digitizing objects has shown that photogrammetry makes it possible to capture fine details well in a computer model, which can be further reflected in large-scale models with 3D printing. In particular, these are wooden walls and ceilings of various designs, masonry, engraved images and inscriptions on stone. 3D printing was carried out on Creality Ender 3 and Creality Ender 5 3D printers. The printing material was polylactide plastic. The printed models were painted and reinforced in the form of a scale model. The finished model was transferred to the Vasilevo Museum and is used for museum display.

Keywords: digitization, photogrammetry, wooden architecture, model, museum, 3D printing, 3D modeling, virtual model, architecture, Tver region

Аннотация: В данном исследовании изучаются материалы советской, российской и американской прессы, посвященные программе первого советско-американского космического сотрудничества «Союз–Аполлон», реализованной в июле 1975 года. Отображение подготовки, реализации проекта и результатов полета составляет предмет данного исследования. Источниковую базу исследования составляет периодическая печать, а именно статьи советских (российских) газет «Известия» и «Правда» и американской «The New York Times», которые расположены на ресурсе «EastView» и на сайте архива «Нью Йорк Таймс». В данном исследовании использован комплекс аналитических методов и компьютерных технологий, включающий метод контент-анализа. Новизна исследования связана с постановкой задачи сравнения освещения в прессе государств-участников информации о подготовке, реализации проекта и результатах полета. Актуальность исследования заключается в апробации новых исследовательских методов и подходов при работе с большими полнотекстовыми базами данных, в том числе на иностранном языке. В ходе исследования выявлены четыре аспекта отражения программы «Союз-Аполлон» в анализируемых газетах: сотрудничество в космосе, влияние проекта на международные отношения, влияние программы на дальнейшее развитие мировой пилотируемой космонавтики, а также роль советских и американских участников программы в ее успешной реализации.

Ключевые слова: космос, сотрудничество, космонавтика, ЭПАС, Союз-Аполлон, СССР, США, Стаффорд, Леонов, полет

Abstract: This study examines the materials of the Soviet, Russian and American press devoted to the program of the first Soviet-American space cooperation "Soyuz–Apollo", implemented in July 1975. The display of the preparation, implementation of the project and the results of the flight is the subject of this study. The source base of the research is the periodical press, namely articles of the Soviet (Russian) newspapers Izvestia and Pravda and the American The New York Times, which are located on the EastView resource and on the website of the New York Times archive. In this study, a set of analytical methods and computer technologies was used, including the method of content analysis. The novelty of the study is related to the task of comparing the press coverage of the participating states of information about the preparation, implementation of the project and the results of the flight. The relevance of the research lies in the approbation of new research methods and approaches when working with large full-text databases, including in a foreign language. The study revealed four aspects of the reflection of the Soyuz-Apollo program in the analyzed newspapers: cooperation in space, the impact of the project on international relations, the impact of the program on the further development of the world manned cosmonautics, as well as the role of Soviet and American participants of the program in its successful implementation.

Keywords: flight, Leonov, Stafford, USA, USSR, Apollo–Soyuz, astronautics, ASTP, cooperation, space

Аннотация: Наша статья посвящена попытке применения современных методов NLP для оптимизации процесса распознавания текста исторических источников. Любой исследователь, решивший воспользоваться инструментами распознавания отсканированных текстов, столкнется с рядом ограничений точности конвейера (последовательности операций распознавания). Даже наиболее качественно обученные модели могут давать существенную ошибку по причине неудовлетворительного состояния дошедшего до нас источника: порезы, изгибы, кляксы, стертые буквы – всё это мешает качественному распознаванию. Наше предположение состоит в том, что, используя заранее заданный набор слов, маркирующих присутствие интересующей нас темы, с помощью модуля нечетких множеств (Fuzzy sets) из NLP-библиотеки SpaCy, мы сможем восстановить по шаблонам те слова, которые по итогам процедуры распознавания оказались распознаны с ошибками. Для проверки качества процедуры восстановления текста на выборке из 50 номеров газеты «Биржевые ведомости» мы посчитали оценки количества слов, которые бы не вошли в семантический анализ из-за неправильного распознавания. Все метрики были посчитаны также с использованием паттернов нечетких множеств. Оказалось, что в среднем на номер «Биржевых ведомостей» приходится 938.9 слов, маркирующих тему нашего исследования – торговые и финансовые операции с ценными бумагами. Из них изначально правильно распознаются в среднем 87.2% слов. Примерно 119.6 слов (в среднем на 50 номеров) содержат опечатки, связанные с некорректным распознаванием. Благодаря использованию алгоритмов нечетких множеств нам удалось эти слова восстановить и включить в семантический анализ. Мы считаем, что восполнение 12.8% слов, потенциально относящихся к изучаемой теме – это хороший результат, существенно повышающий качество дальнейшего семантического анализа текста методами компьютерного моделирования.

Ключевые слова: расстояние Левенштейна, Биржевые ведомости, предобработка текста, обработка естественного языка, нечеткие множества, исправление OCR, распознавание исторических источников, контент-анализ, тематическое моделирование, исторические газеты

Abstract: Our article is presenting an attempt to apply NLP methods to optimize the process of text recognition (in case of historical sources). Any researcher who decides to use scanned text recognition tools will face a number of limitations of the pipeline (sequence of recognition operations) accuracy. Even the most qualitatively trained models can give a significant error due to the unsatisfactory state of the source that has come down to us: cuts, bends, blots, erased letters - all these interfere with high-quality recognition. Our assumption is to use a predetermined set of words marking the presence of a study topic with Fuzzy sets module from the SpaCy to restore words that were recognized with mistakes. To check the quality of the text recovery procedure on a sample of 50 issues of the newspaper, we calculated estimates of the number of words that would not be included in the semantic analysis due to incorrect recognition. All metrics were also calculated using fuzzy set patterns. It turned out that approximately 119.6 words (mean for 50 issues) contain misprints associated with incorrect recognition. Using fuzzy set algorithms, we managed to restore these words and include them in semantic analysis.

Keywords: topic modeling, content analysis, Levenshtein distance, Birzhevye vedomosti, text preprocessing, NLP (natural language processing), fuzzy sets, OCR correction, recognition of historical sources, historical newspapers

Аннотация: Данная статья посвящена применению технологии лазерного 3D-сканирования для решения актуальных задач современной музейной работы. Показана возможность использования данной технологии для оцифровки объектов культурно-исторического наследия с целью их документирования, мониторинга состояния сохранности, реставрации, виртуальной реконструкции и репродуцирования. Приведены результаты практических работ по созданию высокоточных физических копий мраморных скульптур из музеев Санкт-Петербурга в результате комбинированного использования 3D-сканирования и фрезерных камнеобрабатывающих станков с числовым программным управлением. Кроме того, показана перспективность применения лазерных аддитивных технологий для реставрации и копирования исторических памятников. Приведенные в статье результаты работ по созданию копии мраморной итальянской скульптуры XVIII века «Примавера» из коллекции музея-заповедника «Царское село» являются первым опытом применения лазерного бесконтактного метода копирования скульптурных памятников в России. Данный подход был предложен и реализован автором данной статьи в кооперации с петербургской реставрационной компанией ООО «Ресстрой» и итальянскими партнерами. Кроме того, также впервые в нашей стране, автор продемонстрировал возможность применения технологии лазерного 3D-сканирования для мониторинга экстерьерных памятников и применения лазерных аддитивных технологий для реставрации и реконструкции поврежденных и полностью утраченных объектов культурно-исторического наследия.

Ключевые слова: Лазерное трехмерноу сканирование, культурно-историческое наследие, скульптурные памятники, документирование, мониторинг, оцифровка, реставрация, реконструкция, копирование, лазерные аддитивные технологии

Abstract: This article is devoted to the application of 3D laser scanning technology to solve the urgent problems of modern museum work. The possibility of using this technology for digitizing cultural and historical heritage objects for the purpose of documenting them, monitoring the state of preservation, restoration, virtual reconstruction, as well as creating copies of them is shown. The results of practical work on the creation of high-precision copies of marble sculptures from the museums of St. Petersburg as a result of the combined use of 3D scanning and milling stone processing machines with numerical control are presented. In addition, the prospects of using laser additive technologies for the restoration and replication of historical monuments are shown.

Keywords: digitising, monitoring, documentation, sculptural monuments, cultural and historical heritage, laser three-dimensional scanning, restoration, reconstruction, replication, laser additive technologies

Аннотация: В статье рассматривается содержание и итоги международной конференции Ассоциации «История и компьютер» (АИК) «Историческая информатика как Historical Data Science», состоявшейся 11–13 ноября 2022 г. на историческом факультете МГУ имени М.В. Ломоносова. Подробно описаны все этапы и формы проведения конференции: 2 пленарных заседания, секционные заседания, круглый стол. Конференция была посвящена 30-летию АИК и 10-летию журнала "Историческая информатика". В программу конференции вошло свыше 100 докладов, авторы которых представляли научные центры России, Азербайджана, Беларуси, Германии, Казахстана, Кыргызстана, Норвегии и Узбекистана.   Основную часть конференции составили 10 секционных заседаний, где были представлены доклады по актуальным историческим проблемам, решение которых предлагалось авторами на основе методов и технологий исторической информатики. При этом в большинстве докладов значительное внимание уделялось характеристике используемых данных, методам их обработки и визуализации. Большое внимание было уделено созданию баз данных и информационных систем, статистической обработке исторических данных, методам анализа текстов, исторической геоинформатике, 3-D моделированию. Рассматривались также результаты археологических исследований с применением цифровых технологий, методы исторической информатики в исследовательской работе архивов и музеев, цифровые технологии в историческом образовании.

Ключевые слова: история, историческая информатика, конференция, наука о данных, источник, метод, технология, данные, статистика, архив

Abstract: The article discusses the content and results of the international conference of the Association "History and Computer" (AIC) "Historical Informatics as Historical Data Science", held on November 11-13, 2022 at the Faculty of History of Lomonosov Moscow State University. All stages and forms of the conference are described in detail: 2 plenary sessions, breakout sessions, a round table. The conference was dedicated to the 30th anniversary of the AIC and the 10th anniversary of the journal "Historical Informatics". The conference program included over 100 reports, the authors of which represented scientific centers of Russia, Azerbaijan, Belarus, Germany, Kazakhstan, Kyrgyzstan, Norway and Uzbekistan. The main part of the conference consisted of 10 breakout sessions, where reports were presented on topical historical problems, the solution of which was proposed by the authors on the basis of methods and technologies of historical informatics. At the same time, in most reports, considerable attention was paid to the characteristics of the data used, methods of their processing and visualization. Much attention was paid to the creation of databases and information systems, statistical processing of historical data, methods of text analysis, historical geoinformatics, 3-D modeling. The results of archaeological research using digital technologies, methods of historical informatics in the research work of archives and museums, digital technologies in historical education were also considered.

Keywords: data, technology, method, source, data science, conference, historical information science, history, statistics, archive