Аннотация: Статья рассматривает влияние CAT-инструментов (Computer-Assisted Translation) на точность и естественность перевода в бизнес-коммуникации. Исследуются теоретические основы их работы, лингвистические аспекты, методы оценки качества перевода, а также когнитивные эффекты и перспективы развития. Основная цель – определить, насколько автоматизированные системы перевода соответствуют критериям точности и естественности текста по сравнению с профессиональным переводом, выявить их возможности и ограничения. Рассматриваются ключевые механизмы работы CAT-инструментов, такие как Translation Memory, интеграция с системами машинного перевода, терминологические базы и автоматический контроль качества. Особое внимание уделяется влиянию этих технологий на стилистическую адаптацию текста, а также на их применимость в различных сферах бизнеса. Анализируются преимущества и ограничения автоматизированного перевода в юридических, технических и маркетинговых текстах, а также перспективы развития интерактивных систем, способных адаптироваться к контексту и стилю целевой аудитории.  В ходе работы использованы методы сравнительного анализа переведенных текстов, лингвистического изучения синтаксических, семантических и прагматических особенностей, а также кейс-анализ эффективности CAT-инструментов в юридической, технической и маркетинговой сферах. Результаты исследования показывают, что CAT-инструменты значительно повышают точность и консистентность перевода в технических и юридических текстах, но имеют ограниченную применимость в маркетинговых материалах из-за недостаточной адаптации к стилистическим и культурным особенностям. Основные проблемы связаны с сегментацией текста, калькированием выражений и снижением экспрессивности перевода. Оптимальным решением является гибридный подход, сочетающий автоматизированный перевод с постредактированием от профессиональных переводчиков. Дальнейшее развитие нейросетевых технологий, искусственного интеллекта и интерактивных систем может повысить естественность и точность перевода, но контроль со стороны специалистов остается необходимым. Результаты исследования могут быть полезны для совершенствования стратегий применения CAT-инструментов, повышения эффективности работы переводчиков и улучшения стандартов качества перевода.

Ключевые слова: автоматизированные системы перевода, терминологические базы, Translation Memory, Контроль качества перевода, Гибридный перевод, CAT-инструменты, Машинный перевод, лингвистический анализ, нейросетевые модели, нативности перевода

Abstract: The article examines the impact of CAT tools (Computer-Assisted Translation) on the accuracy and naturalness of translation in business communications. The paper examines the theoretical foundations of their work, linguistic aspects, methods for assessing the quality of translation, as well as cognitive effects and development prospects. The main goal is to determine to what extent automated translation systems meet the criteria of accuracy and naturalness of the text in comparison with professional translation, to identify their capabilities and limitations. The key mechanisms of CAT tools, such as Translation Memory, integration with machine translation systems, terminology databases and automatic quality control, are considered. Special attention is paid to the impact of these technologies on the stylistic adaptation of the text, as well as on their applicability in various business areas. The advantages and limitations of automated translation in legal, technical and marketing texts are analyzed, as well as the prospects for the development of interactive systems capable of adapting to the context and style of the target audience. In the course of the work, methods of comparative analysis of translated texts, linguistic study of syntactic, semantic and pragmatic features, as well as case analysis of the effectiveness of CAT tools in the legal, technical and marketing fields were used. The results of the study show that CAT tools significantly improve the accuracy and consistency of translation in technical and legal texts, but have limited applicability in marketing materials due to insufficient adaptation to stylistic and cultural peculiarities. The main problems are related to text segmentation, expression calculus, and reduced expressivity of translation. The optimal solution is a hybrid approach combining automated translation with post-editing from professional translators. Further development of neural network technologies, artificial intelligence, and interactive systems can improve the naturalness and accuracy of translation, but specialist supervision remains necessary. The results of the study can be useful for improving strategies for using CAT tools, improving the efficiency of translators and improving translation quality standards.

Keywords: translation nativities, neural network models, linguistic analysis, Machine translation, CAT-tools, Hybrid translation, Translation quality control, Translation Memory, automated translation systems, terminology bases

Аннотация: Цифровизация всех областей жизнедеятельности оказала непосредственное влияние на прагматические аспекты речи. Обучение искусственного интеллекта распознаванию текста и голоса является неотъемлемой частью профессиональной деятельности цифровых лингвистов. Формирование фокуса наших научных интересов обусловлено поиском граней реального взаимодействия искусственного интеллекта и цифровой лингвистики. Нам представляется возможным выделить ряд направлений такого симбиоза в данном исследовании. Слияние когнитивной лингвистики и компьютерных технологий даёт возможность появиться и развиваться компьютерной лингвистике как отдельной отрасли науки. Научное предположение о возможности компьютера функционировать как человеческий мозг, создавать тексты и имитировать человеческую речь стало основой потенциального набора функциональных возможностей искусственного интеллекта в сфере лингвистики. Таким образом, в фокусе научных интересов стоит взаимодействие искусственного интеллекста и цифровой лингвистики. Основными этапами взаимодействия видятся следующие: описание всех комбинаций звуков, обучение машины фонетическим правилам и описание синонимического ряда каждого слова, описание правил когнитивных моделей развертывания текста и правил грамматики, решение задач автоматического синтеза текста, способность распознавать неявную оценку в речи и тексте, формулировка правил распознавания естественного языка по контексту. В процессе развития цифровой лингвистики формируются междисциплинарные связи, направленные на получение знаний в области компьютерных технологий и математического анализа, применение компьютерных технологий для анализа естественного языка, автоматическая обработка больших данных для написания исследований, анализ социальных явлений для оценки социальных сетей и других способов коммуникации. Компьютерная (цифровая) лингвистика, согласно оценке экспертов, станет наиболее популярной в ближайшем будущем среди профессий, связанных со сферой развития искусственного интеллекта. В настоящее время взаимодействие человека с компьютерными системами достигло высокого уровня, однако представляется возможным развитие способности машин распознавать не только четкую речь человека на разных языках, но и речь с патологиями, с домысливанием или различные диалекты и сленг.

Ключевые слова: искусственный интеллект, цифровая лингвистика, компьютерная лингвистика, когнитивная лингвистика, взаимодействие, теория личности, когнитивная теория, развитие, цифровая коммуникация, междисциплинарные связи

Abstract: Digitalization of all areas of life has had a direct impact on pragmatic aspects of speech. Teaching artificial intelligence to recognize text and voice is an integral part of professional activities of digital linguists. The formation of the focus of our scientific interests is determined by the search for forms of real interaction between artificial intelligence and digital linguistics. A number of areas of such symbiosis in this study seems to us possible to point out. The main stages of such interaction appear to be the following: description of all combinations of sounds, teaching the machine phonetic rules and description of the synonymous series of each word, description of the rules of cognitive models of text development and grammar rules, solving problems of automatic text synthesis, the ability to recognize implicit evaluation in the text, formulation of rules for natural language recognition based on context. In the process of development of digital linguistics, interdisciplinary connections are being formed aimed at obtaining knowledge in the field of computer technology and mathematical analysis, the use of computer technologies for natural language analysis, automatic processing of big data for writing research, analysis of social phenomena for assessing social networks and other methods of communication. Computer (digital) linguistics, according to experts, will become the most popular in the near future among professions related to the development of artificial intelligence. Currently, human interaction with computer systems has reached a high level, however, it seems possible to develop the ability of machines to recognize not only clear human speech in different languages, but also speech with pathologies, with speculation or various dialects and slang.

Keywords: interdisciplinary connections, digital communication, development, cognitive theory, personality theory, interaction, cognitive linguistics, computational linguistics, digital linguistics, artificial intelligence

Аннотация: Появление ChatGPT открывает новые возможности для совершенствования методики преподавания делового устного перевода, особенно в такой сложной языковой комбинации, как русско-китайская. Несмотря на значительный прогресс в области машинного перевода, роль человека-переводчика остается незаменимой, особенно в сфере устного делового перевода, где требуется глубокое понимание культурного контекста и особенностей межкультурной коммуникации. В этой связи возникает необходимость разработки новых подходов к обучению переводчиков, которые позволят эффективно интегрировать возможности искусственного интеллекта в образовательный процесс при сохранении фокуса на развитии профессиональных компетенций обучающихся. В условиях стремительного развития технологий искусственного интеллекта и их интеграции в образовательный процесс особую актуальность приобретает вопрос эффективного использования современных цифровых инструментов в подготовке профессиональных переводчиков. Предметом исследования выступает методика интеграции искусственного интеллекта в процесс обучения деловому устному переводу.   Методология исследования основана на комплексном применении качественных и количественных методов, включая лонгитюдное наблюдение, глубинные интервью с экспертами и статистический анализ результатов обучения. Научная новизна исследования заключается в разработке инновационной методики обучения деловому устному переводу в русско-китайской языковой комбинации с интеграцией технологий искусственного интеллекта. Впервые предложен комплексный подход к использованию ChatGPT как многофункционального инструмента в образовательном процессе, включающий систему специально разработанных упражнений и методов оценки переводческих компетенций. Разработана оригинальная модульная структура курса, объединяющая традиционные методы обучения с возможностями искусственного интеллекта для создания аутентичных ситуаций делового общения. Создана уникальная методика проектирования учебных заданий с применением ChatGPT, основанная на принципе постепенного усложнения материала и учитывающая специфику русско-китайской деловой коммуникации. Эмпирически доказана эффективность разработанного подхода через систему лонгитюдного наблюдения и статистического анализа результатов обучения.Результаты исследования демонстрируют значительное повышение эффективности образовательного процесса при использовании разработанной методики, что подтверждается статистическими данными и положительной обратной связью от участников образовательного процесса.

Ключевые слова: устный перевод, русско-китайская комбинация, искусственный интеллект, ChatGPT, методика обучения переводу, переводческие компетенции, модульное обучение, межкультурная коммуникация, машинный перевод, деловая сфера

Abstract: The advent of ChatGPT opens up new opportunities for improving the teaching methods of business interpretation, especially in such a complex language combination as Russian-Chinese. Despite significant progress in the field of machine translation, the role of a human translator remains indispensable, especially in the field of business interpretation, where a deep understanding of the cultural context and features of intercultural communication is required. In this regard, there is a need to develop new approaches to training translators that will effectively integrate the capabilities of artificial intelligence into the educational process while maintaining the focus on developing students' professional competencies. In the context of the rapid development of artificial intelligence technologies and their integration into the educational process, the issue of effective use of modern digital tools in the training of professional translators is becoming particularly relevant. The subject of the research is the method of integrating artificial intelligence into the process of teaching business interpretation. The research methodology is based on the integrated application of qualitative and quantitative methods, including longitudinal observation, in-depth interviews with experts, and statistical analysis of learning outcomes. The scientific novelty of the research is the development of an innovative teaching methodology for business interpretation in a Russian-Chinese language combination with the integration of artificial intelligence technologies. For the first time, a comprehensive approach to using ChatGPT as a multifunctional tool in the educational process has been proposed, including a system of specially designed exercises and methods for assessing translation competencies. An original modular course structure has been developed that combines traditional teaching methods with artificial intelligence capabilities to create authentic business communication situations. A unique method of designing educational assignments using ChatGPT has been created, based on the principle of gradual complication of the material and taking into account the specifics of Russian-Chinese business communication. The effectiveness of the developed approach has been empirically proven through a system of longitudinal observation and statistical analysis of learning outcomes. The results of the study demonstrate a significant increase in the effectiveness of the educational process when using the developed methodology, which is confirmed by statistical data and positive feedback from participants in the educational process.

Keywords: machine translation, cross-cultural communication, modular training, translation competencies, methods of teaching translation, artificial intelligence, ChatGPT, Russian-Chinese combination, interpretation services, business sphere

Аннотация: Исследование посвящено проблеме автоматизированного перевода китайского политического дискурса на русский язык с применением технологий оптимизации БЯМ и мультиагентного подхода. В фокусе внимания находится разработка системы MAGIC-PTF, реализующей принцип многоступенчатой обработки текста через взаимодействие четырех специализированных агентов. Ключевым компонентом системы является Агент-Стилист, обеспечивающий стилистическое единообразие и терминологическую точность перевода на основе специально обученной БЯМ. Агент-Переводчик выполняет основную переводческую работу и отвечает за окончательное оформление текста. Агент-Редактор осуществляет многоуровневую проверку и корректировку перевода с учетом лингвистических, семантических и культурологических аспектов. Агент-Читатель анализирует текст с позиции целевой аудитории, оценивая его восприятие носителями русского языка. Предметом исследования также являются механизмы взаимодействия между агентами и процессы оптимизации качества перевода в рамках многоступенчатой системы обработки текста. Методология основана на интеграции технологий оптимизации БЯМ и мультиагентного подхода, с применением экспериментального тестирования на материале четвертого тома сборника «О государственном управлении» и его официального перевода на русский язык. Исследование включает комплексный анализ эффективности системы с использованием метрики COMET, а также сравнительное тестирование с существующими платформами машинного перевода. Научная новизна исследования заключается в создании комплексной методологии применения БЯМ для решения задач специализированного перевода и разработке эффективного механизма координации интеллектуальных агентов в процессе перевода. Экспериментальное исследование продемонстрировало превосходство MAGIC-PTF над традиционными системами машинного перевода по ключевым параметрам: точность передачи терминологии, стилистическая согласованность, сохранение культурно-специфических элементов политического дискурса. Результаты автоматического измерения с использованием метрики COMET подтвердили эффективность предложенного подхода. Разработанная система открывает новые возможности для автоматизированного перевода политического дискурса и может быть адаптирована для перевода других типов специализированных текстов, что подтверждает её значимость для развития современных переводческих технологий. Особую ценность представляет возможность масштабирования системы и её адаптации к различным языковым парам и типам дискурса, что создает перспективы для дальнейшего развития автоматизированного перевода специализированных текстов. Результаты исследования также вносят важный вклад в развитие теории и практики применения БЯМ в области профессионального перевода.

Ключевые слова: большие языковые модели, мультиагентный подход, политический дискурс, китайско-русский перевод, технологии оптимизации LLM, интеллектуальные агенты, Автоматизированный перевод, Специализированный перевод, Межкультурная коммуникация, Машинный перевод

Abstract: This research addresses the automated translation of Chinese political discourse into Russian utilizing Large Language Model (LLM) optimization technologies and a multi-agent approach. The study focuses on developing the MAGIC-PTF system, which implements multi-stage text processing through the interaction of four specialized agents. The system's key component is the Style Agent, which ensures stylistic uniformity and terminological accuracy based on a specifically trained LLM. The Translator Agent performs the primary translation work and is responsible for the final text formatting. The Editor Agent conducts multi-level verification and correction of translations, considering linguistic, semantic, and cultural aspects. The Reader Agent analyzes the text from the target audience's perspective, evaluating its reception by native Russian speakers. The methodology integrates LLM optimization technologies and a multi-agent approach, with experimental testing conducted on the fourth volume of "Xi Jinping: The Governance of China" and its official Russian translation. The study includes a comprehensive analysis of system effectiveness using the COMET metric and comparative testing with existing machine translation platforms. The research's scientific novelty lies in developing a methodology for applying LLMs to specialized translation tasks and creating an effective coordination mechanism for intelligent agents in the translation process. Experimental research demonstrated MAGIC-PTF's superiority over traditional machine translation systems in key parameters: terminological accuracy, stylistic consistency, and preservation of culture-specific elements in political discourse. The developed system opens new possibilities for automated translation of political discourse and can be adapted for translating other specialized text types, confirming its significance for modern translation technology development. Of particular value is the system's scalability and adaptability to various language pairs and discourse types, creating prospects for further development in automated specialized text translation. The research findings also contribute to advancing the theory and practice of LLM application in professional translation.

Keywords: Chinese-Russian Translation, Machine Translation, Cross-cultural Communication, Specialized Translation, Automated Translation, Intelligent Agents, LLM Optimization Technologies, Large Language Models, Multi-Agent Approach, Political Discourse

Аннотация: В данной статье исследуется полимодальное пространство в области вычислительной креативности у нейронных сетей. Объектом нашего исследования является полимодальная среда, которая объединяет в себе ряды разнородных кодов для выражения общей идеи, а предметом – возможность создания полимодального цифрового искусства с помощью текстового и голосового промта в генеративной сети Midjourney. Цель исследования – доказать, что вычислительная креативность у машин может быть обнаружена и описана по результатам итераций в процессе создания изображений, что в свою очередь позволит говорить о сложной полимодальной системе как об отдельной цифровой категории полимодальности. Задачи, которые решались в рамках данного исследования: 1) обоснование использования термина полимодальный в контексте вычислительной креативности в цифровом искусстве нейронных сетей; 2) проведение серии тестов с генеративной сетью Midjourney для возможности описания вербально-визуального контента; 3) анализ и выведение алгоритма создания изображения в условиях суммаризации данных и трансформационной креативности.  Нами был использован метод сплошной выборки при сборе языковых единиц по мере их встречаемости; контекстный анализ для систематического описания присутствующих вербальных и невербальных компонентах. Необходимо было провести эксперимент с генеративной сетью Midjourney для выявления закономерностей при создании графического пространства, а далее сравнить и сопоставить результаты итераций с оригинальным изображением. Научная новизна заключается в отсутствии исследований о полимодальном пространстве в контексте нейронных сетей и их генеративной способности. В ходе проведённого эксперимента нами были получены следующие результаты: термин «полимодальность» в контексте генеративной сети Midjourney и её «цифрового искусства» обусловлен наличием трёх каналов: вербального, визуального и голосового (звукового); тесты показали, что способность нейронной сети к созданию изображений посредством промта находится на высоком уровне, однако прослеживаются грубые технические ошибки в системе, которые не позволяют пользователям в полной мере приблизиться к желаемому результату при генерации изображения; суммаризация данных позволяет говорить о наличии черт вычислительной креативности у генеративных сетей, так как в ходе создания изображения возникают новые образы (идеи), ранее не предполагаемые пользователем.

Ключевые слова: искусственный интеллект, вычислительная креативность, трансформационная креативность, нейронная сеть, Миджорни, полимодальное пространство, полимодальный текст, итерация, промт, суммаризация

Abstract: This article deals with the polymodal space in the field of computational creativity in neural networks. The object of research is a polymodal environment that integrates a series of heterogeneous codes to express a common idea, and the subject is the possibility of creating polymodal digital art using text and voice prompts in the generative network Midjourney. The aim of the study is to prove that computational creativity can be detected and described based on the results of iterations in the process of creating images, which in turn will allow us to talk about a complex polymodal system as a separate digital category of polymodality. We used the continuous sampling method when collecting linguistic units as they occur in the analysis process; contextual analysis for the systematic identification and description of the verbal and non-verbal contexts. It was necessary to conduct an experiment with the generative network Midjourney to identify patterns in the creation of a graphic space through text and voice data input, and then compare and contrast the results of iterations with the original image. The scientific novelty consists in the lack of research on the polymodal space in the context of neural networks and their generative ability. During the experiment, we obtained the following results: the term ‘polymodality’ in the context of the generative network Midjourney and its ‘digital art’ is due to the presence of three channels: verbal, visual and voice; tests have shown that the ability of the neural network to create images through prompt is at a high level, however, there are rough technical errors that do not allow users to fully approach the desired result when they generate an image; the summarization of the data allows us to talk about the presence of features of computational creativity in generative networks.

Keywords: Midjourney, neural network, transformational creativity, computational creativity, artificial intelligence, polymodal space, polymodal text, iteration, prompt, summarization

Аннотация: Предметом исследования является анализ и совершенствование методов определения релевантности наименований проектов к информационному содержанию закупок с использованием больших языковых моделей. Объектом исследования служит база данных, содержащая наименования проектов и закупок в сфере электроэнергетики, собранная из открытых источников. Автор подробно рассматривает такие аспекты темы, как применение метрик TF-IDF и косинусного сходства для первичной фильтрации данных, а также детально описывает интеграцию и оценку эффективности больших языковых моделей, таких как GigaChat, GPT-3.5, и GPT-4 в задачах сопоставления текстовых данных. Особое внимание уделяется методикам уточнения сходства наименований на основе рефлексии, введенной в промпты больших языковых моделей, что позволяет повысить точность сопоставления данных.  В исследовании использованы методы TF-IDF и косинусного сходства для первичного анализа данных, а также большие языковые модели GigaChat, GPT-3.5 и GPT-4 для детальной проверки релевантности наименований проектов и закупок, включая рефлексию в промптах моделей для улучшения точности результатов. Новизна исследования заключается в разработке комбинированного подхода к определению релевантности наименований проектов и закупок, сочетающего традиционные методы обработки текстовой информации (TF-IDF, косинусное сходство) с возможностями больших языковых моделей. Особым вкладом автора в исследование темы является предложенная методика повышения точности сопоставления данных за счет уточнения результатов первичного отбора с помощью моделей GPT-3.5 и GPT-4 с оптимизированными промптами, включающими рефлексию. Основными выводами проведенного исследования являются подтверждение перспективности применения разработанного подхода в задачах информационной поддержки процессов закупок и реализации проектов, а также возможность использования полученных результатов для развития систем интеллектуального анализа текстовых данных в различных отраслях экономики. Исследование показало, что использование языковых моделей позволяет улучшить значение F2-меры до 0,65, что свидетельствует о значительном повышении качества сопоставления данных по сравнению с базовыми методами.

Ключевые слова: рефлексия в промптах, анализ текстовых данных, GPT-4, GigaChat, большие языковые модели, косинусное сходство, TF-IDF, определение релевантности, проекты и закупки, оптимизация бизнес-процессов

Abstract: The subject of the study is the analysis and improvement of methods for determining the relevance of project names to the information content of purchases using large language models. The object of the study is a database containing the names of projects and purchases in the field of electric power industry, collected from open sources. The author examines in detail such aspects of the topic as the use of TF-IDF and cosine similarity metrics for primary data filtering, and also describes in detail the integration and evaluation of the effectiveness of large language models such as GigaChat, GPT-3.5, and GPT-4 in text data matching tasks. Special attention is paid to the methods of clarifying the similarity of names based on reflection introduced into the prompta of large language models, which makes it possible to increase the accuracy of data comparison.  The study uses TF-IDF and cosine similarity methods for primary data analysis, as well as large GigaChat, GPT-3.5 and GPT-4 language models for detailed verification of the relevance of project names and purchases, including reflection in model prompta to improve the accuracy of results. The novelty of the research lies in the development of a combined approach to determining the relevance of project names and purchases, combining traditional methods of processing text information (TF-IDF, cosine similarity) with the capabilities of large language models. A special contribution of the author to the research of the topic is the proposed methodology for improving the accuracy of data comparison by clarifying the results of primary selection using GPT-3.5 and GPT-4 models with optimized prompta, including reflection. The main conclusions of the study are confirmation of the prospects of using the developed approach in the tasks of information support for procurement processes and project implementation, as well as the possibility of using the results obtained for the development of text data mining systems in various sectors of the economy. The study showed that the use of language models makes it possible to improve the value of the F2 measure to 0.65, which indicates a significant improvement in the quality of data comparison compared with basic methods.

Keywords: business process optimization, projects and procurement, relevance determination, reflexion in prompts, textual data analysis, GPT-4, GigaChat, large language models, cosine similarity, TF-IDF

Аннотация: Предметом настоящего исследования являются данные и методы, применяемые в задаче автоматического распознавания эмоций в разговорной речи. Данная задача приобрела в последнее время большую популярность, в первую очередь благодаря появлению больших датасетов размеченных данных и развитию моделей машинного обучения. Классификация речевых высказываний обычно осуществляется на основе 6 архетипических эмоций: гнева, страха, удивления, радости, отвращения и грусти. Большинство современных методов классификации основано на машинном обучении и модели трансформера с использованием подхода самообучения, в частности, такие модели, как Wav2vec 2.0, HuBERT и WavLM, которые рассмотрены в данной работе. В качестве данных анализируются размеченные английские и русские датасеты эмоциональной речи, в частности, датасеты Dusha и RESD. В качестве метода был проведён эксперимент в виде сравнения работы моделей Wav2vec 2.0, HuBERT и WavLM на относительно недавно собранных русских датасетах эмоциональной речи Dusha и RESD. Основной целью работы выступает анализ доступности и применимости имеющихся данных и подходов распознавания эмоций в речи для русского языка, исследований для которого до этого момента было проведено сравнительно мало. В рамках проведённого эксперимента были получены хорошие результаты качества классификации эмоции на русских датасетах Dusha и RESD. Наилучший результат продемонстрировала модель WavLM на датасете Dusha - 0.8782 по метрике Accuracy. На датасете RESD лучший результат тоже получила модель WavLM, при этом для неё было проведено предварительное обучение на датасете Dusha - 0.81 по метрике Accuracy. Высокие результаты классификации, в первую очередь за счёт качества и объёма собранного датасета Dusha, готворят о перспективности дальнейшего развития данной области для русского языка.

Ключевые слова: обработка естественного языка, распознавание эмоций, распознавание речи, машинное обучение, трансформеры, Wav2vec, HuBERT, WavLM, Dusha, RESD

Abstract: The subject of this study is the data and methods used in the task of automatic recognition of emotions in spoken speech. This task has gained great popularity recently, primarily due to the emergence of large datasets of labeled data and the development of machine learning models. The classification of speech utterances is usually based on 6 archetypal emotions: anger, fear, surprise, joy, disgust and sadness. Most modern classification methods are based on machine learning and transformer models using a self-learning approach, in particular, models such as Wav2vec 2.0, HuBERT and WavLM, which are considered in this paper. English and Russian datasets of emotional speech, in particular, the datasets Dusha and RESD, are analyzed as data. As a method, an experiment was conducted in the form of comparing the results of Wav2vec 2.0, HuBERT and WavLM models applied to the relatively recently collected Russian datasets of emotional speech Dusha and RESD. The main purpose of the work is to analyze the availability and applicability of available data and approaches to recognizing emotions in speech for the Russian language, for which relatively little research has been conducted up to this point. The best result was demonstrated by the WavLM model on the Dusha dataset - 0.8782 dataset according to the Accuracy metric. The WavLM model also received the best result on the RESD dataset, while preliminary training was conducted for it on the Dusha - 0.81 dataset using the Accuracy metric. High classification results, primarily due to the quality and size of the collected Dusha dataset, indicate the prospects for further development of this area for the Russian language.

Keywords: WavLM, HuBERT, Wav2vec, transformers, machine learning, emotion recognition, speech recognition, natural language processing, Dusha, RESD

Аннотация: Предметом исследования является спонтанно генерируемый текст голосовым помощником Алиса при создании сказки вместе с пользователем, а объектом – трансформации структуры, сказочных формул и контекста в условиях подбора языковых элементов и смыслов с помощью технологии искусственного интеллекта. Особое внимание уделяется навыку «Давай придумаем», который стал доступен для пользователей весной 2023 года. Также отдельно рассматривается пространственно-временной континуум, который создаётся системой с самого начала создания сказки – в разделе «Команда», где пользователю предлагают выбрать героев из разных эпох, культур и вселенных (литературных, медиа). Столкновение и взаимодействие фольклорных канонов с реалиями XXI века порождают неоднозначную реакцию на интерактивную возможность побывать в роли сказителя вместе с голосовым помощником.  Основным методом исследования выступила сплошная выборка, которая использовалась для распределения шагов, этапов и действий при создании сказочного сюжета. Помимо этого использовались сравнительно-сопоставительный метод и контекстуальный анализ. Для получения данных и последующего анализа составляющих был проведён и описан лингвистический эксперимент с голосовой колонкой Алиса от компании Яндекс. Стремительное развитие нейросетевых языковых моделей позволяет нам говорить о научной новизне исследуемого материала, так как данная сфера является неизученной и слишком быстро модифицируется. Важно подчеркнуть, что до настоящего времени тексты спонтанно генерируемых сказок, их структурное членение и соответствие сказочных формул в них фольклорным канонами не были изучены. Основным выводом проведённого исследования можно обозначить то, что доля участия пользователя при создании сказки с голосовым помощником Алиса сильно преувеличена. Трансформации в сказочных формулах типа зачин и концовка – не обнаружены. Создание присказки невозможно, если следовать алгоритму сборки, заложенному в голосовом помощнике. Самая большая доля перестраивания в спонтанно генерируемом тексте приходится на логику повествования, искажение контекста и локализацию.

Ключевые слова: искусственный интеллект, голосовой помощник Алиса, нейросеть, джипити, структура сказки, сказочные формулы, контекст, хронотоп, спонтанная генерация текста, коммуникация

Abstract: The subject of the study is a spontaneously generated text by the voice assistant Alice when it is creating a fairy tale together with the user, and the purpose of the study is the transformation of the structure, fairy-tale formulas and context in terms of the selection of linguistic elements and meanings using artificial intelligence technology. Particular attention has focused on the skill "Let's make it up", which became available to users in the spring of 2023. The collision and interaction of folklore canons with the realities of the 21st century give rise to an ambiguous reaction to the interactive opportunity to play the role of a storyteller together with a voice assistant. The main research method was a continuous sample, which was used to distribute the steps, stages and actions when it is creating a fairy-tale plot together with a voice assistant. In addition, methods such as comparative and contextual analyses were used to identify similarities and differences between traditional Russian fairy tales and a spontaneously generated fairy tale plot. To obtain the data and subsequent analysis of the components, a linguistic experiment with the voice assistant Alice from Yandex was conducted and described. The rapid development of neural network language models allows us to talk about the scientific novelty of the material under study, since this area is unexplored and is being modified too quickly. It is important to emphasize that to date, the texts of spontaneously generated fairy-tale, their structural division and the correspondence of fairy-tale formulas in them to folklore canons have not been studied. The main conclusion of the study is that the user's share in creating a fairy tale with the voice assistant Alice is greatly exaggerated.

Keywords: spontaneous text generation, context, spacetime, folklore formula, composition, neural network, GPT, voice assistant Alice, artificial intelligence, communication

Аннотация: Предметом исследования является содержание личностных смыслов в вопросах или вопросах-приветствиях в контексте английских формул общения. Объект исследования – способность голосового помощника Siri к имитации спонтанного диалога с человеком и адаптация искусственного интеллекта к естественной речи. Цель исследования – выявление особенностей и уровня языковых навыков Siri в процессе коммуникации с пользователями на английском языке. Подробно рассматриваются такие аспекты темы, как проблема понимания, существующая в двух типах коммуникации: 1) между человеком и человеком; 2) между машиной и человеком; использование искусственным интеллектом устойчивых формул общения в ответах по теме «Как дела?»; определение уровня и речетворческого потенциала в ответных репликах голосового помощника. В работе использовались следующие методы: описательный, сравнительно-сопоставительный, контекстуальный, сплошная выборка и лингвистический эксперимент. Научной новизной является то, что проблемы, связанные с пониманием личностных смыслов у голосового помощника Siri, никогда подробно не исследовались в филологии и лингвистике. В связи с широким распространением и использованием голосовых систем в разных сферах социальной и общественной жизни возникает необходимость анализа ошибок в речи и описания коммуникативных неудач в диалогах между голосовыми помощниками и пользователями. Полученные материалы позволят определить роль и место искусственного интеллекта в XXI веке и сделать прогнозы о его дальнейшем языковом развитии. Основными выводами проведённого исследования являются: 1) машина не способна генерировать ответы, опираясь на опыт прошлых впечатлений; 2) отклонения от норм английского речевого этикета в ответных репликах Siri незначительные, но часто приводят к коммуникативным неудачам; 3) в ответных репликах обнаружено одностороннее кодирование личностного смысла: от машины к человеку, но не наоборот.

Ключевые слова: голосовой помощник, Сири, искусственный интеллект, личностный смысл, коммуникация, диалог, английский речевой этикет, кодирование, разговорная речь, устойчивые формулы общения

Abstract: The subject of the study is the content of personal meanings of greeting questions in the context of English communication formulas of Siri. The object of the study is the ability of the voice assistant to simulate spontaneous dialogue with a person and the adaptation of artificial intelligence to natural speech. The purpose of the study is to identify the features and level of Siri's language skills in the process of communicating with users in English. Such aspects of the topic as the problem of understanding that exists in two types of communication are considered in detail: 1) between a person and a person; 2) between a machine and a person; the use of stable communication formulas by artificial intelligence as responses to the question «How are you?»; determining the level and speech-making potential in the responses of the voice assistant. The following methods were used in the research: descriptive, comparative, contextual, comparative method and linguistic experiment. The scientific novelty is that the problems related to encoding the personal meanings of the Siri voice assistant have never been studied in detail in philology and linguistics. Due to the prevalence use of voice systems in various spheres of social and public life, there is a need to analyze errors in speech and describe communication failures in dialogues between voice assistants and users. The main conclusions of the study are: 1) the machine is not able to generate answers based on the experience of past impressions; 2) deviations from the norms of English speech etiquette in Siri's responses are insignificant, but often lead to communicative failures; 3) the one-sided encoding of personal meaning was found in the responses: from the machine to the person, but not vice versa.

Keywords: stable communication formulas, colloquial speech, encoding, English speech etiquette, dialogue, communication, personal meaning, AI, Siri, voice assistant

Аннотация: В статье описаны различные способы использования генеративных предобученных языковых моделей для построения корпоративной вопросно-ответной системы. Существенным ограничением текущих генеративных предобученных языковых моделей является лимит по числу входных токенов, не позволяющий им работать «из коробки» с большим количеством документов или с документом большого размера. Для преодоления данного ограничения в работе рассмотрена индексация документов с последующим поисковым запросом и генерацией ответа на базе двух наиболее популярных на текущий момент open source решений – фреймворков Haystack, LlamaIndex. Было показано, что применение open source фреймворка Haystack при лучших настройках позволяет получить более точные ответы при построении корпоративной вопросно-ответной системы по сравнению с open source фреймворком LlamaIndex, однако требует использования в среднем несколько бо́льшего числа токенов. В статье использовался сравнительный анализ для оценки эффективности использования генеративных предобученных языковых моделей в корпоративных вопросно-ответных системах с помощью фреймворков Haystack и Llamaindex. Оценка полученных результатов осуществлялась с использованием метрики EM (exact match). Основными выводами проведенного исследования по созданию вопросно-ответных систем с использованием генеративных предобученных языковых моделей являются: 1. Использование иерархической индексации на текущий момент чрезвычайно затратно с точки зрения числа используемых токенов (около 160000 токенов для иерархической индексации против 30000 токенов в среднем для последовательной индексации), поскольку ответ генерируется путем последовательной обработки родительских и дочерних узлов. 2. Обработка информации при помощи фреймворка Haystack при лучших настройках позволяет получить несколько бо́льшую точность ответов, чем использование фреймворка LlamaIndex (0.7 против 0.67 при лучших настройках). 3. Использование фреймворка Haystack более инвариантно относительно точности ответов с точки зрения количества токенов в чанке. 4. В среднем использование фреймворка Haystack более затратно по числу токенов (примерно в 4 раза), чем фреймворка LlamaIndex. 5. Режимы генерации ответа «create and refine» и «tree summarize» для фреймворка LlamaIndex являются примерно одинаковыми с точки зрения точности получаемых ответов, однако для режима «tree summarize» требуется больше токенов.

Ключевые слова: генеративные языковые модели, информационная поисковая система, вопросно-ответная система, индексация, Haystack, LlamaIndex, чанк, точность, токен, ретривер

Abstract: The article describes various ways to use generative pre-trained language models to build a corporate question-and-answer system. A significant limitation of the current generative pre-trained language models is the limit on the number of input tokens, which does not allow them to work "out of the box" with a large number of documents or with a large document. To overcome this limitation, the paper considers the indexing of documents with subsequent search query and response generation based on two of the most popular open source solutions at the moment – the Haystack and LlamaIndex frameworks. It has been shown that using the open source Haystack framework with the best settings allows you to get more accurate answers when building a corporate question-and-answer system compared to the open source LlamaIndex framework, however, requires the use of an average of several more tokens.    The article used a comparative analysis to evaluate the effectiveness of using generative pre-trained language models in corporate question-and-answer systems using the Haystack and Llamaindex frameworks. The evaluation of the obtained results was carried out using the EM (exact match) metric. The main conclusions of the conducted research on the creation of question-answer systems using generative pre-trained language models are: 1. Using hierarchical indexing is currently extremely expensive in terms of the number of tokens used (about 160,000 tokens for hierarchical indexing versus 30,000 tokens on average for sequential indexing), since the response is generated by sequentially processing parent and child nodes. 2. Processing information using the Haystack framework with the best settings allows you to get somewhat more accurate answers than using the LlamaIndex framework (0.7 vs. 0.67 with the best settings). 3. Using the Haystack framework is more invariant with respect to the accuracy of responses in terms of the number of tokens in the chunk. 4. On average, using the Haystack framework is more expensive in terms of the number of tokens (about 4 times) than the LlamaIndex framework. 5. The "create and refine" and "tree summarize" response generation modes for the LlamaIndex framework are approximately the same in terms of the accuracy of the responses received, however, more tokens are required for the "tree summarize" mode.

Keywords: token, exact match, chunk, LlamaIndex, Haystack, QA-system, indexing, information retrieval system, generative anguage models, retriever

Аннотация: В статье рассматривается вопрос о применимости теоретической концепции единица перевода к машинному переводу в свете современных взглядов на это понятие и влиянии размеров вычленяемой единицы на качество перевода. При том, что современные системы машинного перевода предлагают приемлемый уровень качества, ряд проблем, в основном связанных со структурной организацией текста, остаются нерешенными. Соответственно, целью представленной работы является изучение существующих систем машинного перевода в свете применимости концепции единица перевода и в свете определения ее границ. В статью включено рассмотрение современных прочтений теоретико-переводческого понятия единица перевода и способов вычленения единиц перевода. Особое внимание уделяется вопросу, меняется ли содержание понятия единица перевода в зависимости от того, является ли объектом исследования конечный текст или процесс перевода. Затрагивается вопрос о способах исследования, принятых в текст-ориентированных и процесс-ориентированных подходах, таких как сравнительный анализ языковых пар и TAP-протокол.  На основе обзора существующих моделей машинного перевода, проводится анализ каждой из них для ответа на вопрос, может ли единица перевода быть определена для данной системы и каковы ее размеры. Делается вывод о том, что единица перевода может рассматриваться как единица анализа или единица обработки в рамках текст-ориентированного и процесс-ориентированного подходов к изучению перевода. Единица перевода имеет динамический характер и влияет на качество переводного текста. В рамках машинного перевода единица перевода как единица анализа неприменима для систем, основанных на вероятностных нелингвистических методах. Для систем машинного перевода, основанного на правилах, применимы оба прочтения понятия единица перевода. В таких системах понятие единица анализа относится к типам фрагментов исходного текста, которые могут быть идентифицированы системой, а единица обработки – к тому, как алгоритм перевода воздействует на проанализированный исходный текст для создания текста перевода, при этом вычленяемые единицы не выходят за пределы отдельного предложения. Соответственно, по крайней мере один тип переводческих проблем – разрешение внутритекстовых связей – не находит решения на данном этапе развития машинного перевода.

Ключевые слова: единица перевода, машинный перевод, единица анализа, единица обработки, TAP-протокол, сравнительный анализ, перевод по правилам, статистический машинный перевод, нейронный машинный перевод, гибридные системы

Abstract: The article looks at the question whether the concept of translation unit might apply to the sphere of machine translation and whether the size of the unit influences the quality of translation. While modern machine translation systems offer an acceptable level of quality, a number of problems mainly related to the structural organization of the text remain unresolved, hence the question posed in the paper. The article offers a review of modern readings of the concept and pays special attention to the question whether the scope of the term changes depending on whether the object of research is the target text or the translation process. The paper also provides a quick look on the research methods for both text-oriented and process-oriented approaches, such as comparative analysis of language pairs and Think Aloud Protocol. Based on a review of existing machine translation models, each of them is analyzed to answer the question whether a unit of translation can be defined for a given system and what its size is. It is concluded that a unit of translation can be viewed as either a unit of analysis or a unit of processing with respect to text-oriented and process-oriented perspectives on to the study of translation. The unit of translation has a dynamic character and influences the quality of the target text. In machine translation, the unit of translation as a unit of analysis is not applicable for systems based on probabilistic non-linguistic methods. For rule-based machine translation systems, both readings of the unit of translation concept are applicable, but hardly go beyond a single sentence. Accordingly, at least one type of translation problem – intra-textual relations resolutions – remains largely unaddressed in the present state of affairs in machine translation.

Keywords: Neural Machine Translation, Statistical Machine Translation, Rule-Based Translation, comparative analysis, Think-Aloud-Protocol, unit of processing, unit of analysis, machine translation, translation unit, hybrid systems

Аннотация: Задача автоматического разрешения многозначности является первым и ключевым этапом семантического анализа текста. Она заключается в выборе одного из значений многозначного слова в контексте и вызывает затруднения даже у людей-аннотаторов. Для обучения и тестирования моделей на основе машинного обучения, которые демонстрируют самые высокие показатели качества, необходимы большие объёмы данных с семантической разметкой. Ручная разметка по значениям оказывается трудоёмкой, дорогой и занимает много времени. Поэтому важно разрабатывать и тестировать подходы к автоматической и полуавтоматической семантической разметке. Среди возможных источников информации для такой разметки семантически родственные слова, а также коллокации, в которые входит слово. Предметом настоящего исследования являются корпуса коллокаций с семантической разметкой. Целью работы является разработка и тестирование подхода к автоматическому порождению таких корпусов на основе информации о родственных словах из тезауруса. Основным методом данного исследования является корпусный, также в рамках исследования был проведён ряд экспериментов с помощью языка программирования Python. В статье описывается процесс автоматического создания корпуса коллокаций с семантической разметкой на материале русского языка. Для разрешения многозначности слов в пределах коллокаций используются родственные слова с опорой на тезаурус RuWordNet. Этот же тезаурус выступает источником инвентарей значений. Родственные слова из тезауруса голосуют за то или иное значение слова, затем их голоса взвешиваются с помощью разных методов. Описанные методы позволяют достичь F1-меры 80% и добавить порядка 23% коллокаций с неснятой многозначностью в корпус. Семантически размеченные корпуса коллокаций, созданные в автоматическом режиме, позволят упростить подготовку размеченных данных для обучения и оценки моделей автоматического разрешения многозначности, а также могут использоваться как источник знаний в моделях на основе знаний. Таким образом, создание размеченных корпусов коллокаций в автоматическом режиме, в том числе для русского языка, представляется перспективным направлением исследований.

Ключевые слова: автоматическая обработка языка, автоматический семантический анализ, автоматическое разрешение неоднозначности, семантическая разметка, автоматическое порождение корпуса, корпус словосочетаний, инвентарь значений, семантически родственные слова, SyntagNet, тезаурус

Abstract: Word Sense Disambiguation (WSD) is a crucial initial step in automatic semantic analysis. It involves selecting the correct sense of an ambiguous word in a given context, which can be challenging even for human annotators. Supervised machine learning models require large datasets with semantic annotation to be effective. However, manual sense labeling can be a costly, labor-intensive, and time-consuming task. Therefore, it is crucial to develop and test automatic and semi-automatic methods of semantic annotation. Information about semantically related words, such as synonyms, hypernyms, hyponyms, and collocations in which the word appears, can be used for these purposes. In this article, we describe our approach to generating a semantically annotated collocation corpus for the Russian language. Our goal was to create a resource that could be used to improve the accuracy of WSD models for Russian. This article outlines the process of generating a semantically annotated collocation corpus for Russian and the principles used to select collocations. To disambiguate words within collocations, semantically related words defined based on RuWordNet are utilized. The same thesaurus is also used as the source of sense inventories. The methods described in the paper yield an F1-score of 80% and help to add approximately 23% of collocations with at least one ambiguous word to the corpus. Automatically generated collocation corpuses with semantic annotation can simplify the preparation of datasets for developing and testing WSD models. These corpuses can also serve as a valuable source of information for knowledge-based WSD models.

Keywords: Sense Inventory, Collocation Corpus, Automatic Corpus Generation, Semantic Annotation, Word Sense Disambiguation, Automatic Semantic Analysis, Natural Language Processing, Related Words, SyntagNet, Thesaurus