Искусственный интеллект. Экспертные системы. Интеллектуальные САПР и АСУП

Журнал «Вестник РУДН, серия „Инженерные исследования“» публикует статьи, содержащие результаты оригинальных исследований,имеет основные рублики: ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ, ИПАРАЛЛЕЛЬНОЕ ПРОГРАММИРОВАНИЕ, ДЕНТИФИКАЦИЯ И СИНТЕЗ СИСТЕМ УПРАВЛЕНИЯ

Журнал «Вестник РУДН, серия „Инженерные исследования“» публикует статьи, содержащие результаты оригинальных исследований,имеет основные рублики: ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ, ИПАРАЛЛЕЛЬНОЕ ПРОГРАММИРОВАНИЕ, ДЕНТИФИКАЦИЯ И СИНТЕЗ СИСТЕМ УПРАВЛЕНИЯ

Консультант по цифровой трансформации и роботизации Эндрю Берджесс семь лет помогает компаниям внедрять ИИ. В своей книге он без «воды» и сложных терминов рассматривает такие практические функции ИИ, как распознавание образов, обработку естественного языка и прогнозирование, иллюстрируя их кейсами компаний из разных отраслей. Книга будет интересна как предпринимателям, которые только задумываются о перспективах использования ИИ, так и тем, кто хочет применять его более эффективно.

Рецензируемый журнал «Искусственный интеллект и принятие решений» публикует оригинальные научные статьи и обзоры по широкому кругу проблем в области искусственного интеллекта и интеллектуальных систем, анализа и принятия решений, систем поддержки принятия решений, их практического применения. Журнал выпускается под научно-методическим руководством Отделения нанотехнологий и информационных технологий Российской академии наук.

Научный журнал "Информационные технологии и вычислительные системы" публикует материалы о новейших научно-технических и инновационных достижениях в области фундаментальных и прикладных исследований по широкому кругу проблем в сфере информационных технологий, вычислительных систем, интеллектуальных методов и систем управления. Журнал предназначен для научных сотрудников, инженеров и исследователей, работающих в рамках этой проблематики.

В настоящий сборник вошли материалы работ студентов и аспирантов Казанского национального исследовательского технологического университета, рекомендованные к опубликованию учеными советами институтов (факультетов).

Учебно-методическое пособие подготовлено на кафедре физики полупроводников и микроэлектроники физического факультета Воронежского государственного университета.

TinyML — технология, призванная расширить использование искусственного интеллекта за счет устройств с малым энергопотреблением, таких как микроконтроллеры. Прочитав эту книгу, вы сможете свободно использовать передовые практики и фреймворки ML в своей работе. Для начала вы ознакомитесь с основами развертывания интеллектуальных приложений на Arduino Nano 33 BLE Sense и Raspberry Pi Pico, а затем на примере работы с реальными датчиками получите необходимые навыки для внедрения комплексных интеллектуальных приложений в различных сценариях.

публикуются результаты исследований по биологическим, физико-математическим и техническим наукам. В разделе «Математика и компьютерные науки» публикуются результаты, полученные в области теоретической, прикладной математики, компьютерных наук. В разделе «Физика и технические науки» публикуются результаты исследований по физическим и техническим наукам, в том числе по общим вопросам физики, общим проблемам физического эксперимента, физике элементарных частиц, теории полей и др. В разделе «Естественные науки» публикуются результаты фундаментально-ориентированных исследований в области рационального природопользования и охраны природных ресурсов, многолетних исследований по физиологии развития человека, биоразнообразию Северного Кавказа, рассматриваются вопросы создания концептуальной модели онтогенеза и адаптации в условиях полимодальных воздействий среды, создания и реализации здравоцентристской парадигмы здоровья учащейся молодежи, экологические основы рационального освоения природных ресурсов. В разделе «Геоинформационные системы» публикуются данные, составляющие интеллектуальную географическую информационную систему, основанные на знаниях и обеспечивающие комплексную диагностику эколого-ресурсного потенциала территории, рассматриваются вопросы технологии автоматизированной географической диагностики территории и др

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

В пособии рассмотрены такие общие понятия, как система, информационный процесс, модель, перечислены типы систем и моделей, дано представление о системном моделировании, формировании процессов управления в системах, построении моделей и их использовании при исследовании процессов управления, концепции интеллектуальных систем.

Журнал публикует статьи и научные сообщения по актуальным проблемам авторских, смежных, культурных и информационных прав, правового регулирования киберпространства, правового обеспечения развития технологий искусственного интеллекта. Журнал включен в Список рецензируемых журналов ВАК и вправе публиковать научные статьи по юридическим специальностям. Издается с 1999 г.

В настоящей монографии описаны основы современных технологий искусственного интеллекта, основные проблемы их использования с точки зрения социогуманитарных наук. Рассмотрены этические и правовые подходы к регулированию технологии искусственного интеллекта, алгоритм и перспективы ее изучения инструментарием юридических наук, возможности использования искусственного интеллекта как метода и инструмента в юридической деятельности и научных исследованиях. Подробно исследованы риски и модели позиционирования технологии в обществе с точки зрения этики и права, в том числе вопросы правосубъектности и юридической ответственности в контексте функционирования систем искусственного интеллекта. В работе определены последующие направления дальнейших юридических исследований в области высоких технологий. Законодательство приведено по состоянию на 12 мая 2020 г.

Научный журнал "Информационные технологии и вычислительные системы" публикует материалы о новейших научно-технических и инновационных достижениях в области фундаментальных и прикладных исследований по широкому кругу проблем в сфере информационных технологий, вычислительных систем, интеллектуальных методов и систем управления. Журнал предназначен для научных сотрудников, инженеров и исследователей, работающих в рамках этой проблематики.

Лабораторный цикл включает в себя двенадцать лабораторных работ, выполнение которых поможет студентам изучить основные возможности интеллектуальных информационных систем. Методические указания подготовлены на кафедре «Информационные системы и технологии».

Рецензируемый журнал «Искусственный интеллект и принятие решений» публикует оригинальные научные статьи и обзоры по широкому кругу проблем в области искусственного интеллекта и интеллектуальных систем, анализа и принятия решений, систем поддержки принятия решений, их практического применения. Журнал выпускается под научно-методическим руководством Отделения нанотехнологий и информационных технологий Российской академии наук.

Ошеломляющий успех коммерческих приложений машинного обучения (machine learning — ML) и быстрый рост этой отрасли создали высокий спрос на готовые методы ML, которые можно легко использовать без специальных знаний. Однако и сегодня успех практического применения в решающей степени зависит от экспертов — людей, которые вручную выбирают подходящие архитектуры и их гиперпараметры. Методы AutoML нацелены на устранение этого узкого места путем построения систем ML, способных к автоматической оптимизации и самонастройке независимо от типа входных данных. В этой книге впервые представлен всеобъемлющий обзор базовых методов автоматизированного машинного обучения (AutoML).

Там, где традиционные алгоритмы бесполезны или не дают результата за обозримое время, на помощь могут прийти генетические алгоритмы. Они позволяют решить целый комплекс сложных задач, в том числе связанных с искусственным интеллектом, упростить оптимизацию непрерывных функций, выполнять реконструкцию изображений и многое другое. Для изучения материала книги требуются владение языком Python на рабочем уровне и базовые знания математики и информатики.

Рассмотрены теоретические и практические вопросы применения интеллектуальных методов обработки данных с использованием аналитической системы RapidMiner. Приведены примеры решения таких типовых задач научных исследований, как предварительная подготовка данных и заполнение пропусков, классификация и снижение размерности; большое внимание уделено вопросам представления результатов исследований в удобном виде.

Эта книга не похожа на большинство других учебников и руководств по глубокому обучению — в ней нет ни детального алгоритмического анализа, сопровождаемого обширной математикой, ни развернутых листингов программного кода. Автор выбрал золотую середину — благодаря дружелюбному подходу, сопровождаемому огромным количеством цветных иллюстраций, а также детальному и скрупулезному описанию он глубоко освещает основополагающие идеи и фундаментальные основы глубокого обучения и нейронных сетей. Второй том посвящен нейронным сетям — быстро развивающемуся направлению машинного обучения.

Эта книга не похожа на большинство других учебников и руководств по глубокому обучению — в ней нет ни детального алгоритмического анализа, сопровождаемого обширной математикой, ни развернутых листингов программного кода. Автор выбрал золотую середину — благодаря дружелюбному подходу, сопровождаемому огромным количеством цветных иллюстраций, а также детальному и скрупулезному описанию он глубоко освещает основополагающие идеи и фундаментальные основы глубокого обучения и нейронных сетей.

Пособие посвящено рассмотрению теоретических подходов к извлечению информации из текстов, рассмотрению и систематизации прогностических методов и моделей в маркетинге и интернет-рекламе, на основе выборки больших данных. В данном пособии рассмотрено применение машинного обучения при построении рекомендательных систем.

Монография представляет собой пятый том серии книг, посвященных наиболее актуальным проблемам цифровизации гражданского оборота. Заключение и исполнение большинства договоров, взаимодействие субъектов частного права друг с другом и с представителями публично-правовых образований сопровождается электронным документооборотом. Операции с информацией (информационной составляющей big data) осуществляются в различных сферах деятельности, включая digital-медицину и digital-закупки. На базе анализа нормативного, доктринального и эмпирического материала, включая разбор судебных решений и конкретных практических ситуаций, было проведено исследование проблем, связанных с big data, предложены пути их решения. Позиция авторов обосновывается с учетом актуальных направлений развития гражданского законодательства и современных подходов правоприменительной практики к разрешению соответствующих споров. Это позволяет использовать данную монографию руководителям правовых департаментов, а также подразделений, обеспечивающих информационную безопасность юридических лиц и органов государственной власти, представителям правоохранительных органов, адвокатуры, нотариата и судейского сообщества, иным правоприменителям для обоснования принимаемых решений. В книге пошагово рассмотрены практические проблемы, связанные с использованием big data в различных сферах деятельности, что представляет интерес для бизнес-сообщества, в частности компаний, работающих в сфере маркетинга в социальных сетях (SMM), а также для практикующих юристов, специализирующихся на правовом сопровождении передачи, обработки и хранения информации. Материал монографии основывается на комплексном анализе большого количества источников. Законодательство приведено по состоянию на 29 августа 2022 г.

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

Сложно понять ценность идеи, пока она не опробована на практике. В этой книге рассказывается о том, как контролируемые онлайн-эксперименты (или, как их еще называют, A/B-тесты) позволяют оценить эффективность тех или иных идей по оптимизации веб-сайтов и добиться максимальной отдачи от их использования. Вы узнаете, как правильно подобрать инструменты для тестирования, провести сбор данных и обеспечить измеримость результатов. На конкретных примерах показано, как при помощи A/B-тестов были улучшены веб-ресурсы известных компаний. Контролируемые онлайн-эксперименты широко применяются в Amazon, Booking.com, eBay, Facebook, Google, LinkedIn, Microsoft, Twitter, Яндекс и других компаниях. Эта методика становится неотъемлемой частью культуры бизнеса, основанной на данных.

Древняя стратегическая игра го представляет собой отличный пример для демонстрации возможностей искусственного интеллекта. В 2016 году система, основанная на принципах глубокого обучения, потрясла мир го, победив одного из чемпионов. В данной книге вы познакомитесь с методами глубокого обучения и научитесь создавать го-ботов. По мере чтения вы будете применять все более сложные методы и стратегии обучения, используя библиотеку глубокого обучения Keras, написанную на языке Python. Вы будете с удовольствием наблюдать за тем, как ваш бот осваивает игру го, и узнаете о вариантах применения полученных навыков глубокого обучения к широкому кругу других задач!

Рассматриваются механизмы, которые наделяют мультиагентные системы способностью к самоорганизации и развитию, исследуются проявления этих способностей в системах разной природы: экономике, биологии, робототехнике, защите информации. Показаны способы управления самоорганизацией и развитием и их применение в разных областях.

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

Вычисления – это физический процесс. В природе действуют эволюционные процессы. Поэтому естественно говорить об эволюционных вычислениях, инспирированных природными системами. В книге делается попытка решения фундаментальной проблемы вычислительного интеллекта по разработке общей теории эволюционных вычислений, инспирированных природными системами, математических моделей и эффективных форм распределенных алгоритмов эволюционных вычислений, а также изучаются когнитивные возможности композиции эволюционных операторов.

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

Книга посвящена разработкам искусственного интеллекта в части компьютерного зрения и объединяет подходы, позволяющие рассмотреть эту тему на пересечении биологии и математического моделирования. В первой части книги рассматриваются биологические основы зрения: читатель знакомится с различными аспектами зрительного восприятия и узнает, какие структуры нейронов его обеспечивают, какие процессы происходят в мозге при распознавании образов. Во второй части представлены различные структуры математических моделей – нейронных сетей, и принципы их работы. Затрагиваются, в частности, глубокие сверточные нейронные сети, машинное обучение и генеративные состязательные сети. Последняя глава посвящена исследованию самого феномена сознания.

Журнал «Вестник РУДН, серия „Инженерные исследования“» публикует статьи, содержащие результаты оригинальных исследований,имеет основные рублики: ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ, ИПАРАЛЛЕЛЬНОЕ ПРОГРАММИРОВАНИЕ, ДЕНТИФИКАЦИЯ И СИНТЕЗ СИСТЕМ УПРАВЛЕНИЯ

В этой книге речь идет о будущем разума и о том, как наши представления о себе, о разуме и о собственной природе могут изменить будущее—к лучшему или к худшему. В ней две центральные сюжетные линии: одна — это размышления о том, что такое сознание, вторая —предупреждение о том, что неспособность продумать философские последствия создания искусственного интеллекта может положить конец дальнейшему процветанию существ, обладающих сознанием. Автор пытается найти ответы на вопросы: могут ли машины обладать сознанием и может ли человек слиться с искусственным интеллектом ради расширения своих возможностей?

В учебнике раскрыты основные тематические разделы, в комплексе характеризующие эволюцию, сущность, современное состояние, технологическое и инструментальное наполнение и тенденции развития цифровой экономики. Структура издания отражает логический переход от рассмотрения предпосылок и исторических аспектов возникновения цифровой экономики к раскрытию ее экономического, институционального, организационно-управленческого и технологического содержания. Особое внимание уделено цифровому маркетингу и новым инструментам маркетинговой деятельности в современной цифровой экономике. Также описаны методы обеспечения информационной безопасности в цифровой экономике. Каждый модуль учебника содержит вопросы для самоконтроля и список рекомендуемой литературы.

В монографии исследуются уголовно-правовые и криминологические аспекты использования искусственного интеллекта в преступных целях. Особое внимание уделено проблеме регулирования правосубъектности искусственного интеллекта как основополагающей в вопросе разграничения ответственности. В исследовании нашли отражение результаты комплексного теоретико-прикладного анализа основных современных доктрин, посвященных регулированию искусственного интеллекта и робототехники. Представлены результаты сравнительно-правового анализа международного законодательства, направленного на минимизацию криминологических рисков, связанных с применением искусственного интеллекта, и тезисы ключевых повесток ведущих международных организаций. Законодательство приведено по состоянию на 1 августа 2020 г.

Научный журнал "Информационные технологии и вычислительные системы" публикует материалы о новейших научно-технических и инновационных достижениях в области фундаментальных и прикладных исследований по широкому кругу проблем в сфере информационных технологий, вычислительных систем, интеллектуальных методов и систем управления. Журнал предназначен для научных сотрудников, инженеров и исследователей, работающих в рамках этой проблематики.

Материал методического пособия представляет собой лекции по курсу «Экспертные системы» у студентов старших курсов дневной формы обучения. В данном пособии рассматриваются подходы к построению интеллектуальных информационных систем, экспертных систем, изучаются этапы создания экспертных систем, приводятся основные сведения о способах представления знаний в экспертных системах. Анализируются особенности экспертных систем различных классов самообучающихся, индуктивных, нейронных сетей, системах, основанных на прецедентах. Приводятся основные модели и методы решения задач, стратегии организации поиска решений. Рассматриваются формальные и неформальные модели представления знаний в экспертных системах. Материалы, используемые для составления курса лекций, представлены в списке используемых источников.

В первых двух разделах книги даются теоретико-методологические основы построения интеллектуальных обучающих систем (ИОС) на базе архитектур обучающих интегрированных экспертных систем (ИЭС), а третий раздел включает описание авторских методик и инструкций проведения практических и/или лабораторных занятий с использованием оригинального программного обеспечения обучающих ИЭС по нескольким различным дисциплинам. За счет включения аналитических обзоров и обширной библиографии материал книги может быть эффективно использован для проведения научных исследований по тематике, связанной с методами и технологиями построения ИОС.

Книга посвящена теории и численным методам гарантированного оценивания и аппроксимации множеств. Техника и математический аппарат интервального анализа строго обобщаются на процедуры работы с множествами. Впервые в монографической литературе детально рассматривается приложение разработанных методов к решению систем нелинейных уравнений и неравенств, задачам оптимизации, оценивания параметров и состояний, робастного управления и робототехники. Приводится подборка примеров и упражнений.

Каждую секунду во всем мире собирается и динамически обновляется огромный объем информации. Графовые алгоритмы, которые основаны на математике, специально разработанной для изучения взаимосвязей между данными, помогают разобраться в этих гигантских объемах. и, что особенно важно в наши дни, они улучшают контекстную информацию для искусственного интеллекта. Эта книга представляет собой практическое руководство по началу работы с графовыми алгоритмами. В начале описания каждой категории алгоритмов приводится таблица, которая поможет быстро выбрать нужный алгоритм и ознакомиться с примерами его использования. Для изучения материала книги желателен опыт использования платформ Apache Spark или Neo4j, но она пригодится и для изучения более общих понятий теории графов, независимо от выбора графовых технологий.

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

В Вестнике РосНОУ (Серия: Сложные системы: модели, анализ и управление) подлежат публикации материалы, содержащие результаты теоретических и прикладных научных исследований, соответствующие темам выпусков. Вестник РосНОУ предназначается для профессорско-преподавательского состава высших учебных заведений, научных работников, специалистов-практиков, аспирантов и студентов.

Интерес к машинному обучению зашкаливает, но завышенные ожидания нередко губят проекты еще на ранней стадии. Как машинное обучение — и особенно глубокие нейронные сети — может изменить вашу организацию? Эта книга не только содержит практически полезную информацию о предмете, но и поможет приступить к созданию эффективных сетей глубокого обучения. Авторы сначала раскрывают фундаментальные вопросы глубокого обучения — настройка, распараллеливание, векторизация, конвейеры операций, а затем переходят к библиотеке Deeplearning4j (DL4J), предназначенной для разработки технологических процессов профессионального уровня. На реальных примерах читатель познакомится с методами и стратегиями обучения глубоких сетей с различной архитектурой и их распараллеливания в кластерах Hadoop и Spark.

Журнал «Умное Производство» специализируется на инновационно-промышленных технологиях по теме современного и умного производства, которые являются основными драйверами Индустрии 4.0. Среди них: промышленная политика, роботизация, искусственный интеллект, аддитивные технологии, инжиниринг, цифровизация. Журнал ориентируется на собственников и топ-менеджеров высокотехнологичных компаний.

Журнал «Умное Производство» специализируется на инновационно-промышленных технологиях по теме современного и умного производства, которые являются основными драйверами Индустрии 4.0. Среди них: промышленная политика, роботизация, искусственный интеллект, аддитивные технологии, инжиниринг, цифровизация. Журнал ориентируется на собственников и топ-менеджеров высокотехнологичных компаний.

Рассмотрены возможности применения методов искусственного интеллекта, вероятностно-статистических методов и экспертных оценок для технической диагностики электрооборудования электроэнергетических систем с учетом их текущего технического состояния, а также управление жизненным циклом и их остаточным эксплуатационным ресурсом.

Монография представляет собой второй том серии книг, посвященных наиболее актуальным и востребованным на практике проблемам цифрового гражданского оборота. Цифровизация медицинской деятельности, возросшая в период пандемии, стала неотъемлемой частью современной социально-экономической жизни. Несмотря на активную нормотворческую и научную работу в этой сфере, значительное количество теоретико-практических проблем остаются неразрешенными или разрешаемыми юридически ошибочно. На основании эмпирического материала, включая опросы медицинских работников, было проведено исследование данных проблем, представлены выводы и предложения по их решению. Авторское мнение подробно обосновано с учетом актуальных нормативных и доктринальных источников, а также правоприменительной практики. Это позволяет использовать данную монографию руководителям медицинских организаций, представителям судейского сообщества, должностным лицам органов исполнительной власти и иным правоприменителям для аргументации принимаемых ими решений. В книге представлено подробное рассмотрение практических проблем, связанных с digital-медициной, что делает данное издание интересным для частного медицинского сектора и практикующих юристов. Материал работы основан на комплексном изучении большого количества юридических и эмпирических источников. Для обучающихся юридических, медицинских и иных гуманитарных высших учебных заведений уровней бакалавриата, магистратуры, специалитета, аспирантуры после каждого раздела представлен перечень нормативных правовых и иных актов, судебной практики и дополнительной литературы. Особое место в книге занимают конкретные практические рекомендации по организации оказания медицинской помощи в digital-среде: как выстраивать цифровое взаимодействие с пациентом и его законным представителем, как юридически грамотно вести цифровой медицинский документооборот, каким образом медицинскому работнику защищать свои права в случае «пациентского экстремизма» и др. Законодательство приведено по состоянию на февраль 2021 г.

В эпоху развития цифровых технологий авторами предпринимаются попытки не только провести анализ специфики развития инновационного потенциала школьного образования, но и исследовать вопросы, связанные с цифровизацией образовательного процесса. В книге делается акцент на рассмотрении процесса управления инновациями и цифровизации школьного образования с позиции социального управления, исследуются проблемы и возможности нововведений со стороны всех участников. В основу монографии положен социолого-управленческий подход к анализу инновационного развития российской системы школьного образования, а также технологий цифровизации. В работе рассмотрены основные компоненты и специфика инновационного развития, анализируется отечественный опыт внедрения инноваций в образовательный процесс и уровень удовлетворенности родительской общественности как ключевого стейкхолдера образовательного процесса, а также исследуются новые тенденции развития образовательной отрасли в России. Особое внимание уделено роли конфликтов в развитии и управлении школьным образованием в современных социально-экономических условиях. Авторы монографии на базе исследования опыта внедрения проекта «Московская электронная школа» обосновывают необходимость внедрения цифровых технологий в образовательный процесс и формирования цифровых компетенций учителей, определяют ключевые стереотипы и риски внедрения цифровых технологий в современную школу. Законодательство приведено по состоянию на 20 февраля 2021 г.

Журнал «Вестник РУДН, серия „Инженерные исследования“» публикует статьи, содержащие результаты оригинальных исследований,имеет основные рублики: ИНТЕЛЛЕКТУАЛЬНЫЕ СИСТЕМЫ, ИПАРАЛЛЕЛЬНОЕ ПРОГРАММИРОВАНИЕ, ДЕНТИФИКАЦИЯ И СИНТЕЗ СИСТЕМ УПРАВЛЕНИЯ

Эта книга поможет читателю овладеть алгоритмами обучения с подкреплением (ОП) и научиться реализовывать их при создании самообучающихся агентов. В первой части рассматриваются различные элементы ОП, сфера его применения, инструменты, необходимые для работы в среде ОП. Вторая и третья части посвящены непосредственно алгоритмам. В числе прочего автор показывает, как сочетать Q-обучение с нейронными сетями для решения сложных задач, описывает методы градиента стратегии, TRPO и PPO, позволяющие повысить производительность и устойчивость, а также детерминированные алгоритмы DDPG и TD3. Читатель узнает о том, как работает техника подражательного обучения, познакомится с алгоритмами исследования на базе верхней доверительной границы (UCB и UCB1) и мета-алгоритмом ESBAS.