Данные.Манипулирование данными. Система управления базами данных (СУБД)

Пособие составлено с учетом требований ФГОС ВПО. В нем представлены необходимые сведения для освоения соответствующих компетенций, подробное рассмотрение принципов, моделей и перспектив управления распределенной информацией. Предназначено для студентов, аспирантов, преподавателей и специалистов, интересующихся распределенными базами данных.

Учебное пособие посвящено технологиям проектирования, разработки и внедрения баз данных. В пособии рассматриваются основные понятия реляционных баз данных и реляционной алгебры, вопросы проектирования баз данных. Несколько разделов посвящены языку запросов SQL и его использованию для получения и модификации данных, определению объектов баз данных, таких как таблицы, индексы или представления, а также вопросам использования процедурных расширений языка SQL. Кроме того, рассмотрены NoSQL-решения, предназначенные для хранения денормализованных данных, что может быть более эффективным в распределенной среде, а также принципы и программные инструменты обработки больших данных.

Данные должны приносить пользу бизнесу. А их грамотная подача — повышать профессиональную ценность специалистов. Книга «Заставьте данные говорить» написана, чтобы вы добились и того и другого. Это простое практическое пособие по созданию интерактивных дашбордов в Excel поможет тем, кто готовит отчеты и превращает сырые данные в информацию для принятия решений. Специальной подготовки не требуется — материал изложен понятно даже для начинающих. После выполнения пошаговых инструкций у вас будет несколько версий управленческого отчета. Все полученные навыки пригодятся для самостоятельной разработки дашбордов. Правила выбора диаграмм, советы и лайфхаки от практика сделают ваши данные информативными, а визуализацию — профессиональной.

В пособии дается общий обзор различных типов баз данных и соответствующих методов их использования. Описываются реляционная модель баз данных, основные конструкции языка SQL, методы проектирования структуры баз данных, основанные как на принципах нормализации, так и на использовании модели «сущность-связь». Приведены основные понятия о транзакциях в базах данных. В заключение рассмотрен общий подход к технологиям «клиент-сервер».

В третьей части лекций рассмотрены вопросы управления транзакциями (транзакции и целостность базы данных, транзакции и параллелизм, различные методы управления транзакциями в СУБД), современные решения по работе с базами данных, включая использование хранимых процедур и триггеров на различных платформах (СУБД Informix, Oracle, PostgreSql), принципы построения систем, ориентированных на анализ данных, различные технологии анализа данных. Учебное пособие широко иллюстрировано примерами, способствующими успешному усвоению материала.

В монографии дана характеристика ключевых научно-технических направлений, которые оказывают наиболее существенное влияние на развитие цифровой среды: большие данные, искусственный интеллект, системы распределенного реестра (блокчейн), промышленный интернет, компоненты робототехники, технологии мобильной и спутниковой связи, извлечение знаний. Представлены сферы применения цифровых технологий, сопряженные с наибольшими рисками: цифровая медицина, цифровое управление городом, цифровая логистика, электронная коммерция, Индустрия 4.0, социальные сети и медиа, цифровое управление рабочим пространством и умные дома. Описаны базовые понятия информационной безопасности и основные подходы к технической обусловленности возникновения рисков при процессах цифровизации. Особое внимание уделено анализу преступлений в компьютерной сфере, предусмотренных гл. 28 УК РФ, что приводит к выводу о необходимости пересмотра терминологии УК РФ с целью адекватного парирования существующих угроз в сфере компьютерной информации. Законодательство приведено по состоянию на февраль 2022 г.

Книга поможет вам писать запросы, которые выполняются быстро и вовремя доставляют результаты. Вы научитесь смотреть на процесс написания запроса с точки зрения механизма базы данных и начнете думать, как оптимизатор базы данных. Объясняется, как читать и понимать планы выполнения запросов, какие существуют методы воздействия на них с точки зрения оптимизации производительности, и показано, как эти методы используются вместе для создания эффективных приложений.

В книге рассматривается внутреннее устройство СУБД PostgreSQL: детали реализации многоверсионности и изоляции на основе снимков данных, включая процедуру очистки неактуальных версий строк; буферный кеш и журнал предзаписи; использование блокировок различных уровней; планирование и выполнение SQL-запросов; принципы расширяемости и особенности имеющихся индексных методов доступа. Большое внимание уделяется возможностям, предоставляемым для самостоятельного изучения механизмов функционирования PostgreSQL. В настоящем издании учтены замечания читателей и исправлены опечатки, а также отражены изменения, произошедшие в версии PostgreSQL 15.

Данное руководство описывает построение и программирование приложений для интернета вещей (IoT). Первая часть книги посвящена экспериментам на популярной платформе Arduino с целью научить читателя основным принципам схемотехники, вторая часть посвящена примерам практической реализации проектов для IoT на базе Raspberry Pi 3, где затрагиваются как сервисы для приложения под ОС Android Things, так и облачные платформы интернета вещей.

Рассматриваются вопросы анализа данных. Приводятся некоторые из основополагающих методик анализа данных, такие как: регрессионный анализ, корреляция, дисперсионный анализ и др. Отражены вопросы интеллектуального анализа данных, с помощью которого можно выявить ранее неизвестные, нетривиальные закономерности в данных.

Применение машинного обучения для лучшего понимания природы данных — умение, необходимое любому современному разработчику программ или аналитику. Python — замечательный язык для создания приложений машинного обучения. Благодаря своей динамичности он позволяет быстро производить разведочный анализ данных и экспериментировать с ними. Обладая первоклассным набором библиотек машинного обучения с открытым исходным кодом, Python дает возможность сосредоточиться на решаемой задаче и в то же время опробовать различные идеи. Книга начинается с краткого введения в предмет машинного обучения и знакомства с библиотеками NumPy, SciPy, scikit-learn. Но довольно быстро авторы переходят к более серьезным проектам с реальными наборами данных, в частности, тематическому моделированию, анализу корзины покупок, облачным вычислениям и др.

В методических указаниях даются теоретические и практические основы построения нечетких деревьев решений, а также нечеткой экспертной системы в программном пакете CubiCalc v. 2.0. Методические указания для выполнения курсового проектирования подготовлены на кафедре "Экономические и информационные системы", предназначены для студентов дневной формы обучения специальности 220601 ("Управление инновациями") и являются руководством к выполнению их студентами. Также они могут быть полезны преподавателям смежных дисциплин и разработчикам программного обеспечения.

Рассмотрены методики, идиомы и приемы решения задач обработки динамических структур данных на языке С++. Подробно описаны вычислительные алгоритмы, реализованные с использованием нотации указателей. Приведены краткие теоретические сведения и примеры приложений по изучаемому материалу. Изложена методика выполнения лабораторных работ по рассматриваемым темам, которая используется авторами в процессе проведения практических занятий в МГТУ им. Н.Э. Баумана.

публикуются результаты исследований по биологическим, физико-математическим и техническим наукам. В разделе «Математика и компьютерные науки» публикуются результаты, полученные в области теоретической, прикладной математики, компьютерных наук. В разделе «Физика и технические науки» публикуются результаты исследований по физическим и техническим наукам, в том числе по общим вопросам физики, общим проблемам физического эксперимента, физике элементарных частиц, теории полей и др. В разделе «Естественные науки» публикуются результаты фундаментально-ориентированных исследований в области рационального природопользования и охраны природных ресурсов, многолетних исследований по физиологии развития человека, биоразнообразию Северного Кавказа, рассматриваются вопросы создания концептуальной модели онтогенеза и адаптации в условиях полимодальных воздействий среды, создания и реализации здравоцентристской парадигмы здоровья учащейся молодежи, экологические основы рационального освоения природных ресурсов. В разделе «Геоинформационные системы» публикуются данные, составляющие интеллектуальную географическую информационную систему, основанные на знаниях и обеспечивающие комплексную диагностику эколого-ресурсного потенциала территории, рассматриваются вопросы технологии автоматизированной географической диагностики территории и др

Методические указания по выполнению курсовых работ для дисциплины «Базы данных» содержат задания к выполнению курсовых работ, теоретический материал, необходимый для их выполнения. Задача курсовой работы состоит в том, чтобы создать систему управления данными (базу данных), отражая, таким образом, полученные в пройденном курсе знания.

Книга предоставит вам доступ в мир прогнозной аналитики и продемонстрирует, почему Python является одним из лидирующих языков науки о данных. Охватывая широкий круг мощных библиотек Python, в том числе scikit-learn, Theano и Keras, предлагая руководство и советы по всем вопросам, начиная с анализа мнений и заканчивая нейронными сетями, книга ответит на большинство ваших вопросов по машинному обучению.

Книга посвящена языку программирования SQL, применяемому для работы с реляционными базами данных. Обсуждается версия языка ANSI SQL-92 (SQL2). В настоящем издании рассказывается об использовании запросов SQL для решения соответствующих классов задач по выборке данных, их модификации или по работе с объектами структуры базы данных. Все конструкции подробно описываются и иллюстрируются большим количеством примеров. Кроме того, для каждого типа запросов рассматриваются отклонения от стандарта в реализации наиболее распространенных СУБД: MS Access, MS SQL Server, Oracle, MySQL и PostgreSQL.

В учебном пособии рассматриваются теоретические основы интеллектуального анализа данных. Дается общее представление о современных инструментах обработки больших данных и приводятся примеры их практического применения. Учебное пособие построено с учетом требований к специалистам в области информатики.

Учебно-методическое пособие содержит основные сведения для практических занятий и выполнения компьютерных практикумов. Приведены примеры решений задач.

Вместе с семью языками программирования вы исследуете наиболее важные из современных моделей программирования. Вы познакомитесь с динамической типизацией, которая делает языки Ruby, Python и Perl такими гибкими. Постигнете систему прототипов, лежащую в основе языка JavaScript. Увидите, как сопоставление с образцом в языке Prolog сказалось на формировании языков Scala и Erlang. Узнаете, чем функциональное программирование на языке Haskell отличается от программирования на языках семейства Lisp, включая Clojure. Издание предназначено для программистов разной квалификации, в том числе выбирающих для изучения новый язык программирования.

Данное учебное пособие построено на изучении вычислительных возможностей электронных таблиц, с целью их использования для оптимизированных задач управления.

В книге рассматриваются актуальные вопросы защиты данных при создании распределенных информационных систем масштаба предприятия, приводятся подробные описания принципов применения современных криптографических средств, имеющихся на рынке («Криптон», «Верба», «Шип», «Игла» и др.). Значительное место уделяется проблемам сохранения тайны при финансовых обменах через Internet, а также электронной коммерции. Завершают книгу приложения, посвященные практическим рекомендациям по самым острым вопросам обеспечения защиты информации.

Даны необходимые пояснения и рекомендации для выполнения курсовой работы по дисциплине «Базы данных».

В книге представлено подробное описание распределенных и параллельных баз данных с учетом новейших технологий. Авторы затрагивают такие темы, как проектирование распределенных и параллельных БД, контроль распределенных данных, распределенная обработка запросов и транзакций, интеграция баз данных. Отдельная глава посвящена обработке больших данных (в частности, обсуждаются распределенные системы хранения, потоковая обработка данных, платформы MapReduce и Spark, анализ графов и озера данных). Обработка веб-данных рассматривается с акцентом на технологию RDF, получившую широкое распространение. В конце глав 2–12 приводятся упражнения, позволяющие закрепить теоретический материал. На сопроводительном сайте читатели найдут информацию об основах реляционных баз данных, обработке запросов, управлении транзакциями и компьютерных сетях. Кроме того, на сайте выложены все рисунки к книге, слайды и решения упражнений (только для преподавателей). Издание может использоваться в качестве учебника для студентов и магистрантов, изучающих информатику и смежные дисциплины, а также заинтересует всех, кто занимается компьютерными науками.

R — золотой стандарт, ежедневно используемый исследователями по всему миру для самых разных вычислений и статистического анализа данных. Этот свободно распространяемый язык с открытым исходным кодом включает огромное количество пакетов самой разной направленности, от расширенной визуализации данных до глубокого обучения. Чрезвычайно удобный для пользователей с математическим складом ума, R легко решает практические задачи, не заставляя думать о них с точки зрения программиста. Данная книга научит вас выполнять статистический анализ и визуализировать результаты с помощью R и его популярных пакетов; решать такие практические задачи, как прогнозирование, интеллектуальный анализ данных и разработка динамических отчетов. В третье издание добавлены новые сведения о построении диаграмм с помощью пакета ggplot2, а также приводятся примеры из области машинного обучения, такие как кластеризация, классификация и анализ временных рядов.

Прочитав книгу, вы будете хорошо понимать основы PostgreSQL 10 и обладать навыками, необходимыми для разработки эффективных решений с применением базы данных. Это хорошее пособие для близкого знакомства с PostgreSQL. С той или иной степенью полноты оно охватывает практически все вопросы, с которыми встречается разработчик и администратор, начинающий профессионально работать с этой СУБД.

В книге рассказывается о специфике работы служб эксплуатации центров обработки данных и о людях, которые занимаются жизнеобеспечением всех систем этих центров. Именно от нескольких человек, находящихся в ночь с субботы на воскресенье на площадке, полностью зависит работа крупного банка, заказ еды или такси, доставка сообщений в мессенджерах, прогноз погоды... Трудно даже примерно оценить тот объем информационного потока, который проходит через датацентры. Именно службе эксплуатации посвящены страницы данной книги.

Обработка больших массивов данных с помощью традиционных СУБД может оказаться трудным делом. Apache Hadoop — это каркас для разработки приложений, предназначенных для выполнения в распределенном кластере, без применения SQL. Такие приложения прекрасно масштабируются и могут обрабатывать гигантские массивы данных. Если вам требуется произвести анализ данных, то Hadoop — как раз то, что надо. Прочитав эту книгу, вы познакомитесь с предметом и научитесь писать программы в стиле MapReduce. После нескольких простых примеров автор быстро переходит к вопросу об использовании Hadoop для решения более сложных задач анализа данных. Описываются рекомендованные приемы и паттерны проектирования, полезные при программировании для MapReduce. Для чтения книги требуется знание основ языка Java. Некоторое знакомство с математической статистикой поможет разобраться в более сложных примерах.

Данное пособие предназначено для получения студентами представления об основных понятиях при работе с базой данных, классификации баз данных и систем управления данными в рамках предмета информатика. Кроме того, в пособие включены задания по лабораторным работам и варианты курсовых работ для создания баз данных в СУБД MS Access.

Библиотека pandas — популярный пакет для анализа и обработки данных на языке Python. Он предлагает эффективные, быстрые, высокопроизводительные структуры данных, которые позволяют существенно упростить работу. Данная книга познакомит вас с обширным набором инструментов, предлагаемых библиотекой pandas, — начиная с обзора загрузки данных с удаленных источников, выполнения численного и статистического анализа, индексации, агрегации и заканчивая визуализацией данных и анализом финансовой информации.

Рассматривается реализация процесса выбора оборудования в системе проектирования информационной сети на основе нечётких критериев. Выбор осуществляется в реляционной базе данных посредством нечётких SQL-запросов, формируемых в программной оболочке системы проектирования. Предложен алгоритм формирования нечётких SQL-запросов.

Рассмотрены средства проектирования основных объектов баз данных на основе системы управления базами данных Access. Описаны альтернативные способы построения таблиц, запросов, форм, отчетов, макросов в среде Access. Даны рекомендации по использованию средств проектирования баз данных в процессе решения реальных задач. Содержание учебного пособия соответствует разделу курса лекций, которые авторы читают в МГТУ им. Н.Э. Баумана, а также лабораторным и курсовым работам.

В учебном пособии рассмотрены особенности архитектуры баз данных и моделей данных в нефтегазовой геологии. Подробно изложены средства работы с базами данных в среде Paradox (V 9.0), а именно особенности создания баз данных в геологической отрасли знаний и извлечения и преобразования информации геологом-нефтяником при решении геологических задач. Излагаемые способы работы с объёмной геологической информацией проиллюстрированы на примере учебных баз данных.

В данном электронном учебном пособии рассмотрены основные вопросы распределенной обработки данных в современных системах управления базами данных. Даны краткие теоретические сведения по основным разделам, соответствующим рабочей программе. Основные понятия проиллюстрированы достаточным количеством примеров. Рассмотрены различные архитектуры распределенной обработки данных и перспективы развития этих методов применительно к современным СУБД.

В книге описываются методики и приемы юзабилити-тестирования – процедуры оценки разнообразных продуктов (будь то устройства, сайты, мобильные приложения и т. д.) с точки зрения легкости и удобства их использования. В начальных главах читатель узнает о принципах тестирования, выборе оборудования и места для его проведения. Отдельная глава посвящена изучению пользовательских потребностей. Наконец, подробно рассказывается о том, как спланировать и провести юзабилити-тест, а затем проанализировать его результаты.

В статье представлен системный подход к управлению прогнозирования образовательным процессом в сфере профессионального образования (ВПО, СПО), определяющий деятельность вуза как системы взаимосвязанных процессов. Предложена ИТ-модель мониторинга баланса спроса и предложения на рынке труда для высокотехнологических предприятий и прогнозирования структуры подготовки специалистов, с учетом темпов технологических изменений на мировом рынке и стратегии социально-экономического развития Новосибирской области. Разрабатываемая информационная система научного прогнозирования как ИТ-модель – это электронная Web-площадка для взаимодействия органов местного самоуправления, бизнес-структур, государства с человеком, высших и средних профессиональных учреждений. Системный подход к формированию кадрового потенциала в условиях инновационной экономики предполагает многоэтапность инновационных взаимосвязанных программно-проектных процедур в вузовском сегменте и в сфере реальной экономики. Данный метод позволяет, во-первых, определить перспективные направления подготовки для абитуриентов (в разрезе номенклатуры) в высших учебных заведениях и как следствие обеспечит рабочие места для выпускников, во-вторых, сбалансировать объемы подготовки специалистов (в разрезе специальностей, специализаций и количества), выделяя необходимое количество бюджетных мест. Вся необходимая информация будет доступна стейкхолдерам на информационном портале.

Пособие содержит теоретический материал и практические примеры, касающиеся обеспечения сетевой безопасности на нижних уровнях сетевой модели OSI – физическом, канальном и сетевом. В приложении приведены рекомендации по подготовке к выполнению лабораторного практикума по курсу.

Учебно-методическое пособие предназначено для студентов высших учебных заведений, изучающих дисциплину «Введение в анализ больших информационных массивов», и содержит указания к выполнению пяти лабораторных работ для формирования у студентов навыков использования программного обеспечения и программных средств для структурирования больших массивов данных. Приведены краткие теоретические сведения, необходимые для выполнения лабораторных работ, контрольные вопросы и задания для подготовки к защите.

В этом пособии приводятся подробные пошаговые решения типовых статистических задач с помощью табличного процессора MS Excel 2010. Программа Excel отличается доступностью, простотой интерфейса и универсальностью, имеет обширную библиотеку встроенных функций. Цель данного учебно-методического пособия – помочь пользователям ПК освоить технику обработки статистических данных и построения гистограмм. Здесь рассматриваются задачи комбинаторики, задачи на составление законов распределения случайных величин, построение графиков дифференциальной и интегральной функции распределения, составление интервального вариационного ряда, построение гистограммы и полигона частот, нахождение описательных статистик, построение выборочного уравнения прямолинейной регрессии.

В настоящую работу включены лекции по классическим разделам курса: языки манипулирования реляционной моделью данных (язык реляционной алгебры, язык реляционного исчисления), правила написания SQL-запросов и их оптимизация, распределенные базы данных. Они помогут сформировать у студентов системное представление о реляционной модели данных и в то же время имеют прикладную ценность.

Цель данного учебно-методического пособия – помочь пользователям ПК освоить технику обработки математических данных и построения диаграмм. Здесь рассматриваются задачи на вычисление выражений, решение алгебраических уравнений, построение двумерных и трехмерных графиков, задачи с матрицами, на вычисление пределов, производных, нахождение глобальных минимумов и максимумов, численное интегрирование. При решении некоторых задач используются инструменты, входящие в надстройку Поиск решения, которые можно назвать уникальными. Описано мощное средство оптимизации вычислений в Excel – циклические ссылки (итерационные вычисления).

Рассмотрены теоретические и практические вопросы применения интеллектуальных методов обработки данных с использованием аналитической системы RapidMiner. Приведены примеры решения таких типовых задач научных исследований, как предварительная подготовка данных и заполнение пропусков, классификация и снижение размерности; большое внимание уделено вопросам представления результатов исследований в удобном виде.

Представлены четыре раздела учебного курса «Методы оптимизации». В каждом разделе изложены необходимые теоретические сведения, рассмотрены реализации алгоритмов численных методов оптимизации на примерах, приведены способы решения или проверки решений в программе Microsoft Excel.

Учебно-методическое пособие подготовлено на кафедре программного обеспечения и администрирования информационных систем факультета прикладной математики, информатики и механики Воронежского государственного университета.

Лабораторный практикум содержит теоретический материал и указания к выполнению 4 лабораторных работ в системе управления базами данных Microsoft Access 2007.

Методическая разработка предназначена для выполнения курсовой работы «База данных электронной техники» и способствует углубленному изучению работы со связанными списками данных в MS Excel, приобретению базовых знаний и практических навыков работы с системой управления базами данных MS Access и получению практических навыков работы в сети Internet.

Методические указания по выполнению контрольной работы содержат теоретические сведения и практические вопросы выполнения контрольной работы по дисциплине Инженерия знаний. Разработано в соответствии с ФГОС ВО по направлению подготовки 09.03.01 - Информатика и вычислительная техника и предназначено для студентов 2 и 2у курсов заочной и дистанционной форм обучения.

Методические указания содержат теоретический материал по изучению системы управления базами данных Microsoft Access, который входит в пакет Microsoft Office, а также требования к оформлению и выполнению лабораторной работы. Рассмотрены основные операции создания и управления базами данных с помощью Microsoft Access. Методические указания рассчитаны на пользователей, имеющих минимальный опыт работы в операционной системе Microsoft Windows.

Практикум предназначен для использования при изучении курса «Технологии проектирования информационно-вычислительных систем». Посвящен проектированию информационно-вычислительных систем с использованием нотации моделирования бизнес-процессов BPMN и объектно-ориентированного подхода (с применением методологии UML). Практикум должен способствовать получению студентами навыков в области проектирования информационно-вычислительных систем. В дальнейшем он может быть использован в ходе выполнения ВКР, также может быть полезным преподавателям смежных дисциплин и разработчикам программного обеспечения. Подготовлен на кафедре информационных систем и технологий.

Рассмотрены основы анализа и обработки данных в Python с использованием библиотеки Pandas. Приведены примеры работы с объектами Series и Data-Frame: осуществление доступа к данным, внесение изменений в DataFrame, визуализация полученных результатов, а также сортировка, фильтрация и группировка данных. Для оценки уровня усвоения студентами пройденного материала предложены варианты самостоятельных работ.