Данные.Манипулирование данными. Система управления базами данных (СУБД)

Учебно-методическое пособие предназначено для студентов высших учебных заведений, изучающих дисциплину «Введение в анализ больших информационных массивов», и содержит указания к выполнению пяти лабораторных работ для формирования у студентов навыков использования программного обеспечения и программных средств для структурирования больших массивов данных. Приведены краткие теоретические сведения, необходимые для выполнения лабораторных работ, контрольные вопросы и задания для подготовки к защите.

Эта книга — прекрасное руководство по программированию для детей на языке Python средней сложности. Читатели получат базовые знания о языке Python, узнают об объектно-ориентированном программировании, научатся работать с функциями, классами и модулями. Много внимания уделено работе с графикой, созданию анимации и разработке собственной игры.

Книга предназначена для первоначального изучения Raspberry PI — одноплатного компьютера размером с банковскую карту. Благодаря простым пошаговым инструкциям юный читатель сможет превратить свою «малинку» и в настоящий медиацентр, и в автосимулятор (с помощью языка Scratch), и в сердце умного дома (программируя на Python и подключая разные датчики). А в конце будет создан настоящий сайт и протестирован на смартфоне.

У принцессы Руруны и Кейна возникла проблема: в их торгующей фруктами империи царит неразбериха из-за противоречивых данных, и поэтому дыни подменяются яблоками и клубникой, что вызывает большие трудности в работе. И что же им делать? Конечно же, построить реляционную базу данных, и поможет им в этом Тико, чудесная фея баз данных. Она покажет Руруне и Кейну, как создать базу данных, которая поможет управлять продажами, реализацией товара и его экспортом. Вы узнаете, как работает база данных, и поймёте значение таких терминов, как схемы, ключи, нормализация и транзакции. Если у вас голова идёт кругом, когда речь заходит о базах данных, или же вы просто заплутали в лабиринте чисел и данных, которые, как вам кажется, неподвластны контролю, присоединяйтесь к Руруне и Кейну.

Рассматриваются основные элементы работы в электронной таблице на примере MS Excel 2003. Приводятся как базовые возможности работы с табличными данными, такие как: редактирование, форматирование данных, работа с формулами, так и функции, выполняющие сложные расчеты или решающие различные оптимизационные задачи. Также рассматриваются базовые элементы среды разработки программ, основанные на конструкциях алгоритмического языка Visual Basic for Application.

В настоящие время обработка и хранение большого объема информации является одной из сложных и интересных задач. От того, насколько качественно реализованы производительность и надежность базы данных, зависит быстродействие системы в целом. Одним из сложных моментов данного вопроса является обработка запроса к базе данных и его эффективное выполнение. В данной работе рассмотрены современные методы и модели обработки запросов в базах данных. Предложен алгоритм для обслуживания запроса пользователей, который предполагает использование параллельных технологий при обмене информацией с узлами распределенной базы данных и словарем, а также позволяет увеличить время выполнения запроса, что в свою очередь увеличивает быстродействие системы в целом. Приведены актуальные на данный момент технологии хранения большого объема данных: параллельные и распределенные базы данных, парадигма MapReduce.

«Практикум по дисциплине «Базы данных и системы управления базой данных» составлен в соответствии с требованиями государственного образовательного стандарта высшего профессионального образования для специальности «351500 - Математическое обеспечение и администрирование информационных систем». Содержит практические задания и методические указания по их выполнению по дисциплине «Базы данных и системы управления базами данных», может быть использован при изучении дисциплины «Информационные системы».

Рассмотрены теоретические и практические вопросы применения интеллектуальных методов обработки данных с использованием аналитической системы RapidMiner. Приведены примеры решения таких типовых задач научных исследований, как предварительная подготовка данных и заполнение пропусков, классификация и снижение размерности; большое внимание уделено вопросам представления результатов исследований в удобном виде.

Предложено использовать динамический словарь как средство расширения стандартных структур данных языка C++. Словарь реализуется как сложная структура данных, представленная в виде класса. Использование в структуре данных статистики слов, которые разбиваются на узлы, позволяет существенно расширить спектр решаемых задач. Подход, при котором данные представляются в виде словаря и для работы с которыми используются функции словарного класса, назван автором «Словарная технология». Дается описание словарных функций и приводятся примеры решаемых на основе словарной технологии задач. Возможности словарной технологии по хранению и доступу к данным использованы для построения модели постреляционной системы управления базами данных. Дается описание постреляционной базы данных и особенностей представления информации. Предлагается язык управления данными, в основе которого лежит словарное представление. Приложения содержат описание функций словарной технологии, сервисных функций, упрощающих работу с данными, функции работы с постреляционной базой данных, язык управления и язык запросов к базе данных. Приводится программный материал по решению разнообразных задач в словарной технологии и перечень примеров по работе с постреляционной базой данных.

Рассмотрена проблема формирования систем реального времени с гарантированной доступностью ресурсов. Предложены модели использования программно-информационных ресурсов с учетом ресурсной базы и ограничений на время исполнения. Описаны методика и алгоритмы формирования вектора временной развертки для кластерных структур распределенных архитектур систем реального времени, учитывающие занятость ресурсов.

Объем обрабатываемых данных во всех областях человеческой деятельности продолжает расти быстрыми темпами. Существуют ли эффективные приемы работы с ним? В этой книге рассказывается об Apache Spark, открытой системе кластерных вычислений, которая позволяет быстро создавать высокопроизводительные программы анализа данных. C помощью Spark вы сможете манипулировать огромными объемами данных посредством простого API на Python, Java и Scala. Написанная разработчиками Spark, эта книга поможет исследователям данных и программистам быстро включиться в работу. Она рассказывает, как организовать параллельное выполнение заданий всего несколькими строчками кода, и охватывает примеры от простых пакетных приложений до программ, осуществляющих обработку потоковых данных и использующих алгоритмы машинного обучения.

Содержит краткие теоретические сведения, вопросы и практические задания для контроля знаний студентов. Предназначено для начинающих пользователей.

Методические указания содержат теоретический материал по изучению системы управления базами данных Microsoft Access, который входит в пакет Microsoft Office, а также требования к оформлению и выполнению лабораторной работы. Рассмотрены основные операции создания и управления базами данных с помощью Microsoft Access. Методические указания рассчитаны на пользователей, имеющих минимальный опыт работы в операционной системе Microsoft Windows.

Raspberry Pi – точная миниатюрная копия полноценного компьютера, наделенная аналогичными функциями. Вместе с тем Raspberry Pi представляет собой нечто большее, чем современный компьютер: с его помощью вы можете создать собственную операционную систему и соединить провода, цепи и контакты на плате. Эта книга предназначена для тех, кто приступает к освоению Raspberry Pi. Показано, как настроить оборудование; описываются интерфейс устройства, его операционная система и базовые навыки работы. Изучив примеры программирования на Scratch 3 и Python, вы сможете расширить функционал Raspberry Pi, написав собственные программы и игры. Цветные иллюстрации и удобные пошаговые инструкции упрощают обучение.

Объем обрабатываемых данных во всех областях человеческой деятельности продолжает расти быстрыми темпами. Существуют ли эффективные приемы работы с ним? В этой книге рассказывается об Apache Spark, открытой системе кластерных вычислений, которая позволяет быстро создавать высокопроизводительные программы анализа данных. C помощью Spark вы сможете манипулировать огромными объемами данных посредством простого API на Python, Java и Scala. Написанная разработчиками Spark, эта книга поможет исследователям данных и программистам быстро включиться в работу. Она рассказывает, как организовать параллельное выполнение заданий всего несколькими строчками кода, и охватывает примеры от простых пакетных приложений до программ, осуществляющих обработку потоковых данных и использующих алгоритмы машинного обучения.

Эта книга поможет вам начать работу с миниатюрным и быстрым микроконтроллером Pico и использовать его возможности для разработки инновационных продуктов. Вы узнаете о периферийных устройствах микроконтроллера, а также о разновидностях плат Pico, разработанных и изготовленных различными производителями, затем освоите практические навыки на ряде проектов — начиная с мигающего светодиода и заканчивая большим семисегментным дисплеем.

Рассматривается задача интеграции изначально разрозненных баз данных (БД), в которых хранятся данные о некоторой общей для этих БД предметной области, а также методы и средства решения этой задачи. На базе анализа степени и качества решения указанной задачи, как известными авторам специализированными системами интеграции (СИД) данных, так и средствами интеграции данных СУБД Oracle, выявлены основные недостатки указанных решений. В монографии предложены методы построения систем интеграции данных, в значительной степени снижающие отрицательный эффект указанных недостатков, а также привносящие в такие системы дополнительные полезные качества. Рассматривается реализация предложенных методов в разработанной авторами СИД DISGO и проводятся демонстрирующие преимущества DISGO результаты экспериментального сравнения этой системы с решениями, основанными на применении других СИД. Предложенная система может применяться для интеграции данных независимых территориально удаленных БД в распределенных телекоммуникационных сетях крупных корпораций и в сетях межкорпоративного взаимодействия.

Рассмотрены требования и рекомендации по курсовому проектированию защищенных систем баз данных.

Рассмотрены способы создания приложений для работы с базами данных, методы доступа к базам данных и применяемые в них программные интерфейсы. Также рассматривается интеграция приложений Visual C# с сервером СУБД Microsoft SQL Server 2012.

В этой книге представлены полезные методики программирования, имеющие практическую ценность. Опираясь на свой многолетний опыт, авторы показывают, как написать надежный код, который смогут читать другие разработчики. Основной принцип обучения — составление плана решения: от определения структур данных по условиям поставленной задачи через примеры и тесты к написанию программного кода. Обсуждаются типичные ошибки программистов. Многочисленные примеры и упражнения позволяют читателям самостоятельно закрепить изученный материал на практике.

В методических указаниях по учебному курсу «Базы данных и экспертные системы» рассматривается язык Transact-SQL, используемый в одной из самых популярных систем управления реляционными базами данных MS SQL Server. Указания ориентированы в первую очередь на практическое применение языка TransactSQL: рассмотрены средства управления транзакциями, приведены сведения о хранимых процедурах, пользовательских и встроенных функциях, рассмотрены примеры использования триггеров. Содержатся теоретические сведения, включая достаточно подробное описание синтаксиса операторов Transact-SQL, приведены указания по их использованию. Методические указания содержат большое количество примеров по использованию операторов Transact-SQL, которые могут быть полезны на этапе освоения материала и выступать в качестве вопросов для самопроверки.

Учебное пособие подготовлено на кафедре ERP-систем и управления бизнес-процессами факультета прикладной математики, информатики и механики Воронежского государственного университета.

В учебно-методическом пособии содержатся указания к компьютерным практикумам по дисциплине «Операционные системы и базы данных», приводятся примеры выполнения заданий в рамках проектирования и создания электронных баз данных, разработки .bat-файлов. Представлены списки практических заданий.

В пособии рассматриваются технологические приемы, позволяющие выполнить ряд практических заданий по работе с базами данных в среде популярной СУБД Microsoft SQL Server. Пособие может быть рекомендовано в качестве методического руководства на семинарских занятиях и при подготовке к сдаче зачетов и экзаменов по курсам, связанным с базами данных.

В книге описываются методики и приемы юзабилити-тестирования – процедуры оценки разнообразных продуктов (будь то устройства, сайты, мобильные приложения и т. д.) с точки зрения легкости и удобства их использования. В начальных главах читатель узнает о принципах тестирования, выборе оборудования и места для его проведения. Отдельная глава посвящена изучению пользовательских потребностей. Наконец, подробно рассказывается о том, как спланировать и провести юзабилити-тест, а затем проанализировать его результаты.

Учебное пособие содержит более ста упражнений по трем разделам курса информатики (работа с текстовыми документами, электронными таблицами и базами данных). Большинство упражнений снабжено решениями или подробными указаниями, ориентированными на использование программ Word, Excel и Access системы Microsoft Office версий 2007 и 2003. Пособие также может служить справочником по основным приемам работы с программами Word, Excel и Access.

PDM-система SmarTeam: выполнение типовых задач. Используемые программы: Adobe Acrobat. Труды сотрудников СГАУ (электрон. версия)

В статье представлен системный подход к управлению прогнозирования образовательным процессом в сфере профессионального образования (ВПО, СПО), определяющий деятельность вуза как системы взаимосвязанных процессов. Предложена ИТ-модель мониторинга баланса спроса и предложения на рынке труда для высокотехнологических предприятий и прогнозирования структуры подготовки специалистов, с учетом темпов технологических изменений на мировом рынке и стратегии социально-экономического развития Новосибирской области. Разрабатываемая информационная система научного прогнозирования как ИТ-модель – это электронная Web-площадка для взаимодействия органов местного самоуправления, бизнес-структур, государства с человеком, высших и средних профессиональных учреждений. Системный подход к формированию кадрового потенциала в условиях инновационной экономики предполагает многоэтапность инновационных взаимосвязанных программно-проектных процедур в вузовском сегменте и в сфере реальной экономики. Данный метод позволяет, во-первых, определить перспективные направления подготовки для абитуриентов (в разрезе номенклатуры) в высших учебных заведениях и как следствие обеспечит рабочие места для выпускников, во-вторых, сбалансировать объемы подготовки специалистов (в разрезе специальностей, специализаций и количества), выделяя необходимое количество бюджетных мест. Вся необходимая информация будет доступна стейкхолдерам на информационном портале.

Эта книга поможет вам освоить систему управления базами данных PostgreSQL. Здесь вы найдете рекомендации ведущего разработчика функционала репликации и восстановления PostgreSQL и системного архитектора Skype — одного из самых успешных проектов, созданных с помощью PostgreSQL. Данное руководство должно стать настольным для разработчиков, имеющих дело с «боевыми» базами данных и использующих PHP, Java, Python, Ruby, .Net в любой среде разработки. В книге представлены ответы на общие вопросы и решения проблем, почерпнутые авторами из личного опыта работы с СУБД PostgreSQL — в качестве пользователей, разработчиков и преподавателей.

Методическая разработка предназначена для выполнения курсовой работы «База данных электронной техники» и способствует углубленному изучению работы со связанными списками данных в MS Excel, приобретению базовых знаний и практических навыков работы с системой управления базами данных MS Access и получению практических навыков работы в сети Internet.

Постановка проблемы: одной из важных проблем в области управления данными является их неполное (нечеткое) дублирование, ведущее к снижению качества, в частности к ошибочной интерпретации информационной системой одного и того же объекта как нескольких разных. Реляционная модель данных, а также промышленные СУБД на осно- ве реляционной модели, позволяют исключить ситуации полного дублирования данных, но не имеют механизмов для распознавания и предотвращения появления нечетких дубликатов. Целью работы является разработка такого способа обнаружения нечетких дубликатов, который мог бы быть реализован в реляционной модели данных и промышленной реляционной СУБД. Результаты: рассмотрена общая для информационных систем проблема нечеткого дублирования, предложены пути внесения смысловой дублирующей информации в реляционную базу данных. Определено, что для решения проблемы неполного дублирования следует использовать механизмы нечеткого сравнения строк с учетом их семантики. Приведен пример практической реализации способа для СУБД PostgreSQL с использованием реляционных механизмов обработки данных. Практическая значимость: разработанный способ позволяет автоматически обнару- живать дубликаты, исключив вмешательство человека-оператора, и тем самым повысить качество данных информаци- онной системы. Пример практической реализации для промышленной СУБД позволяет непосредственно использовать предложенный способ в инженерной практике разработки информационных систем. Данный способ также был исполь- зован авторами при разработке коммерческой автоматизированной информационной системы.

Главная задача настоящей книги состоит в том, чтобы предоставить способы применения мощных методов машинного обучения с открытым исходным кодом в крупномасштабных проектах без привлечения дорогостоящих корпоративных решений или больших вычислительных кластеров. Описаны масштабируемое обучение в Scikit-learn, нейронные сети и глубокое обучение с использованием Theano, H2O и TensorFlow. Рассмотрены классификационные и регрессионные деревья, а также обучение без учителя. Охвачены эффективные методы машинного обучения в вычислительной среде MapReduce на платформах Hadoop и Spark на языке Python.

Предназначено для начинающих пользователей, содержит практические задания и вопросы для контроля знаний студентов.

Данное учебное пособие построено на изучении вычислительных возможностей электронных таблиц, с целью их использования для оптимизированных задач управления.

Данная книга представляет собой введение в методы программирования для параллельных ЭВМ. Основной ее целью является научить читателя самостоятельно разрабатывать максимально эффективные программы для таких компьютеров. Вопросы распараллеливания конкретных алгоритмов рассмотрены на многочисленных примерах программ на языке С. В основу книги положен курс лекций для студентов механико-математического факультета МГУ им. М.В. Ломоносова.

Книга описывает последние возможности PostgreSQL 11 для построения эффективных и отказоустойчивых приложений. Подробно рассмотрены передовые аспекты PostgreSQL, включая логическую репликацию, кластеры баз данных, оптимизацию производительности, мониторинг и управление пользователями, процесс миграции с Oracle на PostgreSQL.

В книге описывается интерфейс Java Native Interface (JNI) — интерфейс взаимодействия языка Java с нативным кодом, написанным на других языках. Она будет полезна программистам на Java, интересующимися вопросами интеграции кода, написанного на C и С++, в Java-приложение; внедрением виртуальной машины Java в С— и С++-приложения; реализация виртуальной машины Java; техническими вопросами организации взаимодействия между различными языками, в том числе имеющими отношение к работе со сборщиком мусора и многопоточности.

Эта книга представляет собой исчерпывающее руководство по работе с MongoDB 4.2 — мощной документоориентированной системой управления базами данных. Авторы, внесшие личный вклад в создание и развитие MongoDB, начинают описание системы с самых азов (история создания, базовая терминология) и постепенно переходят к более сложным темам (выполнение запросов, индексация, агрегирование, транзакции, наборы реплик, управление операциями, шардинг и администрирование данных, долговечность, мониторинг и безопасность). Читатель получит конкретные советы по написанию приложения, которое хорошо работает с MongoDB, выяснит, какие системные настройки следует учитывать при ее развертывании и как устанавливать MongoDB в Windows, OS X и Linux.

Описаны основные функции и конструкции языка SQL. Приведены примеры их использования при формировании запросов различной степени сложности. Предложен ряд упражнений для закрепления материала пособия.

Данная часть пособия содержит примеры создания приложений БД на основе современной ORM-технологии Entity Framework v.6 от Microsoft. Справочные сведения, как правило, не приводятся основной упор делается на логику создания приложений. Желательно предварительное знакомство с пособием [1] и Интернет-ресурсом [3]. Примеры, приведенные в пособии, выполнены в среде MS Visual Studio 2015 Community на языке С# с использованием сервера баз данных MS SQL Server 2014 Express. Также пригодны версии начиная с MS VS 2013 и MS SQL Server 2008.

В методических указаниях изложены основы реализации баз данных DB2 в операционной системе (OC) z/OS. Дано краткое описание архитектуры СУБД DB2, компонентов языка SQL, способов доступа к СУБД DB2 для ОС z/OS, а также процесса выполнения скриптов. Приведены примеры скриптов на языке SQL и указаны настройки утилиты SPUFI для их запуска.

В методических указаниях изложены основы разработки приложений для работы с базами данных DB2. Дано краткое описание компиляции программ в операционной системе z/OS, особенностей подготовки программ в СУБД DB2, статических и динамических SQL-операторов. Приведены примеры кода программ на языках COBOL и PL/1 и указаны настройки утилит СУБД DB2 для подготовки этих программ к запуску.

Цель данной книги – дать общее представление о технической структуре и архитектуре сети интернет. Подробно описываются разные уровни сетевой модели TCP/IP (канальный, сетевой, транспортный и прикладной); особое внимание уделяется безопасности транспортного уровня. Рассмотрена система доменных имен. В заключительной главе представлена семиуровневая модель взаимодействия открытых систем (OSI) в сравнении с моделью TCP/IP. В конце каждой главы приводятся глоссарий по теме и контрольные вопросы, позволяющие читателям проверить свои знания.

Представлены основные методы реализации численных методов при решении различных математических задач: нахождение корней уравнений, поиск экстремумов функций, интегрирование и дифференцирование функций и решение дифференциальных уравнений и их систем. Показаны способы реализации этих методов в среде MS Excel как средствами пакета, так и с использованием приемов программирования в VBA for Excel.

В пособии приводится описание основных технологий веб-программирования, рассматриваются примеры разработки и отладки распределенных систем, содержатся практические задания.

Рассматриваются офисные программы, с которыми студент должен научиться работать, чтобы овладеть компетенциями по направлению подготовки «Информационные системы и технологии».

Учебное пособие содержит теоретические и практические сведения для создания информационных систем в виде PHP приложений, использующих СУБД MySQL, Microsoft SQL Server, Firebird и PostgreSQL. Учебное пособие рассмотрено и одобрено на заседании кафедры информационных систем в экономике ФГБОУ ВО «Алтайский государственный технический университет им. И. И. Ползунова».

Данное учебно-методическое пособие содержит базовые сведения об использовании среды разработки C Builder для решения простых задач по работе с базами данных. За рамками оставлено рассмотрение, например, использования хранимых процедур, механизма транзакций. Пособие содержит иллюстрирующие примеры, которые сопровождаются заданиями для самостоятельного выполнения. В завершение приводятся задания, позволяющие проверить усвоение материала. Материал пособия апробирован при проведении лабораторных работ по спецкурсу «Основы программирования на C++».

Рассмотрены основные приемы работы с базами данных при использовании языка запросов SQL и основы web-программирования. Описывается взаимодействие серверных скриптов с СУБД с использованием языка запросов SQL.

Учебно-методическое пособие подготовлено на кафедре программного обеспечения и администрирования информационных систем факультета прикладной математики, информатики и механики Воронежского государственного университета.