Обработка и анализ больших данных

Этот курс дает базовые навыки в первичной обработке и хранении данных. Научит обрабатывать данные в электронных таблицах, применять правильные методы визуализации данных, и выявлять тренды во временных рядах, применять специальные программные средства для организации хранения и работы с большими объемами сложно структурированных данных - реляционные СУБД и NoSQL хранилища.  Курс не требует специальных начальных навыков, доступен тем, кто является пользователем ПК, имеет навык работы с операционной системой Windows, владеет пакетом офисных программ, умеет искать информацию в сети Internet. Навыков программирования не требуется. Курс носит практикоориентированный характер. В качестве упражнений пользователи будут обрабатывать наборы данных при помощи инструментов: электронных таблиц, реляционных СУБД и NoSQL хранилищ. Для работы с курсом требуется компьютер с выходом в интернет - для выполнения упражнений не потребуется установка программных средств на свой компьютер, все рекомендуемые в курсе инструменты доступны удаленно.

2.1. Знание (осведомленность в областях) 2.1.1.   Области применения цифровых технологий в личностной и профессиональной сферах. 2.1.2.  Основные методы разведочного анализа данных. 2.1.3. Способы структуризации и визуализации данных, правила их применения. 2.1.4.  Методы анализа временных рядов. 2.1.5. Существующие методы первичной обработки данных, области их применения, достоинства и недостатки. 2.1.6. Особенности информационных потоков в своей профессиональной области, правовые и этические аспекты распространения информации. 2.1.7. Основные цифровые платформы хранения данных и принципы их работы. 2.1.8. Терминологию и методы, используемые в системах хранения данных. 2.1.9. Принципы организации хранения данных разных предметных областей. 2.1.10. Методы хранения структурированных данных. 2.1.11. Платформы для создания хранилищ структурированных данных. 2.1.12. Методы оптимизации работы хранилищ структурированных данных. 2.1.13. Методы хранения неструктурированных данных. 2.1.14. Платформы для создания хранилищ неструктурированных данных. 2.2. Умение (способность к деятельности) 2.2.1. Использовать компьютерную технику и цифровые технологии для автоматизации информационно-аналитической деятельности. 2.2.2. Отбирать технологии работы с информацией в зависимости от класса задач в области данных. 2.2.3. Применять методы разведочного анализа данных. 2.2.4. Планировать аналитические работы в информационно-технологическом проекте. 2.2.5. Подбирать приемы первичной обработки данных в зависимости от их структуры и контента. 2.2.6. Использовать различные инструменты хранения и обработки данных. 2.2.7. Собирать и систематизировать данные из различных источников для произвольных предметных областей. 2.2.8. Ставить задачи по разработке информационных систем, ориентированных под нужды различных предметных областей. 2.2.9. Проектировать структуры хранения данных под нужды предметной области. 2.2.10. Выбирать правильный инструмент для хранения данных, исходя из особенностей данных и предметных областей. 2.2.11. Применять подходящий метод визуализации данных в зависимости от типа данных и стоящих задач. 2.3.Навыки (использование конкретных инструментов) Инструменты: электронные таблицы Excel/Google sheets, Oracle/PostgreSQL, MongoDB 2.3.1 Владеть аппаратом цифровых технологий для получения, обработки и передачи информации с помощью технических средств и методов. 2.3.2 Владеть методами сбора и систематизации данных различных предметных областей. 2.3.3 Владеть функционалом применения электронных таблиц Excel/Google sheets и компьютерными технологиями для решения задач, связанных с обработкой и анализом данных, применительно к любой предметной области. 2.3.4 Владеть аппаратом современных СУБД. 2.3.5 Владеть методами проектирования данных в контексте современных СУБД (Oracle/PostgreSQL). 2.3.6 Владеть приемами работы с реляционными данными (язык SQL). 2.3.7 Владеть методами оптимизации выполнения реляционных запросов. 2.3.8. Владеть технологиями использования NoSQL хранилищ. 2.3.9.  Владеть примами хранения и обработки данных в контексте MongoDB.