Python для анализа данных. Часть 2: Парсинг, SQL и регрессия

Курс «Основы Python для обработки и визуализации данных. Часть 2» — это официальная программа повышения квалификации НИЯУ МИФИ объёмом 36 академических часов. В ходе обучения слушатели осваивают продвинутые методы обработки и анализа данных на языке Python: от работы с регулярными выражениями и парсинга HTML (BS4) до обработки текстов, поиска аномалий, восстановления пропусков, квантования данных, регрессионного анализа с использованием Scikit-learn, векторизации текстовых данных, работы с SQLite3 и статистического анализа с применением генерации случайных выборок.

Повышение квалификации, а не «второе высшее». Вам не нужно писать диплом и тратить полгода. Всего 36 академических часов — и вы получаете официальное удостоверение НИЯУ МИФИ. Быстро, конкретно, с фокусом на практику.

Почему удостоверение от МИФИ имеет значение? НИЯУ МИФИ — это ведущий технический университет с мировым именем. Входит в топ-3 технических вузов России, а его выпускники ценятся работодателями из госкорпораций и высокотехнологичных отраслей. Документы о повышении квалификации, выданные университетом, признаются в сфере IT, инженерии и государственном секторе. Удостоверение вносится в реестр ФИС ФРДО.

Сколько времени займёт обучение? Программа включает 36 академических часов. Обучение проходит онлайн, в удобном для слушателя темпе. Как правило, освоение курса занимает от двух до трёх недель. Доступ к материалам сохраняется на весь период сессии.

Кому подойдёт этот курс? Курс ориентирован на аналитиков данных, специалистов по обработке информации, разработчиков, а также на всех, кто уже освоил базовые инструменты Python для работы с данными и хочет углубить свои навыки в области продвинутой обработки текстов, регрессионного анализа, работы с базами данных и статистического моделирования. Он будет полезен тем, кто стремится научиться эффективно извлекать и обрабатывать данные из веб-источников, очищать и подготавливать данные для построения моделей машинного обучения.

Кто вас учит? Курс разработан преподавателями НИЯУ МИФИ — ведущими специалистами в области анализа данных, машинного обучения и программирования на Python. Авторы программы имеют многолетний опыт преподавания и реализации проектов по обработке и анализу данных в различных отраслях.

Инструменты и технологии, которые вы освоите:

• Обработка текстов и парсинг веб-страниц: регулярные выражения (библиотека Re), BeautifulSoup (BS4), построение дерева тегов статических HTML-страниц.
• Подготовка данных для анализа: поиск аномальных значений, восстановление пропущенных данных, квантование и перекодирование данных (Scikit-learn).
• Регрессионный анализ и векторизация текстов: линейная регрессия в Scikit-learn, векторизация текстовых данных для задач машинного обучения.
• Работа с базами данных и статистическими методами: SQL в файловой СУБД SQLite3, генерация случайных подвыборок (Random), оценка статистических характеристик выборки.

Как устроено обучение:

• Видеолекции с практикой. Короткие ролики с примерами (образец урока — справа вверху страницы).
• Тесты после каждого модуля. Закрепляете знания, каждый тест можно пройти 2 раза.
• Итоговая аттестация с прокторингом. Удалённый экзамен с идентификацией личности для получения официального удостоверения.
• Поддержка. В разделе «Обсуждение» можно задать вопросы авторам курса.

Все материалы становятся доступны сразу после оплаты. Учитесь в удобное время, без жёсткого графика.

Корпоративным клиентам: Для юридических лиц возможно корпоративное обучение по счёту-оферте. Запрос отправляйте на openedu@mephi.ru с указанием ФИО, должности и организации.

Модуль 1. Базовая обработка текстов. Регулярные выражения. Библиотека Re.
Модуль 2. Базовый парсинг сайтов. Библиотекa BS4. Построение дерева тегов статической Html страницы.
Модуль 3. Поиск аномальных значений. Восстановление пропущенных значений.
Модуль 4. Квантование и перекодирование данных. Библиотека Sklearn.
Модуль 5. Регрессионный анализ в Библиотеке Sklearn. Линейная регрессия.
Модуль 6. Продвинутая обработка текстов. Векторизация текстовых данных с библиотекой Sklearn.
Модуль 7. Работа  с языком SQL в файловой СУБД Sqlite3.
Модуль 8. Модуль Random, генерация случайных подвыборок и оценка статистических характеристик исходной выборки.

После курса вы сможете (вот что попадёт в ваше резюме):

• Применять регулярные выражения для поиска, замены и извлечения информации из текстовых данных, а также парсить HTML-страницы с использованием BS4.
• Выявлять и обрабатывать аномальные значения, восстанавливать пропуски в данных, выполнять квантование и перекодирование с использованием Scikit-learn.
• Строить модели линейной регрессии, оценивать их качество и интерпретировать результаты с помощью библиотеки Scikit-learn.
• Векторизовать текстовые данные для использования в задачах машинного обучения, а также выполнять SQL-запросы в SQLite3 для извлечения и обработки данных.
• Генерировать случайные подвыборки для статистического анализа и применять методы оценки статистических характеристик исходных данных.

Честные правила возврата денег

• ✅ Открыли менее 25% блоков — вернём 100%.
• ✅ Открыли от 25% до 50% блоков — вернём 25%.
• ❌ Открыли более 50% блоков — возврата нет (услуги считаются оказанными).
• ❌ Не набрали 60 баллов (или не завершили обучение до окончания сессии) — возврата нет (услуги считаются оказанными, документ не выдан).
• ❌ Вас поймали на списывании — возврата нет, договор расторгнут.

Что такое «открытие блока»? Это технический факт загрузки страницы с учебным материалом (видео, тест, текст) на Портале. 
Неважно, смотрели ли вы видео до конца или отправляли ответы на тест — система фиксирует сам факт открытия страницы. 
Процент просмотра отображается в вашем личном кабинете.
Если вы открыли блок, а внутри ничего нет (пустая страница) — сделайте скриншот и сразу сообщите нам на openedu@mephi.ru. 
Мы проверим и решим проблему либо по запросу вернем деньги, если проблема на нашей стороне.

Для возврата средств направьте письменное требование на openedu@mephi.ru. Возврат осуществляется в течение 15 рабочих дней.

Часто задаваемые вопросы

Как получить удостоверение?
Успешно завершить программу (набрать 60+ баллов из 100 по всем тестам). Документ высылаем на почту в электронном виде. Оригинал — по запросу.

Как быстро я получу удостоверение?
Электронное удостоверение высылаем в течение 30 рабочих дней после успешной проверки прокторинга. Оригинал на бумаге — по вашему запросу; отправим почтой в течение 15 рабочих дней.

Что будет, если я пройду курс очень быстро?
Даже если вы успешно завершите программу за 3–4 дня, доступ к материалам сохранится на весь установленный срок сессии (минимум на 14 дней).

Что такое прокторинг?
Это система видеонаблюдения во время итогового теста. Вы выбираете удобное время, сотрудники МИФИ проверят запись. Это гарантирует, что удостоверение получите именно вы.

Можно ли пересдать тесты?
Да, каждый тест (как промежуточный, так и итоговый) можно пройти 2 раза.

Какие технические требования?
Компьютер с доступом в интернет (от 1 Мбит/с), веб-камера для прокторинга, современный браузер.

Остались вопросы? Напишите нам: openedu@mephi.ru

Обучение ведётся на русском языке. Программа реализуется с применением исключительно электронного обучения и дистанционных образовательных технологий. Все услуги предоставляются в соответствии с публичной офертой.