Включено в модуль:

• Базовые типы данных: int, float, string, bool
• Условный оператор и циклы: for, while
• Структуры данных в Python: списки, кортежи, словари и множества, comprehensions
• Функции, аргументы и аннотации функций
• Область видимости переменных, lambda функции, map, zip, sorted
• ООП: инкапсуляция, наследование, полиморфизм, dunder methods, абстрактные классы, mro
• Numpy для эффективных вычислений
• Pandas для анализа данных
• Работа в Jupyter Notebook и в Pycharm
• Обработка исключений, итераторы и генераторы, декораторы.

Чему вы научитесь:
Освоите основы программирования на Python, самом популярном на данный момент языке программирования

Описание:
Модуль предлагает участникам современную и полноценную программу обучения Python - одному из самых популярных языков программирования на сегодняшний день. Студенты познакомятся с основами Python, а также изучат различные аспекты языка, такие как работа со строками, циклами, структурами данных, библиотеками, функциями и объектно-ориентированным программированием (ООП).

Программа:
Введение в Python
Введение в Python, его назначение. Арифметика и функции. Работа со строками
Введение в Python: интерактивное программирование
Циклы и особенности их применения
Структуры данных в python, работа с файлами, библиотеки
Функции в Python
Введение в ООП
Функции в Python
Введение в ООП
Введение в numpy, jupyter notebook, pandas
Чат боты, подготовка по проектам
Продвинутые возможности Python

Включено в модуль:

• Основы баз данных и как они организованы
• Как создавать таблицы и использовать команды DDL
• Как выбирать данные с помощью операторов SELECT и WHERE
• Разные типы соединений таблиц
• Как использовать операторы GROUP BY и HAVING
• Как использовать оконные функции и их рамки
• Как создавать индексы и оптимизировать запросы

Чему вы научитесь:
- Как получать нужные данные из таблицы с помощью SELECT запросов и заданных условий
- Как создавать таблицы и добавлять данные в них
- Как выполнять расчеты для получения агрегатных значений (например, сумма, среднее значение)
- Как объединять данные из разных таблиц

Описание:
В модуле мы рассмотрим основные концепции баз данных и структуру данных. Вы научитесь создавать таблицы и использовать DDL (Data Definition Language) команды для изменения структуры таблиц. Вы изучите SELECT запросы — как выбирать и фильтровать данные из таблиц. Также будет рассмотрено использование подзапросов и табличных выражений для более сложных запросов и анализа данных. После завершения модуля, вы будете обладать необходимыми навыками для работы с базами данных, структуры данных, написания SQL запросов, использования подзапросов и табличных выражений, а также для оптимизации запросов с использованием оконных функций и индексов.

Программа:

• Базы данных, структура данных
• создание таблиц и DDL команды
• Основы SQL. SELECT запросы
• Подзапросы и табличные выражения
• Оконные функции, фреймы оконных функций
• Индексы и оптимизация запросов

Включено в модуль:

• Что такое API (интерфейс для взаимодействия между программами)
• Понятие формата передачи данных JSON и его использование в API
• Принципы проектирования API First и архитектуры REST
• Механизмы авторизации, включая протокол OAuth 2.0
• Описание Django REST Framework и его использование для создания API
• Проектирование REST API и его особенности
• Роль сериализаторов при работе с данными в API

Чему вы научитесь:

• Как использовать API для отправки запросов и получения ответов от других программ или сервисов
• Как освоить процесс аутентификации и авторизации для обеспечения безопасности при работе с API

Описание:
В рамках этого модуля вы познакомитесь с основами работы с API и научитесь применять их в различных проектах. Вы разберетесь в том, как узнать, какие данные доступны через API, как правильно формировать запросы и анализировать полученные ответы. Одной из важных тем, которые мы рассмотрим, является аутентификация и авторизация API. Вы научитесь, как безопасно идентифицировать пользователя в системе через API, узнаете различные механизмы аутентификации и авторизации и научитесь их применять.

По завершению модуля вы будете иметь практические навыки работы с API, а также понимание основных концепций аутентификации и авторизации, что позволит вам успешно применять эту технологию в будущих проектах.

Программа:
Введение в API и их применение
Понимание запросов и ответов API
Аутентификация и авторизация API

Включено в модуль:

• Освоение работы с Django (фреймворк для разработки веб-приложений)
• Использование шаблонов в Django для создания визуального оформления веб-страниц
• Как сохранять и работать с данными в Django
• Начало работы над проектом в Django
• Использование Snippets (фрагментов кода) для упрощения процесса разработки
• Освоение механизмов авторизации в Django
• Доработка проекта в Django
• Использование административной панели Django для управления проектом
• Развертывание (deploy) Django-проекта для его публикации и доступа из интернета

Чему вы научитесь:
Изучите Django — фреймворк для разработки веб-сайтов на Python, который позволяет создавать сайты быстро и эффективно.

Описание:
В рамках модуля студенты научатся разрабатывать базовые функциональности, включая формы, интерактивные элементы и работу с API.В результате прохождения модуля студенты будут иметь достаточно навыков и знаний, чтобы создавать базовые веб-приложения, работать с базами данных, обеспечивать безопасность и развертывать свои проекты на сервере.

Программа:

• Создание базового веб-приложения
• Работа с базами данных:
• Расширенные представления и шаблоны
• Аутентификация и Авторизация
• Развертывание

Включено в модуль:

• Работа с разрешениями, аутентификацией и авторизацией в Django REST Framework (DRF)
• Расширенные функции DRF и взаимодействие с интерфейсом приложения через API

Чему вы научитесь:
Выдвигать гипотезы, планировать эксперименты и оценивать их результаты на основе статистики

Описание:
В начале модуля будет представлено введение в DRF, где вы узнаете основные концепции и возможности фреймворка. Вы разберетесь с основными понятиями, такими как сериализация, представления и маршрутизация, и узнаете, как использовать их для создания API.Далее в программе курса вам будут представлены различные методы работы с разрешениями, аутентификацией и авторизацией в DRF. Вы научитесь создавать пользовательские разрешения, настраивать аутентификацию по токенам и работать с различными схемами авторизации.По завершению этого модуля вы будете готовы создавать мощные и безопасные API с использованием Django Rest Framework и применять их в своих проектах.

Программа:

• Введение в Django Rest Framework (DRF)
• Работа с разрешениями, аутентификацией и авторизацией в DRF
• Расширенные возможности DRF и работа с API

Включено в модуль:

• Основные компоненты, виды и структуры данных в системах управления базами данных
• Различные типы моделей данных (логические, физические, связи и т.д.)
• Представление данных в модели Кимбалла и модели Инмона
• Схемы «Звезда» и «Снежинка» для организации данных
• Сравнение хранилищ и озер данных: сходства и различия
• Процессы ETL/ELT для обработки и загрузки данных
• Архитектура хранилищ данных и его компоненты

Чему вы научитесь:
Освоите различные модели и схемы баз данных: модель Кимбалла, модель Инмона, схема «Звезда», схема «Снежинка». Познакомитесь с таким понятием, как озеро данных

Описание:
Первая часть модуля будет посвящена введению в MongoDB. Вы узнаете о ее основных преимуществах и возможностях. Будет рассмотрена структура и принцип работы MongoDB, а также основные термины и понятия.

Далее вы ознакомитесь с процессом установки MongoDB. Будут разобраны основные шаги установки и настройки, а также решение возможных проблем и ошибок. Вы научитесь создавать индексы для оптимизации процесса поиска и фильтрации данных. Будут рассмотрены различные типы индексов и их особенности в MongoDB.

Наконец, в последней части модуля, мы погрузимся в более продвинутые темы. Вы узнаете о возможностях работы с транзакциями в MongoDB и научитесь создавать и выполнять транзакционные запросы.

Программа:

• Введение в MongoDB
• Установка MongoDB и первые шаги
• Запросы и индексация в MongoDB
• Создание запросов, транзакций, индексы

Включено в модуль:

• Обзор основных инструментов, таких как DBT, Airflow, Kafka и Airbyte, используемых для работы с данными.
• Различие между Batch- и Streaming-передачей данных – как данные передаются и обрабатываются пакетно или в режиме реального времени.
• Оркестрация ETL/ELT процессов – как управлять и организовывать процессы извлечения, преобразования и загрузки данных.
• Компетенции и навыки, необходимые для работы в области ETL и Инженерии данных – какие знания и умения должен иметь специалист в этой области.

Чему вы научитесь:
Освоите основные инструменты DBT, Airflow, Kafka, Airbyte. Освоите способы передачи данных и оркестрацию

Описание:
В рамках модуля участники изучат основы работы с инструментами ETL, которые позволяют автоматизировать процесс извлечения данных, их преобразования и загрузки в целевую базу данных. Будут рассмотрены различные инструменты и платформы, используемые в процессе ETL, а также принципы и методы работы с ними.По окончании модуля участники будут владеть основными принципами и навыками работы с инструментами ETL и ELT, а также смогут успешно преобразовывать данные в процессе ETL. Модуль полезен для специалистов, занимающихся анализом данных, разработкой BI-решений, а также всех, кто хочет овладеть современными инструментами обработки и преобразования данных.

Программа:

• Введение в ETL и ELT
• Основы работы с инструментами ETL
• Преобразование данных (Transform)
• Практика преобразования данных