- Регистрация
- 8 Сен 2016
- Сообщения
- 483.866
- Реакции
- 268.180
**Data-инженер [2024] [Слёрм] [Николай Марков, Николай Акимов, Ася Гайламазян]**
На курсе вы:
- Научитесь строить дата-пайплайны и выстраивать эффективную работу дата-архитектуры
- Разберетесь в инструментах для управления данными
- Выполните реальный проект на собственных данных под руководством опытных экспертов
**Освоите инструменты:**
Python, AirFlow, Bash, NiFi, Hadoop, Kafka, Spark, Neo4j, PostgreSQL, MongoDB, ClickHouse
**Программа:**
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.
3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.
5. Реляционные базы данных.
6. NoSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.
9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.
13. Работа с собственным проектом в финальном модуле.
14. Заключение
На курсе вы:
- Научитесь строить дата-пайплайны и выстраивать эффективную работу дата-архитектуры
- Разберетесь в инструментах для управления данными
- Выполните реальный проект на собственных данных под руководством опытных экспертов
**Освоите инструменты:**
Python, AirFlow, Bash, NiFi, Hadoop, Kafka, Spark, Neo4j, PostgreSQL, MongoDB, ClickHouse
**Программа:**
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.
3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.
5. Реляционные базы данных.
6. NoSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.
9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.
13. Работа с собственным проектом в финальном модуле.
14. Заключение
Для просмотра скрытого содержимого вы должны зарегистрироваться
Возможно, Вас ещё заинтересует:
- WEB-разработчик 2024 (NEW) [Иван Петриченко] [Udemy]
- Школа здоровья. Гормоны и старость (31 поток) [Тариф Базовый] [Галина Гарбузова]
- Профессия: Аналитик данных [Алексей Колоколов, Александра Чекризова, Алексей Холев]
- Метафорическая психотерапия. Базовый курс [MetaPsy] [Галина Тимошенко, Юлия Анцерова, Ирина Давыдова]
- Монетизация в таро [Natacha_Adler]
- Кишечник. Гормоны. Иммунитет. Метаболическое питание [Валерия Изюмова, Александр Исаев]
- Арт-интенсив Цвет. Искусство цвета: секреты гармоничных сочетаний [Саша Плотникова]
- Идеальная баня [Василий Ляхов]