Выполните реальный проект из практики дата-инженера
Автоматизируете процесс очистки и сбора данных
Автоматизируете процесс очистки и сбора данных
По итогам курса вы:
Практический курс по одному из самых перспективных направлений в Big Data
Курс по Data Engineering
Онлайн-курс «Data Engineer» для начинающих
Автоматизировать процесс очистки и сбора данных
Для тех, кто хочет
Hadoop, Linux, SQL, Apache Spark, Apache Airflow
Для новичков
Требования
Включает
секунд
минут
часов
дней
скидка
40%
12 : 10 : 44 : 16
Длительность
10 недель
10 недель
Формат
онлайн
онлайн
Старт
9 февраля
9 февраля
Оценка курса
4.6
4.6
Партнер курса
Научитесь строить пайплайны данных в реальном времени
В современных компаниях накапливается большой объем данных, из которых можно извлекать важную аналитику, строить гипотезы или прогнозные модели. Data Engineer — это специалист, который собирает данные из разных источников, очищает их и передает в удобном виде аналитикам для принятия бизнес-решений.
Аналитикам данных нужно знать, как работает хранилище данных, в каком виде там хранятся данные, как они обрабатываются и как их можно получить для анализа.
Курс ориентирован на практику и основные инструменты, подходит для тех, кто имеет базовые знания языка Python. За два месяца вы освоите все важные этапы Data Engineering.
Медианная зарплата дата-инженера
*данные взяты с сайта
доступно прямо сейчас*
3325 вакансий
130 000 ₽
Преподаватель
Михаил Королев
Ведущий Data Engineer в «АльфаСтрахование»
• Системный программист, изобретатель, руководитель, наставник
• Серьезно занимался параллельным программированием
• Имеет большой опыт в ритейле, страховании и брокерском бизнесе
• Работает с данными с 1996 года
• Приверженец и практик в Agile и самоуправлении
• Работал в крупных компаниях, в том числе зарубежных
• Системный программист, изобретатель, руководитель, наставник
• Серьезно занимался параллельным программированием
• Имеет большой опыт в ритейле, страховании и брокерском бизнесе
• Работает с данными с 1996 года
• Приверженец и практик в Agile и самоуправлении
• Работал в крупных компаниях, в том числе зарубежных
Программировать на Python и использовать этот язык для анализа и обработки данных
Работать с моделями и алгоритмами машинного обучения и решать на их основе практические задачи
Этот курс входит в программу Профессия «Data Scientist»
Получать данные из разных источников: базы данных, файлы, интернет
Получите навыки уровня middle в Data Science
Уже к середине курса вы сможете
Разработать модель предсказания кредитного рейтинга
Построить модель для увеличения продаж в розничном бизнесе
Создать систему рекомендаций подходящих товаров при покупке
Вы научитесь:
Программа курса
МОДУЛИ
1
Введение, практический linux
Кто такой Data Engineer и зачем ему Linux?
2
Современные хранилища данных
Разнообразие баз данных и их особенности
3
Экосистема Hadoop
Что такое Hadoop, что он умеет и как им пользоваться
4
Источники данных и работа с ними
Файлы как источники данных, JDBC — структурированные данные, SQL для выгрузки данных
5
Apache Spark и обработка данных
Зачем нужен Apache Spark и как с ним работать
6
Hadoop как хранилище данных
Особенности и нюансы hdfs
7
Apache Airflow для оркестрации конвейеров
Настройка data pipelines
8
Обзор облачных хранилищ
Особенности и нюансы работы с облачными хранилищами: Google, Amazon, Azure
Получите полную программу курса
It's totally free
Преимущества курса
В рамках курса вас ждет сквозной проект — реальная задача дата-инженера. На каждом новом этапе вы будете решать часть большой задачи, а в финале автоматизируете весь процесс.
Курс основан на практике. Мы рассматриваем инструмент или технологию, после чего сразу отрабатываем ее на практике.
План обучения построен по принципу от простого к сложному. Вы узнаете и освоите самое важное о Data Engineering, что нужно знать инженеру данных.
В процессе обучения вам будет помогать преподаватель и команда кураторов, которые помогут разобраться с предметом и решат все технические и организационные вопросы.
Как проходит обучение
Вы сможете проходить обучение из любой точки планеты. Новые модули будут открываться раз в неделю.
Слушаете лекции преподавателей
Выполняете практические задания
По каждой теме вы выполняете практику — основанные на реальных кейсах задачи по Big Data.
Помощь преподавателя и коллектива
Вы будете получать поддержку наставников и постоянно общаться со своими сокурсниками в наших каналах в мессенджерах.
Итоговый проект
В конце курса вы завершите собственный проект по настройке пайплайнов и хранилища данных.
1
2
3
4
Слушаете лекции преподавателей
Получите должность Android-разработчика
уровня Middle
уровня Middle
Жизнь на курсах SkillFactory
Уроки с упором на практику
Вы не просто изучаете алгоритмы, а учитесь использовать их в решении реальных бизнес-задач. После обучения сможете сразу использовать навыки в деле, а не разбираться с тем, как приспособить знания к жизни.
Уроки доступны на онлайн-платформе, для вдумчивого изучения в любое время.
Уроки доступны на онлайн-платформе, для вдумчивого изучения в любое время.
Помощь преподавателя и коллектива
Если что-то не получается, вы не останетесь один на один с трудностями. Рядом всегда будет преподаватель, который поможет разобраться с проблемой.
Когда видишь успехи остальных, учиться легче. Если у кого-то получается лучше, это подстегивает к более активным действиям. Если получается лучше остальных, то вы помогаете коллегам.
Когда видишь успехи остальных, учиться легче. Если у кого-то получается лучше, это подстегивает к более активным действиям. Если получается лучше остальных, то вы помогаете коллегам.
Общаемся и помогаем друг другу в мессенджерах
Для курса создается сообщество в мессенджерах. В нем участники делятся впечатлениями и решениями задач, спрашивают совета, а преподаватель все подробно разъясняет.
Делаем домашние задания
Тут все очевидно: чтобы научиться, нужно практиковаться. Дома вы делаете задания, строите дашборды, а преподаватель и сокурсники вам в этом помогают.
На курсе обучение не заканчивается
Сертификат школы SkillFactory
Персональный сертификат о прохождении курса, по запросу предоставляется на английском языке
Запишитесь на курс
Курс стартует: 9 февраля
Осталось 6 мест
Стоимость обучения
Можно в рассрочку на 12 месяцев. Банки партнеры:
32 400
₽
54 000 ₽
У меня есть промокод
секунд
минут
часов
дней
скидка
40%
12 : 10 : 44 : 16
Как получить скидку?
За счет работодателя
Для запроса документов забронируйте курс через форму и выберите пункт «Оплатить как юр лицо» или напишите на почту info@skillfactory.ru.
Реферальная программа
Вы можете получить скидку 20%, пригласив друзей на наши курсы.
Программы лояльности
После оплаты одного из курсов вы получаете скидку на другой.
Репост
Поделитесь ссылкой у себя в соц. сетях и получите дополнительную скидку 5%.
Наши студенты работают в компаниях
Отзывы студентов курсов
Самообучение с нуля - это не моё, хотя я и освоил основы Python и базы данных самостоятельно. Дедлайны же на курсе сильно стимулируют к занятиям, ну и здорово, когда есть, с кем обсудить возникшие во время обучения проблемы. Всегда старайтесь сделать больше, чем надо для выполнения домашнего задания
Еще очень многому нужно учиться, но курс однозначно стоит своих денег. Желающим работать с данными однозначно рекомендую. Но если уровень совсем нулевой, будет не просто.
Александр Гладких
Понравилось, что много задач. Иногда приходилось подумать, чтобы их решить. Теория хорошо объяснена и много ссылок на дополнительные ресурсы.
Наталья Карькова
Мне хочется сказать большое спасибо авторам этого куса и организаторам обучения. Это был мой первый онлайн курс в жизни. Я давно работаю в сфере IT. Очень любопытно было познакомиться с новым инструментом. Курс оказался именно тем, чего хотелось. Для меня все было новым. Несмотря на наличие опыта программирования на разных языках, мне было нелегко.
Вера Шерман
Экзамен был достаточно интересный, хотя хотелось-бы потруднее. Все модули были сделаны достаточно понятно и было достаточно практики. Из замечаний, хотелось бы больше практики по визуализации.
Кирилл Атаманенко
Замечательно подобрано соотношение материала и практики, специалисты курса всегда готовы прийти на помощь, вебинары проводятся в доступной форме.
Александр Чесноков
Курс понравился своей интерактивностью, доступной и наглядной подачей материала, обилием ссылок на дополнительные материалы. Представляет собой обязательный минимум знаний и даже несколько больше. Хотелось бы еще больше заданий на работу с Pandas, API и визуализацию.
Андрей Зелепукин
Несколько раз пытался начинать обучаться, но каждый раз останавливался, если что-то не мог понять. Поэтому в очередной раз решив еще раз начать все сначала, поставил себе задачу обучаться не самостоятельно, а с помощью четкой программы. Все, с кем успел "столкнуться" объясняют доходчиво, помогают постоянно, если возникают вопросы.
Курс позволяет выбрать удобный ритм обучения. Есть возможность перейти в другой поток и всё также получать обратную связь от менторов и кураторов. Если твой поток выпустился - это не значит, что ты не сможешь закончить обучение.
После курса я буду искать работу как Full-stack разработчика для веба. Я доволен, курсы проходят отлично. Плюс очень важный момент - очень много людей, с которыми есть общие интересы. Сейчас в свободное время, уже после 3 месяцев курсов я брал несколько заказов на фрилансе. Простенькие landing page. Как раз то, что надо, чтобы «набить скил».
Часто задаваемые вопросы
Задача Data Engineering — сбор, обработка и хранение данных для того, чтобы их могли использовать аналитики и другие сотрудники компании.
Эти накопленные данные используют, например, для машинного обучения и построения прогнозов, для анализа и принятия управленческих решений.
Эти накопленные данные используют, например, для машинного обучения и построения прогнозов, для анализа и принятия управленческих решений.
Бизнес-аналитикам часто приходится самостоятельно заниматься процессами сбора данных из разных источников, первоначальной обработкой, очисткой, настройкой пайплайнов.
Если вы работаете на позиции Data Scientist, то вы постоянно общаетесь с инженерами данных. Вам нужно знать методы и технологии хранения и доставки данных, чтобы эффективно взаимодействовать с инженерами.
Если вы работаете на позиции Data Scientist, то вы постоянно общаетесь с инженерами данных. Вам нужно знать методы и технологии хранения и доставки данных, чтобы эффективно взаимодействовать с инженерами.
Курс предназначен для профессиональных бизнес-аналитиков, специалистов по Data Science, аналитиков данных, разработчиков, которые хотят научиться выстраивать потоки данных, и менеджеров, руководителей, которым нужно понимать, как устроено хранилище данных, как собираются и очищаются данные.
Область Big Data — бесконечная, требующая постоянного самообразования и отслеживания новых технологий. Вы пройдете от точки «я ничего не знаю» до точки «я решаю задачи по Data Engineering и знаю, где это применить и как развиваться дальше».
Основной ответ такой — наш курс не является заменой бесплатным онлайн-курсам. Напротив, такие онлайн-курсы — это очень хорошо и полезно. Но у наших курсов есть неоспоримые преимущества: фокус на практике, помощь преподавателя и поддержка группы.
Вы будете учиться по принципу одно занятие = одна задача. Вместе с опытным специалистом по инжинирингу данных вы пройдете все этапы извлечения, обработки, загрузки, хранения, очистки, доставки данных.
Если вы столкнетесь с проблемой при выполнении задания, вам всегда будет, к кому обратиться: вы сможете получить совет от одногруппников и помощь преподавателя в закрытом сообществе в Slack.
Вы будете учиться по принципу одно занятие = одна задача. Вместе с опытным специалистом по инжинирингу данных вы пройдете все этапы извлечения, обработки, загрузки, хранения, очистки, доставки данных.
Если вы столкнетесь с проблемой при выполнении задания, вам всегда будет, к кому обратиться: вы сможете получить совет от одногруппников и помощь преподавателя в закрытом сообществе в Slack.
Да. Убедитесь в этом, посмотрите статистику профессии Data Engineer на русскоязычных и зарубежных кадровых сайтах.
Научитесь использовать науку о данных, строить и тестировать математические модели на курсе «Профессия Data Scientist».
Выполните 10 реальных проектов и освойте фундаментальную профессию за два года на «Полном курсе по Data Science». А еще учитесь у лучших менторов, качайте скиллы на тренажерах, участвуйте в хакатонах.
Хотите работать аналитиком в маркетинге или в продукте? Заходите на курс «Профессия Аналитик данных» — на нем уже основного первого блока можно выбрать специализацию, а еще устроиться на работу во время обучения.
Выполните 10 реальных проектов и освойте фундаментальную профессию за два года на «Полном курсе по Data Science». А еще учитесь у лучших менторов, качайте скиллы на тренажерах, участвуйте в хакатонах.
Хотите работать аналитиком в маркетинге или в продукте? Заходите на курс «Профессия Аналитик данных» — на нем уже основного первого блока можно выбрать специализацию, а еще устроиться на работу во время обучения.
Мы разрабатываем курсы для людей старше 16 лет. Если вам еще не исполнилось 16, но есть желание попробовать IT и оценить свои силы, есть бесплатные мероприятия и материалы на странице. Вы сможете лучше сориентироваться в мире IT-профессий, понять, что интереснее и больше подходит, оценить сложность материала.
Учитесь из любой точки в удобное время
Развивайте профессиональные навыки в онлайн-формате
Москва
Ереван
Алматы
Минск
Киев
Ташкент
Баку
Казань
Берлин
Тель-Авив
Лондон
Хельсинки
Варшава
Тбилиси
Прага
Франкфурт-на-Майне
Амстердам
Рига
Таллин
Вильнюс
Батуми
Гродно
Кишинев
Нур-Султан
Санкт-Петербург
Новосибирск
Одесса
Нижний Новгород
Харьков
Воронеж
Ростов-на-Дону
Екатеринбург
Уфа
Самара
Красноярск
Омск
Челябинск
Калининград
Пермь
Волгоград
Днепропетровск
Ставрополь
Краснодар
Ижевск
Саратов
Иркутск
Тюмень
Астрахань
Тольятти
Хабаровск
Ярославль
Владивосток
Сочи
Владимир
Рязань
Махачкала
Королёв
Архангельск
Мурманск
Грозный
Симферополь
Йошкар-Ола
Набережные Челны
Севастополь
Томск
Бишкек
Тула
Калуга
Ульяновск
Гомель
Барнаул
Тверь
Балашиха
Чебоксары
Смоленск
Иваново
Пенза
Чехов
Подольск
Донецк
Оренбург
Липецк
Курск
Кемерово
Мытищи
Петрозаводск
Люберцы
Новокузнецк
Брянск
Череповец
Сургут
Кострома
Химки
Одинцово
Киров
Белгород
Якутск
Тамбов
Видное