Результаты поиска по запросу: [bigdata team] Практический курс по Big Data. Часть 3. RT, NoSQL, Data layout, Kafka

Вы научитесь работать с потоковой обработкой данных, познакомитесь с Kafka и Spark Structured Streaming, освоите NoSQL поверх больших данных, подружите Spark с Cassandra. Подробнее о каждом модуле и полезных навыках, которые вы освоите в модуле, мы рассказали ниже. В этом модуле вы изучите: ▶...

Вы научитесь работать с распределенными файловыми системами, познакомитесь с экосистемой Hadoop, разберетесь с оптимизацией MapReduce вычислений и работой с Hive. Часть 1. HDFS, Map Reduce, Hive В этом модуле вы изучите: ▶ вводная часть: знакомство (задачи, оценки, дедлайны), подробности...

Кому подойдет этот курс Разработчикам Вы программируете, но хотите расширить профессиональные возможности и получить практические навыки работы с большими данными? На курсе вы научитесь работать с Hadoop, MapReduce, Hive, Spark, Kafka, Cassandra и будете выполнять задания на реальном кластере...

На протяжении этой части курса вы будете работать со Spark: от основных терминов и RDD до Spark DataFrames и оптимизации Spark вычислений. В этом модуле вы изучите: ▶ cхема выполнения задачи в Spark; ▶ основные термины Spark (job, task, stage); ▶ представление вычислений в виде графа. Spark...

Программа "Профессия Data Engineer": 1 курс "Старт в Data Engineering" - Автоматизируете процессы сбора, очистки и анализа реальных данных без разработчиков (ETL) - Освоите инструменты: Git, SQL, базовый Python - Научитесь работать с хранилищами данных (DWH) 2 курс "Python: основы языка" -...

Машинное обучение с BigData Team. Практический курс по Machine Learning целиком Вы научитесь строить модели машинного обучения, решать задачи регрессии и классификации, создавать ансамбли решающих деревьев, а аббревиатуры RF, GBDT, XGBoost и LightGBM станут родными и понятными. Вы...

О книге: Большие данные — ключевой элемент современного информационного пространства. Практически все, что делает отдельный человек, группы людей, человечество в целом, компании из разных сфер бизнеса, правительства, происходит в рамках глобального информационного поля. Наша работа, наш досуг...

Промышленная разработка на Python с BigData Team. Часть 3. Лучшие практики написания и поддержки Web-приложений Вы познакомитесь с самыми используемыми паттернами проектирования, напишете собственный Web-сервис и научитесь его деплоить и тестировать. 3.1 Паттерны проектирования 3.2...

Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science Продолжительность - 16 месяцев (16 частей) Часть 1. - Ведение в профессию - Базовый Python Часть 2. - Предобработка данных Часть 3. - Исследовательский анализ данных -...

Big data - инструменты, подходы и методы обработки огромных объёмов данных. По сути это альтернатива традиционным системам обработки данных. Если вам требуется общее расширение кругозора в теме технологий работы с данными и необходимость апгрейда на текущем месте работы, курс даст возможность...

О школе Mathshub — международная школа анализа данных и разработки. Команда Mathshub за 3 года обучила уже более 4 тысяч студентов. Наши образовательные программы подходят как новичкам, так и опытным специалистам. Цель наших программ – добиться того, чтобы каждый выпускник получил работу после...

Специалист по Data Science структурирует и анализирует большие объёмы данных, применяет машинное обучение для предсказания событий и обнаружения неочевидных закономерностей. Помогает создавать и улучшать продукты в бизнесе, промышленности и науке. Мы хотим научить вас основным инструментам этой...

О курсе: Этот курс — программа проекта Stepik Academy. Перед покупкой посмотрите, пожалуйста, информацию и программу на сайте проекта. В повседневной жизни мы пользуемся самыми разнообразными цифровыми устройствами, и каждый из нас генерирует огромные объемы информации за свою жизнь. И для...

Промышленная разработка на Python с BigData Team. Часть 1. Лучшие практики написания и тестирования консольных приложений Вы познакомитесь с типами тестирования, научитесь пользоваться библиотекой pytest, создавать консольные приложения с argparse, отличать юникод от кодировки и правильно с...

Промышленная разработка на Python с BigData Team. Часть 2. Автоматизация работы с Web и тестирование сложных зависимостей Вы научитесь настраивать логирование, работать с имитацией поведения внешних ресурсов, использовать Web-технологии для автоматического парсинга интернет-страниц. 2.1...

Описание книги: Data Science – это совокупность понятий и методов, позволяющих придать смысл и понятный вид огромным объемам данных. Каждая из глав этой книги посвящена одному из самых интересных аспектов анализа и обработки данных. Вы начнете с теоретических основ, затем перейдете к...

Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science Содержание: Начало анализа данных Основы машинного обучения Вспомогательные инструменты Data Science Математика машинного обучения Системы хранения данных Практика...

Научитесь строить пайплайны данных в реальном времени В современных компаниях накапливается большой объем данных, из которых можно извлекать важную аналитику, строить гипотезы или прогнозные модели. Data Engineer — это специалист, который собирает данные из разных источников, очищает их и...

Как стать специалистом по data science плюс Расширенная программа для тех, кто хочет построить карьеру в сфере data science

Что делают инженеры данных: Строят пайплайны Это первая задача инженера, когда он начинает продумывать архитектуру данных. Специалист решает, какие этапы работы с данными нужны, и определяет необходимые инструменты. Проектируют безопасные хранилища Инженер оценивает данные компании и...