Что такое Apache Spark

Подписаться 7 тыс.

Просмотров 17 тыс.

50% 1

В данном видео мы знакомимся с фреймворком для параллельной обработки данных Apache Spark. На конкретном примере разбираем возможности Apache Spark по работе с источниками данных (файлами и RDBMS), трансформации данных (как с помощью Structured API, так на Spark SQL).
Курс проводится только в специализированном учебном центре «Школа Больших Данных»
По вопросам обучения на курсах машинного обучения приглашаем в нашу «Школа Больших Данных»
Обращаться по телефону:
+7 (495) 41-41-121
+7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал: t.me/BigDataSc...
Facebook: / bigdataschoolru
Вконтакте: bdschoo...
LinkedIn: / bigdataschoolru
Twitter: / bigdataschoolr
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - www.bigdatasch...

Опубликовано:

1 окт 2024

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист

Посмотреть позже

Комментарии : 19

@PizdaRusni2023 3 года назад

Про спарк ни слова... плохо очень.

@2LazySnake 4 года назад

Это одно из лучших введений в тему, которое я когда-либо видел.

@BigDataSchool 4 года назад

Спасибо за комментарий, приходите к нам на курсы или просто подписывайтесь :-)

@СтепанЦыбин-ю9д 3 года назад

Жаль в плейлистах нет нумерации уроков. Иногда затруднительно найти первое видео и дальше смотреть по очереди.

@uhi2106 2 года назад

пощупать руками это реально бесценно. с примером!

@SomeGuy-q1d 4 года назад

Супер пример!

@ВасилийТучкин-ф3л Год назад

ужасное объяснение

@eleberet Год назад

че так

@Михаил-ц7ч1ж 4 года назад

Добрый день! Скажи, пожалуйста, где можно скачать код с исходные данные для изучения в живую? Заранее благодарен!

@ViTa-ol8kt Год назад

иииии... датасеты разные)

@powerhead 3 года назад

Круто

@UraGagarin1961 2 года назад

Класс

@AlexanderLetetski Год назад

Звук ❤

@igrinito 3 года назад

Добрый день. очень полезное виедо спасибо. Подскжите пожалуйста, а почему дата сайнтист не может сам преобразовать эти данные как ему надо, через тот же пандас скажем ?

@michaelkorolev9055 3 года назад

Пандас - одномашинный вариант обработки, по определению "большие данные" так не обработать. Spark работает на кластере, ему любые данные "по плечу". Понятно, что в видео была "игрушечная" задачка, в жизни задачи куда-как больше и сложнее.