YTsaurus SPYT: помогаем планировщику Apache Spark быть ещё эффективнее / Алексей Шишкин (Яндекс)
1 728
14.8
Онтико83.1 тыс
Следующее
272 дня – 2 6553:12:05Популярные
77 дней – 1 93554:19
77 дней – 12049:45Опубликовано 1 сентября 2023, 10:13
Приглашаем на конференцию Saint HighLoad++ 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге!
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
--------
--------
Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad++ 2023
Генеральный партнер конференции Garage Eight.
Презентация и тезисы:
highload.ru/spb/2023/abstracts...
При обработке больших данных с помощью Apache Spark наиболее трудозатратным этапом считается Shuffle stage, когда вся информация активно перемещается. А возникает он в вашем плане, как только вы задумываетесь о группировке или джойнах. Но всегда ли он необходим? Нет!
...
--------
Нашли ошибку в видео? Пишите нам на support@ontico.ru
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
--------
--------
Профессиональная конференция разработчиков высоконагруженных систем Saint HighLoad++ 2023
Генеральный партнер конференции Garage Eight.
Презентация и тезисы:
highload.ru/spb/2023/abstracts...
При обработке больших данных с помощью Apache Spark наиболее трудозатратным этапом считается Shuffle stage, когда вся информация активно перемещается. А возникает он в вашем плане, как только вы задумываетесь о группировке или джойнах. Но всегда ли он необходим? Нет!
...
--------
Нашли ошибку в видео? Пишите нам на support@ontico.ru
Свежие видео
4 дня – 13 7210:58
10 дней – 13 0130:59
12 дней – 167 65311:53
12 дней – 119 41629:37Случайные видео
170 дней – 1 4570:48
247 дней – 8 6870:53
17.11.22 – 8 8267:17
06.07.22 – 4 4461:08
15.10.21 – 89814:59
13.01.20 – 12 2491:38
4 дня – 3 8390:11
4 дня – 22756:15
7 дней – 301:12
10 дней – 5 4650:59
10 дней – 8 3671:00
11 дней – 10 2940:59
11 дней – 1 7660:00
2 дня – 5 19051:47