Глава 10. Анализ Больших данных с применением Dask
Содержание
Глава 10. Анализ Больших данных с применением Dask
Разбираемся с моделью исполнения Dask
Базовый уровень pandas для сопоставления
Разработка решения кадра данных на основе Dask
Вычислительная стоимость операций Dask
Разбиение данных на разделы для обработки
Сохранение промежуточных вычислений
Реализации алгоритмов поверх распределённых кадров данных
Восстановление данных из разделов
Сохранение распределённых кадров данных
Применение распределённого планировщика Dask
Архитектура dask.distributed
Исполнение кода при помощи dask.distributed
Работа с наборами данных больше размера памяти
Разбираемся с моделью исполнения Dask
Базовый уровень pandas для сопоставления
Разработка решения кадра данных на основе Dask
Вычислительная стоимость операций Dask
Разбиение данных на разделы для обработки
Сохранение промежуточных вычислений
Реализации алгоритмов поверх распределённых кадров данных
Восстановление данных из разделов
Сохранение распределённых кадров данных
Применение распределённого планировщика Dask
Архитектура dask.distributed
Исполнение кода при помощи dask.distributed
Работа с наборами данных больше размера памяти