Getting Started with Dask: A Dask Setup Guide
This video is a brief introduction to getting started with Dask and setting up Dask by Matt Rocklin. It shows you how to set up a scheduler and workers.
What is Dask?
Dask is a centrally managed, distributed computing platform.
Dask can scale to a cluster of 100s of machines. It is resilient, elastic, data local, and low latency.
This ease of transition between single-machine to moderate cluster enables users to both start simple and grow when necessary.
Getting Started with Dask
Dask can be deployed in a variety of ways, manually or in an automated way. The video covers the simplest situation and gets increasingly more complex.
We can think of Dask at a high and a low level
High level collections: Dask provides high-level Array, Bag, and DataFrame collections that mimic NumPy, lists, and Pandas but can operate in parallel on datasets that don’t fit into memory. Dask’s high-level collections are alternatives to NumPy and Pandas for large datasets.
Low Level schedulers: Dask provides dynamic task schedulers that execute task graphs in parallel. These execution engines power the high-level collections mentioned above but can also power custom, user-defined workloads. These schedulers are low-latency (around 1ms) and work hard to run computations in a small memory footprint. Dask’s schedulers are an alternative to direct use of threading or multiprocessing libraries in complex cases or other task scheduling systems like Luigi or IPython parallel.
Different users operate at different levels but it is useful to understand both.
Share your feedback with us in the comments and let us know:
- Did you find the video helpful?
- How are you using Dask?
Learn more at dask.org
KEY MOMENTS
00:00 - Intro
00:30 - Simplest Setup
02:30 - Attaching a Client to the Scheduler
03:16 - Using Tools for Setup
04:02 - Using Python
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Getting Started with Dask: A Dask Setup Guide», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.