Synapse Spark: Add External Python Libraries
Azure Synapse Spark pools come with all the Anaconda libraries installed, but you will likely find a need for additional libraries or different versions of libraries. It is fairly simple when the required libraries exist in a repository like Conda or PyPI (Python Packaging Index). If you build your own Python WHL file (or download one) then you can add those with just a few steps. In this video I show you how to add Python libraries to your Spark pool either with session packages or workspace packages.
Check out a written tutorial here: https://dustinvannoy.com/2022/01/20/azure-synapse-spark-external-python-packages/
More from Dustin:
Website: https://dustinvannoy.com
LinkedIn: https://www.linkedin.com/in/dustinvannoy
Twitter: https://twitter.com/dustinvannoy
Github: https://github.com/datakickstart
CHAPTERS:
0:00 Intro
0:42 Example setup
3:00 Session Package install
4:48 environment.yml file
5:40 Workspace package install
9:23 Build Python WHL
11:32 Monitor library install
13:04 Tips
14:31 Outro
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Synapse Spark: Add External Python Libraries», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.