Apache Airflow for Data Science #3 - How to work With Databases (Postgres)
Learn how to extract data from Postgres with Postgres Hook, how to run SQL statements through Airflow, and how to insert data from a CSV file with the Bash operator - all of that in a single DAG (data pipeline).
ARTICLE: https://betterdatascience.com/apache-airflow-postgres-database
Dataset: https://gist.githubusercontent.com/netj/8836201/raw/6f9306ad21398ea43cba4f7d537619d0e07d5ae3/iris.csv
00:00 Introduction
00:40 Dataset and database configuration
02:28 Setup a Postgres connection in Airflow
04:09 Writing the Airflow DAG
08:50 How to run the DAG through Airflow
09:34 Outro
FOLLOW BETTER DATA SCIENCE
Website: https://betterdatascience.com
Medium: https://medium.com/@radecicdario
LinkedIn: https://www.linkedin.com/in/darioradecic
FREE “LEARN DATA SCIENCE MASTERPLAN” EBOOK
http://eepurl.com/g7Ot3L
GEAR I USE
M1 Pro MacBook Pro 16”: https://amzn.to/3flD5wb
LG 27UL850 4K (Monitor): https://amzn.to/34QYVpq
Logitech MX Keys (Keyboard): https://amzn.to/3tH2V6r
Logitech MX Master 3 (Mouse): https://amzn.to/3Kd2Vk2
Rode NT-USB (Microphone): https://amzn.to/3FmIgq9
Audio Technica ATH-M40X (Headphones): https://amzn.to/3Fqj4iM
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Apache Airflow for Data Science #3 - How to work With Databases (Postgres)», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.