How to load data into PostgreSQL using Python | Your first ETL pipeline | Data Engineering Tutorial
What are the basics you should cover when you build an ETL pipeline?
?In this episode I am showing you how an ETL process would look like. We are going to load the data from Task 8 and load it into our local PostgreSQL database.
✨If you are new here:
This is a public and weekly online Python Class which you can attend as well. All you have to do is to join our Discord server if you are interested! Links down below :)
==== CLASS STARTS AT 4:30 ====
⏱ Timestamps
0:00 Intro & Agenda
1:00 Recap - How to start web scraping using DEV TOOLS
4:30 Example how my ETL pipeline would look like
9:30 What is a logger?
17:00 Test the database connection
27:25 How to create a database table based on your data
42:00 How to extract the .json data and load into PostgreSQL
========================
If you want to learn how to become a programmer and build automated software, this video is for you. Feel free to drop them in the comments or join our socials!
========================
?♂️Community Discord:
https://discord.gg/selfdev
https://theselfdev.com
blog.theselfdev.com
pomo.theselfdev.com
? Instagram:
https://instagram.com/self.devs
? Connect with me:
Instagram - https://www.instagram.com/long.integer/
Twitch - https://twitch.tv/longlikeshort
Twitter - https://twitter.com/longinteger017
BGM: https://www.youtube.com/watch?v=eCXDM1-dGNY
Subscriber: 1174
#dataengineering #pythontutorial #dataanalysis
?The FASTEST way to become a Data Engineer:
https://www.youtube.com/watch?v=A513spqCGqA
?Knowing this about DATA will shock you:
https://www.youtube.com/watch?v=o8yIo37R1XA&list=PLnylL1gKkCV5pb2E6Jo591One6wcW9kvy&index=4
?FREE Python Programming Class:
https://www.youtube.com/watch?v=OucYXP931UA&list=PLnylL1gKkCV4ai5aDKH1GoOhtjDh7pWXf
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «How to load data into PostgreSQL using Python | Your first ETL pipeline | Data Engineering Tutorial», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.