Python web scraping
Timestamp
00:00:00 - Introduction
00:00:37 - Blog overview
00:01:55 - What will you learn
Theoretical knowledge
00:03:37 - Website analysis
00:04:15 - robots.txt detail analysis
00:06:07 - Understanding daily archives
00:07:36 - How to find the daily archive
00:08:46 - Finding the range of start URLs
00:10:37 - Horizontal crawling
Playing around with XPath
00:11:20 - Find 'next page' crawling expression
00:12:48 - Scrapy library installation
00:13:55 - Playing with Scrapy shell
00:15:25 - 'Next page' XPath formation
New Scrapy project
00:20:15 - New Scrapy project
00:21:15 - About Spider
00:23:00 - Project component details
New Spider
00:23:49 - Create a Spider
00:24:46 - Spider component details
00:25:08 - Domain
00:25:35 - Start URLs
00:26:52 - First rule with an expression of extraction
00:29:10 - Second rule with an expression of extraction
00:32:50 - Structured field items
00:33:39 - Create Header and Content field item
00:34:40 - 1st structured expression
00:38:05 - 2nd structured expression
Project changes
00:41:15 - Add Unicode in settings
00:41:30 - Spider crawling flow
00:42:46 - Execute the Spider
00:44:09 - Debugging Errors, Errors and Errors
00:49:36 - Root cause analysis
00:50:10 - Finally executing...
00:52:14 - Expanding range of start URL
00:53:53 - Crawler validation
Rewind
00:54:58 - Data and NLP
00:55:31 - Summary
00:55:56 - Future work
00:57:19 - Extracted data
00:58:30 - Thank you
Website: https://www.soumendrak.com
Narrator: Soumendra Kumar Sahoo
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Python web scraping», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.