[Udemy] The Ultimate Web Scraping With Python Bootcamp, 2023 (Andy Bek)

​

Научитесь извлекать данные из Интернета с помощью python всего за один курс, охватывающий selectolax, драматург, скрап и многое другое.

Спойлер: Описание:

Добро пожаловать на Ultimate Web Scraping With Python Bootcamp, единственный курс, который вам нужен , чтобы пройти путь от полного новичка в python до очень компетентного веб-парсера.

Веб-скрапинг — это процесс программного извлечения данных из Интернета. Агенты парсинга посещают веб-ресурс, извлекают из него контент, а затем обрабатывают полученные данные, чтобы разобрать какую-то конкретную интересующую информацию.

Парсинг — это навык программирования, который обеспечивает немедленную обратную связь и может использоваться для автоматизации широкого спектра задач по сбору и обработке данных.

В течение следующих 17+ часов мы методично рассмотрим все, что вам нужно знать для написания агентов парсинга веб-страниц на python.

Этот буткемп состоит из трех частей с возрастающей сложностью, призванных помочь вам постепенно развивать свои навыки .

Часть I - Начало

Мы начнем с понимания того, как работает сеть, более внимательно изучив HTTP, ключевой протокол связи уровня приложений в современной сети. Далее мы изучим HTML , CSS и JavaScript с первых принципов, чтобы глубже понять, как создаются веб-сайты. Наконец, мы узнаем, как использовать python для отправки HTTP-запросов и анализа полученных HTML, CSS и JavaScript для извлечения необходимых данных. Наша цель в первой части курса — создать прочную основу как для парсинга веб-страниц, так и для Python, а также применить эти навыки на практике, создав функциональные парсеры веб-страниц с нуля .

Выбранные темы включают:

• подробный обзор цикла запрос-ответ
• понимание пользовательских агентов, глаголов HTTP, заголовков и статусов
• понимание того, почему пользовательские заголовки часто можно использовать для обхода платного доступа
• освоение библиотеки запросов для работы с HTTP в python
• что означает безгражданство и как работают файлы cookie
• изучение роли прокси в современных веб-архитектурах
• освоение BeautifulSoup для парсинга и извлечения данных

Часть II - Уточнить
Во второй части курса мы будем опираться на уже заложенный фундамент, чтобы исследовать более сложные темы парсинга веб-страниц. Мы узнаем, как очищать динамические веб-сайты , которые используют JavaScript для отображения своего контента, настроив Microsoft Playwright в качестве безголового браузера для автоматизации этого процесса. Мы также узнаем, как идентифицировать и эмулировать вызовы API для извлечения данных с веб-сайтов, которые не имеют официально общедоступных API. Наши проекты в этом разделе будут включать парсер изображений, который может загружать определенное количество изображений с высоким разрешением по заданному ключевому слову, а также еще один агент парсинга, который извлекает цену и содержание видеоигр со скидкой с динамически отображаемого веб-сайта.

Темы включают:

• выявление и использование скрытых API и понимание преимуществ, которые они предлагают
• легко эмулировать заголовки, файлы cookie и содержимое тела
• автоматическое создание кода Python из перехваченных запросов API с использованием postman и httpie
• работа с высокопроизводительной библиотекой синтаксического анализа selectolax
• освоение CSS-селекторов
• представляет Microsoft Playwright для автономного просмотра и динамического рендеринга

Часть III - Мастер

В заключительной части курса мы познакомимся со scrapy. Это даст нам отличный, проверенный временем фреймворк для создания более сложных и надежных парсеров. Мы узнаем, как настроить скраппинг в виртуальной среде и как создавать пауков и конвейеры для извлечения данных с веб-сайтов в различных форматах . Узнав, как использовать scrapy, мы затем изучим, как интегрировать его с Playwright , чтобы решить задачу парсинга динамических веб-сайтов прямо из scrapy. Мы завершим этот раздел созданием агента парсинга, который выполняет пользовательский код JavaScript, прежде чем возвращать полученный HTML-код в парсинг.

Некоторые темы из этого раздела:

• изучение того, как настроить scrapy и изучить его интерфейс командной строки (« инструмент scrapy »)
• динамически исследовать объекты ответа с помощью оболочки scrapy
• понимать и определять схемы элементов и загружать данные с помощью загрузчиков элементов и процессоров ввода/вывода
• интегрировать Playwright в scrapy для работы с динамически отображаемыми сайтами JavaScript
• напишите PageMethods , чтобы указать очень конкретные инструкции для безголового браузера прямо из scrapy
• определить пользовательские конвейеры для сохранения в базы данных SQL и настраиваемые форматы вывода

В этом учебном курсе я проведу вас шаг за шагом через увлекательные видеолекции и научу вас всему, что вам нужно знать, чтобы начать парсинг веб-страниц в python.

К концу этого курса у вас будет полный набор инструментов для концептуализации и внедрения агентов очистки для любого веб-сайта, который вы можете себе представить.

Чему вы научитесь

• Понять основы парсинга веб-страниц в Python с нуля.
• Извлекайте информацию со статических и динамических веб-сайтов и извлекайте ее в различные форматы.
• Перехватывайте и эмулируйте скрытые API, чтобы найти высокоэффективные альтернативы получению ваших данных.
• Освоить библиотеку запросов для работы с HTTP
• Анализируйте и извлекайте содержимое из HTML с помощью BeautifulSoup, Selectolax и Microsoft Playwright.
• Освойте сложные селекторы CSS, включая комбинаторы потомков, дочерних элементов, родственных комбинаторов.
• Понимать, как работает Интернет, включая HTTP, HTML, CSS и JavaScript.
• Создавайте сканеры scrapy и практикуйте элементы, загрузчики элементов и настраиваемые конвейеры.
• Интегрируйте scrapy с playwright для высокопроизводительного и точно настроенного динамического сканирования веб-сайтов.
• Практика обработки и извлечения данных в различные форматы, включая csv, json, xml и SQL.

Для кого этот курс:

• Всем, кто хочет научиться программно собирать данные из Интернета.
• Учащиеся, имеющие или не имеющие опыта веб-скрейпинга, желающие повысить свой уровень
• Полные новички без опыта

Требования

• Опыт программирования не требуется - я научу вас всему, что вам нужно знать
• Платное программное обеспечение не требуется — мы будем использовать библиотеки Python с открытым исходным кодом.
• Компьютер с выходом в интернет
• Подготовьтесь к изучению реальных навыков, которые вы могли бы сразу применить на практике

Спойлер: Содержание складчины (файлы и папки)

01 Introduction
001 Prerequisites.mp4 [5m 905k 987]
001 Prerequisites_en.srt [1k 922]
001 Prerequisites_en.vtt [1k 722]
002 A Useful Mental Model.mp4 [15m 450k 529]
002 A Useful Mental Model_en.srt [4k 770]
002 A Useful Mental Model_en.vtt [4k 345]
003 All Code Resources.html [593]
003 code-resources.zip [342k 758]

02 The HTTP Protocol
001 What Is HTTP.mp4 [7m 895k 697]
001 What Is HTTP_en.srt [3k 183]
001 What Is HTTP_en.vtt [2k 902]
002 The Request-Response Cycle.mp4 [27m 250k 564]
002 The Request-Response Cycle_en.srt [3k 693]
002 The Request-Response Cycle_en.vtt [3k 349]
003 Extra But, This Website Remembers Me.mp4 [16m 411k 447]
003 Extra But, This Website Remembers Me_en.srt [6k 179]
003 Extra But, This Website Remembers Me_en.vtt [5k 664]
004 User-Agents.mp4 [25m 653k 103]
004 User-Agents_en.srt [3k 776]
004 User-Agents_en.vtt [3k 423]
005 HTTP Verbs.mp4 [11m 56k 845]
005 HTTP Verbs_en.srt [3k 33]
005 HTTP Verbs_en.vtt [2k 779]
006 Status Codes.mp4 [21m 629k 14]
006 Status Codes_en.srt [7k 363]
006 Status Codes_en.vtt [6k 659]
007 Headers.mp4 [17m 961k 902]
007 Headers_en.srt [4k 331]
007 Headers_en.vtt [3k 897]
008 Extra Headers Do Lie.mp4 [26m 620k 974]
008 Extra Headers Do Lie_en.srt [6k 318]
008 Extra Headers Do Lie_en.vtt [5k 686]
009 Proxies.mp4 [24m 295k 445]
009 Proxies_en.srt [6k 611]
009 Proxies_en.vtt [6k 60]

03 HTML, CSS, And JavaScript
001 The Ingredients.mp4 [35m 483k 681]
001 The Ingredients_en.srt [6k 618]
001 The Ingredients_en.vtt [6k 22]
002 Markup.mp4 [30m 905k 597]
002 Markup_en.srt [9k 732]
002 Markup_en.vtt [8k 777]
003 Attributes.mp4 [28m 968k 848]
003 Attributes_en.srt [6k 914]
003 Attributes_en.vtt [6k 201]
004 Presentation.mp4 [22m 416k 29]
004 Presentation_en.srt [5k 635]
004 Presentation_en.vtt [5k 39]
005 Some More Rules.mp4 [26m 217k 311]
005 Some More Rules_en.srt [5k 261]
005 Some More Rules_en.vtt [4k 692]
006 Behaviour.mp4 [46m 897k 938]
006 Behaviour_en.srt [9k 791]
006 Behaviour_en.vtt [8k 716]
007 More JavaScript.mp4 [25m 586k 575]
007 More JavaScript_en.srt [5k 35]
007 More JavaScript_en.vtt [4k 457]
008 JavaScript In Web Scraping.mp4 [57m 754k 199]
008 JavaScript In Web Scraping_en.srt [8k 553]
008 JavaScript In Web Scraping_en.vtt [7k 795]
009 Comments.mp4 [26m 997k 888]
009 Comments_en.srt [5k 540]
009 Comments_en.vtt [4k 998]
010 Embedded.mp4 [32m 378k 192]
010 Embedded_en.srt [6k 226]
010 Embedded_en.vtt [5k 531]

04 Web Requests In Python
001 Urllib.mp4 [28m 626k 370]
001 Urllib_en.srt [6k 105]
001 Urllib_en.vtt [5k 482]
001 urrlib.request-documentation.url [98]
002 Requests.mp4 [29m 1k 965]
002 Requests_en.srt [6k 449]
002 Requests_en.vtt [5k 826]
002 Requests-library-documentation.url [65]
003 Setting Headers.mp4 [32m 436k 560]
003 Setting Headers_en.srt [8k 249]
003 Setting Headers_en.vtt [7k 437]
004 Query Parameters.mp4 [50m 261k 149]
004 Query Parameters_en.srt [12k 607]
004 Query Parameters_en.vtt [11k 252]
005 Authentication And Authorization.mp4 [26m 167k 790]
005 Authentication And Authorization_en.srt [7k 753]
005 Authentication And Authorization_en.vtt [6k 968]
006 Aside From GET.mp4 [16m 104k 296]
006 Aside From GET_en.srt [5k 168]
006 Aside From GET_en.vtt [4k 599]
006 Postmans-HTTPBin-Swagger.url [43]
007 POSTing Data.mp4 [31m 913k 572]
007 POSTing Data_en.srt [7k 338]
007 POSTing Data_en.vtt [6k 544]
external-links.txt [240]

05 Parsing And Extraction
001 BeautifulSoup.mp4 [46m 633k 461]
001 BeautifulSoup_en.srt [9k 333]
001 BeautifulSoup_en.vtt [8k 358]
001 BeautifulSoups-Documentation.url [77]
002 Tags.mp4 [20m 633k 520]
002 Tags_en.srt [6k 466]
002 Tags_en.vtt [5k 807]
003 Parents, Children, And Descendants.mp4 [29m 918k 549]
003 Parents, Children, And Descendants_en.srt [9k 164]
003 Parents, Children, And Descendants_en.vtt [8k 239]
004 Siblings.mp4 [7m 571k 596]
004 Siblings_en.srt [2k 915]
004 Siblings_en.vtt [2k 598]
005 Extracting Text.mp4 [24m 985k 646]
005 Extracting Text_en.srt [7k 518]
005 Extracting Text_en.vtt [6k 751]
006 All Strings.mp4 [11m 74k 926]
006 All Strings_en.srt [3k 671]
006 All Strings_en.vtt [3k 318]
007 Search.mp4 [57m 22k 644]
007 Search_en.srt [13k 431]
007 Search_en.vtt [11k 946]
008 Challenge.mp4 [7m 749k 716]
008 Challenge_en.srt [1k 733]
008 Challenge_en.vtt [1k 587]
009 Solution.mp4 [55m 791k 566]
009 Solution_en.srt [10k 636]
009 Solution_en.vtt [9k 221]
010 Solution Refinement.mp4 [64m 980k 844]
010 Solution Refinement_en.srt [13k 565]
010 Solution Refinement_en.vtt [11k 860]
011 An Extra pandas.mp4 [55m 188k 855]
011 An Extra pandas_en.srt [13k 83]
011 An Extra pandas_en.vtt [11k 608]
012 Functional Search Patterns.mp4 [32m 97k 596]
012 Functional Search Patterns_en.srt [9k 618]
012 Functional Search Patterns_en.vtt [8k 623]
013 Text Search.mp4 [37m 548k 695]
013 Text Search_en.srt [10k 14]
013 Text Search_en.vtt [8k 959]
014 Searching By CSS.mp4 [40m 761k 779]
014 Searching By CSS_en.srt [8k 167]
014 Searching By CSS_en.vtt [7k 355]
015 Just One Tag.mp4 [12m 215k 494]
015 Just One Tag_en.srt [3k 482]
015 Just One Tag_en.vtt [3k 129]
external-links.txt [89]

06 Project 1 - Portfolio Valuation With Google Finance
001 Google-Finance.url [54]
001 Scope Statement.mp4 [19m 411k 751]
001 Scope Statement_en.srt [3k 394]
001 Scope Statement_en.vtt [3k 95]
002 An Extra Some Finance Concepts.mp4 [26m 812k 239]
002 An Extra Some Finance Concepts_en.srt [4k 885]
002 An Extra Some Finance Concepts_en.vtt [4k 460]
003 Parsing Price.mp4 [90m 589k 635]
003 Parsing Price_en.srt [14k 781]
003 Parsing Price_en.vtt [13k 6]
004 Non-USD Prices.mp4 [71m 460k 441]
004 Non-USD Prices_en.srt [10k 125]
004 Non-USD Prices_en.vtt [8k 940]
005 Adding Structure With Dataclasses.mp4 [57m 91k 495]
005 Adding Structure With Dataclasses_en.srt [10k 243]
005 Adding Structure With Dataclasses_en.vtt [9k 158]
005 Pythons-Data-Classes-Documentation.url [73]
006 Position And Portfolio.mp4 [62m 47k 427]
006 Position And Portfolio_en.srt [10k 22]
006 Position And Portfolio_en.vtt [8k 847]
007 Tabular Display.mp4 [93m 727k 41]
007 Tabular Display_en.srt [14k 668]
007 Tabular Display_en.vtt [12k 903]
007 The-Tabulate-Library.url [57]
external-links.txt [204]

07 APIs The Hidden Gems
001 Befriend The Network Tab.mp4 [58m 911k 373]
001 Befriend The Network Tab_en.srt [6k 580]
001 Befriend The Network Tab_en.vtt [5k 957]
002 Case Study Coffee Shop Locations.mp4 [65m 84k 288]
002 Case Study Coffee Shop Locations_en.srt [10k 794]
002 Case Study Coffee Shop Locations_en.vtt [9k 449]
003 The Advantages Of APIs.mp4 [41m 165k 142]
003 The Advantages Of APIs_en.srt [8k 785]
003 The Advantages Of APIs_en.vtt [7k 870]
004 Full Header Emulation.mp4 [53m 198k 822]
004 Full Header Emulation_en.srt [7k 128]
004 Full Header Emulation_en.vtt [6k 388]
005 An Extra Postman.mp4 [25m 496k 444]
005 An Extra Postman_en.srt [4k 811]
005 An Extra Postman_en.vtt [4k 242]
005 Postman.url [47]
006 Code Generation.mp4 [54m 553k 91]
006 Code Generation_en.srt [8k 494]
006 Code Generation_en.vtt [7k 479]
007 Challenge.mp4 [26m 825k 936]
007 Challenge_en.srt [4k 41]
007 Challenge_en.vtt [3k 643]
008 Solution Interacting With The API.mp4 [66m 508k 646]
008 Solution Interacting With The API_en.srt [8k 489]
008 Solution Interacting With The API_en.vtt [7k 324]
009 Solution Processing The Data.mp4 [53m 800k 23]
009 Solution Processing The Data_en.srt [8k 623]
009 Solution Processing The Data_en.vtt [7k 518]
010 Solution Adding Geocode.mp4 [82m 357k 412]
010 Solution Adding Geocode_en.srt [12k 306]
010 Solution Adding Geocode_en.vtt [10k 691]
external-links.txt [38]

08 Selectolax And Advanced CSS Selectors
001 Introduction.mp4 [8m 122k 167]
001 Introduction_en.srt [2k 20]
001 Introduction_en.vtt [1k 829]
002 The-Selectolax-Library.url [78]
002 What Is selectolax.mp4 [46m 630k 628]
002 What Is selectolax_en.srt [10k 718]
002 What Is selectolax_en.vtt [9k 453]
003 CSS Combinators.mp4 [50m 839k 391]
003 CSS Combinators_en.srt [10k 18]
003 CSS Combinators_en.vtt [8k 953]
004 Sibling Combinators.mp4 [49m 996k 403]
004 Sibling Combinators_en.srt [8k 966]
004 Sibling Combinators_en.vtt [7k 991]
005 Selector Types.mp4 [32m 615k 784]
005 Selector Types_en.srt [9k 447]
005 Selector Types_en.vtt [8k 482]
external-links.txt [84]

09 Project 2 - Image Scraper
001 Scope Statement.mp4 [44m 749k 55]
001 Scope Statement_en.srt [4k 350]
001 Scope Statement_en.vtt [3k 934]
002 Prospecting.mp4 [125m 587k 332]
002 Prospecting_en.srt [9k 386]
002 Prospecting_en.vtt [8k 201]
003 Scraping HTML.mp4 [46m 955k 84]
003 Scraping HTML_en.srt [9k 77]
003 Scraping HTML_en.vtt [7k 942]
004 Filtering Relevant URLs.mp4 [92m 953k 69]
004 Filtering Relevant URLs_en.srt [10k 815]
004 Filtering Relevant URLs_en.vtt [9k 480]
005 Extracting High-Res Image URLs.mp4 [122m 401k 106]
005 Extracting High-Res Image URLs_en.srt [13k 319]
005 Extracting High-Res Image URLs_en.vtt [11k 554]
006 Saving The Images.mp4 [53m 907k 599]
006 Saving The Images_en.srt [7k 102]
006 Saving The Images_en.vtt [6k 290]
007 Stepping It Up With Logging.mp4 [96m 540k 201]
007 Stepping It Up With Logging_en.srt [10k 514]
007 Stepping It Up With Logging_en.vtt [9k 209]
008 Back To The API.mp4 [53m 571k 749]
008 Back To The API_en.srt [7k 121]
008 Back To The API_en.vtt [6k 196]
009 Filtered Canonical URLs.mp4 [84m 743k 651]
009 Filtered Canonical URLs_en.srt [8k 744]
009 Filtered Canonical URLs_en.vtt [7k 559]
010 Pagination Prospecting.mp4 [39m 152k 586]
010 Pagination Prospecting_en.srt [5k 540]
010 Pagination Prospecting_en.vtt [4k 881]
011 Wrapping Up.mp4 [99m 838k 69]
011 Wrapping Up_en.srt [15k 484]
011 Wrapping Up_en.vtt [13k 499]

10 Tackling JavaScript With Microsoft PlayWright
001 What You See vs. What You Get.mp4 [57m 592k 247]
001 What You See vs. What You Get_en.srt [10k 678]
001 What You See vs. What You Get_en.vtt [9k 543]
002 Rendering JavaScript.mp4 [35m 81k 24]
002 Rendering JavaScript_en.srt [6k 140]
002 Rendering JavaScript_en.vtt [5k 589]
003 PlayWright Over Selenium.mp4 [18m 896k 376]
003 PlayWright Over Selenium_en.srt [5k 832]
003 PlayWright Over Selenium_en.vtt [5k 344]
003 Playwright.url [63]
004 Case Study Show Me The Money.mp4 [71m 72k 979]
004 Case Study Show Me The Money_en.srt [12k 330]
004 Case Study Show Me The Money_en.vtt [10k 825]
external-links.txt [57]

11 Project 3 - Building A Configurable Scraping Pipeline
001 Scope Statement.mp4 [45m 633k 258]
001 Scope Statement_en.srt [7k 852]
001 Scope Statement_en.vtt [7k 112]
001 Videogame-Discounts.url [62]
002 Initial Setup.mp4 [32m 801k 782]
002 Initial Setup_en.srt [5k 758]
002 Initial Setup_en.vtt [5k 85]
003 Fully Loaded Site.mp4 [31m 922k 843]
003 Fully Loaded Site_en.srt [4k 961]
003 Fully Loaded Site_en.vtt [4k 446]
004 Selecting Game Containers.mp4 [74m 186k 648]
004 Selecting Game Containers_en.srt [8k 364]
004 Selecting Game Containers_en.vtt [7k 369]
005 More Robust Render Thresholds.mp4 [17m 631k 673]
005 More Robust Render Thresholds_en.srt [2k 971]
005 More Robust Render Thresholds_en.vtt [2k 681]
006 Extracting Title And Thumbnail.mp4 [62m 591k 477]
006 Extracting Title And Thumbnail_en.srt [6k 319]
006 Extracting Title And Thumbnail_en.vtt [5k 570]
007 Game Category Tags.mp4 [63m 698k 236]
007 Game Category Tags_en.srt [5k 267]
007 Game Category Tags_en.vtt [4k 644]
008 Release Date And Reviews.mp4 [72m 199k 943]
008 Release Date And Reviews_en.srt [6k 106]
008 Release Date And Reviews_en.vtt [5k 339]
009 Original And Discount Price.mp4 [71m 720k 817]
009 Original And Discount Price_en.srt [6k 921]
009 Original And Discount Price_en.vtt [6k 6]
010 Refactoring.mp4 [45m 965k 190]
010 Refactoring_en.srt [5k 749]
010 Refactoring_en.vtt [5k 0]
011 Introducing Config.mp4 [44m 640k 176]
011 Introducing Config_en.srt [6k 841]
011 Introducing Config_en.vtt [6k 101]
012 Configuration Integrated.mp4 [52m 586k 493]
012 Configuration Integrated_en.srt [7k 721]
012 Configuration Integrated_en.vtt [6k 836]
013 Parsing Pipeline.mp4 [84m 535k 116]
013 Parsing Pipeline_en.srt [13k 749]
013 Parsing Pipeline_en.vtt [12k 14]
014 Parameterized Extraction.mp4 [91m 302k 490]
014 Parameterized Extraction_en.srt [10k 763]
014 Parameterized Extraction_en.vtt [9k 388]
015 Functional Post-Processing.mp4 [94m 529k 97]
015 Functional Post-Processing_en.srt [13k 77]
015 Functional Post-Processing_en.vtt [11k 392]
016 Date Formatting.mp4 [78m 312k 429]
016 Date Formatting_en.srt [11k 80]
016 Date Formatting_en.vtt [9k 725]
017 Regular Expressions.mp4 [100m 230k 265]
017 Regular Expressions_en.srt [13k 22]
017 Regular Expressions_en.vtt [11k 427]
018 Saving To Disk.mp4 [60m 983k 704]
018 Saving To Disk_en.srt [7k 970]
018 Saving To Disk_en.vtt [7k 15]
019 Integrating HTMLParser With The Generic Parser.mp4 [61m 418k 262]
019 Integrating HTMLParser With The Generic Parser_en.srt [9k 43]
019 Integrating HTMLParser With The Generic Parser_en.vtt [8k 58]
020 Finishing Touches.mp4 [52m 139k 800]
020 Finishing Touches_en.srt [6k 146]
020 Finishing Touches_en.vtt [5k 442]
external-links.txt [65]

12 The Scrapy Framework
001 Introduction.mp4 [6m 875k 18]
001 Introduction_en.srt [2k 467]
001 Introduction_en.vtt [2k 249]
002 The-Scrapy-Framework.url [57]
002 Virtual Environments And Scrapy.mp4 [39m 202k 465]
002 Virtual Environments And Scrapy_en.srt [7k 282]
002 Virtual Environments And Scrapy_en.vtt [6k 578]
003 First Project And Spider.mp4 [25m 494k 655]
003 First Project And Spider_en.srt [5k 271]
003 First Project And Spider_en.vtt [4k 765]
004 Scraping Elements.mp4 [79m 452k 475]
004 Scraping Elements_en.srt [10k 577]
004 Scraping Elements_en.vtt [9k 412]
005 Extracting Specific Attributes.mp4 [75m 802k 173]
005 Extracting Specific Attributes_en.srt [9k 973]
005 Extracting Specific Attributes_en.vtt [8k 802]
006 An Extra Scrapy Shell.mp4 [43m 470k 343]
006 An Extra Scrapy Shell_en.srt [5k 140]
006 An Extra Scrapy Shell_en.vtt [4k 625]
007 Rewriting Using XPath Selectors.mp4 [81m 665k 793]
007 Rewriting Using XPath Selectors_en.srt [11k 663]
007 Rewriting Using XPath Selectors_en.vtt [10k 318]
008 Outputting Data.mp4 [65m 586k 680]
008 Outputting Data_en.srt [7k 397]
008 Outputting Data_en.vtt [6k 630]
009 Defining Scrapy Items.mp4 [57m 64k 750]
009 Defining Scrapy Items_en.srt [7k 576]
009 Defining Scrapy Items_en.vtt [6k 746]
010 Introducing Itemloaders.mp4 [82m 454k 488]
010 Introducing Itemloaders_en.srt [11k 544]
010 Introducing Itemloaders_en.vtt [10k 259]
011 Fine-Tuned Post-Processing.mp4 [105m 172k 631]
011 Fine-Tuned Post-Processing_en.srt [11k 994]
011 Fine-Tuned Post-Processing_en.vtt [10k 679]
012 Pipelined Data Validation.mp4 [89m 493k 506]
012 Pipelined Data Validation_en.srt [10k 223]
012 Pipelined Data Validation_en.vtt [9k 108]
013 Saving To Databases.mp4 [94m 720k 29]
013 Saving To Databases_en.srt [14k 509]
013 Saving To Databases_en.vtt [12k 854]
014 Challenge.mp4 [30m 634k 641]
014 Challenge_en.srt [4k 916]
014 Challenge_en.vtt [4k 437]
015 Solution Defining NoDuplicateCountryPipeline.mp4 [63m 883k 745]
015 Solution Defining NoDuplicateCountryPipeline_en.srt [8k 505]
015 Solution Defining NoDuplicateCountryPipeline_en.vtt [7k 590]
external-links.txt [61]

13 Boosting Scrapy With scrapy-playwright
001 Job-Postings.url [79]
001 The JavaScript Wrench In The Works.mp4 [82m 818k 287]
001 The JavaScript Wrench In The Works_en.srt [11k 773]
001 The JavaScript Wrench In The Works_en.vtt [10k 308]
002 Integrating scrapy-playwright.mp4 [66m 46k 192]
002 Integrating scrapy-playwright_en.srt [8k 579]
002 Integrating scrapy-playwright_en.vtt [7k 704]
002 The-scrapy-playwright-Library.url [74]
003 PageMethods.mp4 [36m 871k 956]
003 PageMethods_en.srt [4k 587]
003 PageMethods_en.vtt [4k 126]
003 The-Playwright-Page-Object.url [65]
004 Pagination And Infinite Scroll.mp4 [29m 625k 866]
004 Pagination And Infinite Scroll_en.srt [4k 687]
004 Pagination And Infinite Scroll_en.vtt [4k 244]
005 Playwright, Do This.mp4 [64m 929k 686]
005 Playwright, Do This_en.srt [10k 311]
005 Playwright, Do This_en.vtt [9k 6]
006 Improved Snippet As PageMethod.mp4 [70m 795k 262]
006 Improved Snippet As PageMethod_en.srt [9k 218]
006 Improved Snippet As PageMethod_en.vtt [8k 143]
007 Scraping Location, Department, And Posted Date.mp4 [46m 849k 709]
007 Scraping Location, Department, And Posted Date_en.srt [5k 111]
007 Scraping Location, Department, And Posted Date_en.vtt [4k 560]
external-links.txt [237]

14 Project 4 - Scraping Dynamic Sites With Scrapy And PlayWright
001 NIH-URL.url [62]
001 Scope Statement.mp4 [26m 85k 228]
001 Scope Statement_en.srt [4k 813]
001 Scope Statement_en.vtt [4k 352]
002 New Project And Spider.mp4 [26m 348k 385]
002 New Project And Spider_en.srt [4k 292]
002 New Project And Spider_en.vtt [3k 759]
003 Item And Itemloading.mp4 [110m 751k 589]
003 Item And Itemloading_en.srt [14k 544]
003 Item And Itemloading_en.vtt [12k 619]
004 Pipelining To Database.mp4 [70m 773k 602]
004 Pipelining To Database_en.srt [10k 899]
004 Pipelining To Database_en.vtt [9k 644]
005 Quick Fix.mp4 [22m 297k 430]
005 Quick Fix_en.srt [2k 808]
005 Quick Fix_en.vtt [2k 536]
006 Grouped Elements JSON Export.mp4 [76m 206k 882]
006 Grouped Elements JSON Export_en.srt [11k 152]
006 Grouped Elements JSON Export_en.vtt [9k 837]
external-links.txt [53]

15 Closing Thoughts
001 Try To Respect robots.txt.mp4 [27m 605k 35]
001 Try To Respect robots.txt_en.srt [2k 990]
001 Try To Respect robots.txt_en.vtt [2k 754]
002 Thank You.mp4 [1m 331k 942]
002 Thank You_en.srt [620]
002 Thank You_en.vtt [571]
003 My Other Courses.html [850]

16 Appendix - Python Fundamentals
001 A Quick Note + Section Resources.html [512]
001 Rapid-Fire-Python-Fundamentals.zip [26k 230]
002 Data Types.mp4 [11m 616k 685]
002 Data Types_en.srt [3k 49]
002 Data Types_en.vtt [2k 732]
003 Variables.mp4 [44m 848k 264]
003 Variables_en.srt [10k 500]
003 Variables_en.vtt [9k 405]
004 Arithmetic And Augmented Assignment Operators.mp4 [31m 378k 429]
004 Arithmetic And Augmented Assignment Operators_en.srt [8k 320]
004 Arithmetic And Augmented Assignment Operators_en.vtt [7k 463]
005 Ints And Floats.mp4 [48m 741k 890]
005 Ints And Floats_en.srt [10k 981]
005 Ints And Floats_en.vtt [9k 766]
006 Booleans And Comparison Operators.mp4 [24m 815k 698]
006 Booleans And Comparison Operators_en.srt [5k 951]
006 Booleans And Comparison Operators_en.vtt [5k 301]
007 Strings.mp4 [36m 593k 269]
007 Strings_en.srt [9k 650]
007 Strings_en.vtt [8k 605]
008 Methods.mp4 [28m 544k 54]
008 Methods_en.srt [7k 561]
008 Methods_en.vtt [6k 776]
009 Containers I - Lists.mp4 [33m 449k 900]
009 Containers I - Lists_en.srt [7k 333]
009 Containers I - Lists_en.vtt [6k 584]
010 Lists vs. Strings.mp4 [31m 518k 215]
010 Lists vs. Strings_en.srt [8k 337]
010 Lists vs. Strings_en.vtt [7k 462]
011 List Methods And Functions.mp4 [37m 412k 937]
011 List Methods And Functions_en.srt [9k 783]
011 List Methods And Functions_en.vtt [8k 708]
012 Containers II - Tuples.mp4 [22m 773k 57]
012 Containers II - Tuples_en.srt [5k 418]
012 Containers II - Tuples_en.vtt [4k 840]
013 Containers III - Sets.mp4 [60m 125k 992]
013 Containers III - Sets_en.srt [12k 474]
013 Containers III - Sets_en.vtt [11k 19]
014 Containers IV - Dictionaries.mp4 [25m 764k 233]
014 Containers IV - Dictionaries_en.srt [6k 502]
014 Containers IV - Dictionaries_en.vtt [5k 798]
015 Dictionary Keys And Values.mp4 [41m 367k 121]
015 Dictionary Keys And Values_en.srt [9k 713]
015 Dictionary Keys And Values_en.vtt [8k 628]
016 Membership Operators.mp4 [22m 170k 597]
016 Membership Operators_en.srt [4k 969]
016 Membership Operators_en.vtt [4k 454]
017 Controlling Flow With if, else, And elif.mp4 [47m 503k 150]
017 Controlling Flow With if, else, And elif_en.srt [10k 365]
017 Controlling Flow With if, else, And elif_en.vtt [9k 260]
018 Truth Value Of Non-Booleans.mp4 [18m 51k 157]
018 Truth Value Of Non-Booleans_en.srt [4k 233]
018 Truth Value Of Non-Booleans_en.vtt [3k 754]
019 For Loops.mp4 [23m 248k 586]
019 For Loops_en.srt [6k 340]
019 For Loops_en.vtt [5k 681]
020 The range() Immutable Sequence.mp4 [27m 72k 704]
020 The range() Immutable Sequence_en.srt [5k 967]
020 The range() Immutable Sequence_en.vtt [5k 371]
021 While Loops.mp4 [33m 99k 495]
021 While Loops_en.srt [7k 271]
021 While Loops_en.vtt [6k 531]
022 Break And Continue.mp4 [21m 692k 441]
022 Break And Continue_en.srt [5k 589]
022 Break And Continue_en.vtt [4k 966]
023 Zipping Iterables.mp4 [19m 822k 729]
023 Zipping Iterables_en.srt [4k 155]
023 Zipping Iterables_en.vtt [3k 685]
024 List Comprehensions.mp4 [36m 229k 567]
024 List Comprehensions_en.srt [9k 764]
024 List Comprehensions_en.vtt [8k 659]
025 Defining Functions.mp4 [65m 677k 940]
025 Defining Functions_en.srt [13k 280]
025 Defining Functions_en.vtt [11k 685]
026 Function Arguments Positional vs Keyword.mp4 [34m 824k 993]
026 Function Arguments Positional vs Keyword_en.srt [8k 873]
026 Function Arguments Positional vs Keyword_en.vtt [7k 938]
027 Lambdas.mp4 [26m 303k 365]
027 Lambdas_en.srt [6k 630]
027 Lambdas_en.vtt [5k 962]
028 Importing Modules.mp4 [38m 146k 895]
028 Importing Modules_en.srt [7k 8]
028 Importing Modules_en.vtt [6k 286]

Объем: 6,76Гб.

Разделов: 16
Лекций: 160
Общая продолжительность: 17 ч 29 мин
Последнее обновление: 03.2023
Язык: Английский

Скрытый текст. Доступен только зарегистрированным пользователям.Нажмите, чтобы раскрыть...