Web Scraping with Python Schulung
Web Scraping ist eine Technik zum Extrahieren von Daten von einer Website und zum Speichern in einer lokalen Datei oder Datenbank.
Dieses Live-Training (vor Ort oder per Fernzugriff) richtet sich an Entwickler, die mithilfe von Python das Crawlen vieler Websites automatisieren möchten, um Daten für die Verarbeitung und Analyse zu extrahieren.
Am Ende dieser Schulung können die Teilnehmer:
- Installieren und konfigurieren Sie Python und alle relevanten Pakete.
- Rufen und analysieren Sie Daten ab, die auf vielen Websites gespeichert sind.
- Verstehen Sie, wie Websites funktionieren und wie ihre HTML strukturiert ist.
- Erstellen Sie Spiders, um das Web in großem Maßstab zu crawlen.
- Verwenden Sie Selenium, um AJAX-basierte Webseiten zu crawlen.
Format des Kurses
- Interaktiver Vortrag und Diskussion.
- Viele Übungen und praktische Anwendungen.
- Praktische Umsetzung in einer Live-Lab-Umgebung.
Anpassungsoptionen für den Kurs
- Dieser Kurs setzt Programmierkenntnisse voraus.
- Um ein individuelles Training für diesen Kurs anzufordern, kontaktieren Sie uns bitte, um eine Vereinbarung zu treffen.
Schulungsübersicht
Einführung
Einrichten der Entwicklungsumgebung
Python Einführung: Datenstrukturen, Bedingungen, Dateiverwaltung usw.
Python Pakete für Web Scraping: Scrapy und BeautifulSoup
Wie eine Website funktioniert
Wie HTML aufgebaut ist
Eine Webanfrage stellen
Scraping einer HTML Seite
Arbeiten mit XPath und CSS
Filtern von Daten mit regulären ExpressIonen
Erstellen eines Webcrawlers
Crawlen von AJAX- und JavaScript-Seiten mit Selenium.
Best Practices für Web Scraping
Fehlerbehebung
Zusammenfassung und Schlussfolgerung
Voraussetzungen
- Programming Erfahrung, vorzugsweise in Python. Wenn Teilnehmer Programmiererfahrung in einer anderen Sprache als Python haben, kann die Schulung um zusätzliche einführende Python-Übungen erweitert werden.
Publikum
- Entwickler
Offene Schulungskurse erfordern mindestens 5 Teilnehmer.
Web Scraping with Python Schulung - Booking
Web Scraping with Python Schulung - Enquiry
Web Scraping with Python - Beratungsanfrage
Beratungsanfrage
Erfahrungsberichte (1)
Viele verschiedene Beispiele und Themen wurden behandelt, von der grundlegenden Untersuchung bis hin zur Login-Verwaltung und der Verwaltung dynamischer Seiten.
Daniele Tagliaferro - Creditsafe Italia Srl
Kurs - Web Scraping with Python
Maschinelle Übersetzung
Kommende Kurse
Kombinierte Kurse
BDD with Python and Behave
7 StundenThis instructor-led, live training in Schweiz begins with a discussion of BDD and how the Behave framework can be used to carry out BDD testing for web applications. Participants are given ample opportunity to interact with the instructor and peers while implementing the concepts and tactics learned in this hands-on, practice-based lab environment.
Am Ende dieser Schulung verfügen die Teilnehmer über ein solides Verständnis von BDD und Behave sowie über die notwendige Praxis, um diese Techniken und Werkzeuge in realen Testszenarien zu implementieren.
Scaling Data Analysis with Python and Dask
14 StundenDiese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Datenwissenschaftler und Softwareingenieure, die Dask mit dem Python-Ökosystem verwenden möchten, um große Datensätze zu erstellen, zu skalieren und zu analysieren.
Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:
- Einrichten der Umgebung, um mit Dask und Python die Verarbeitung von Big Data zu beginnen.
- Erforschen Sie die Funktionen, Bibliotheken, Werkzeuge und APIs, die in Dask verfügbar sind.
- Verstehen Sie, wie Dask die parallele Datenverarbeitung in Python beschleunigt.
- Lernen Sie, wie Sie das Python-Ökosystem (Numpy, SciPy und Pandas) mit Dask skalieren können.
- Optimieren Sie die Dask-Umgebung, um eine hohe Leistung bei der Verarbeitung großer Datenmengen zu erhalten.
Data Analysis with Python, Pandas and Numpy
14 StundenDieses von einem Dozenten geleitete Live-Seminar in Schweiz (online oder vor Ort) richtet sich an fortgeschrittene Python-Entwickler und Datenanalysten, die ihre Fähigkeiten in der Datenanalyse und -manipulation mit Pandas und NumPy verbessern möchten.
Am Ende des Trainings werden die Teilnehmer in der Lage sein:
- Eine Entwicklungsumgebung einzurichten, die Python, Pandas und NumPy enthält.
- Eine Datenanalyse-Anwendung mit Pandas und NumPy erstellen.
- Erweiterte Datenaufbereitung, -sortierung und -filterung durchführen.
- Agregationsoperationen durchführen und Zeitreihendaten analysieren.
- Daten mit Matplotlib und anderen Visualisierungsbibliotheken visualisieren.
- Ihren Datenanalyses-Code debuggen und optimieren.
FARM (FastAPI, React, and MongoDB) Full Stack Development
14 StundenDiese Live-Schulung unter Anleitung (online oder vor Ort) richtet sich an Entwickler, die den FARM-Stack (FastAPI, React und MongoDB) zur Erstellung dynamischer, hochleistungsfähiger und skalierbarer Webanwendungen nutzen möchten.
Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:
-
Einrichten der erforderlichen Entwicklungsumgebung, die FastAPI, React und MongoDB integriert.
Verstehen der wichtigsten Konzepte, Funktionen und Vorteile des FARM-Stacks.
Lernen, wie man REST-APIs mit FastAPI erstellt.
Lernen Sie, wie Sie interaktive Anwendungen mit React entwerfen.
Entwickeln, Testen und Bereitstellen von Anwendungen (Frontend und Backend) unter Verwendung des FARM-Stacks.
Developing APIs with Python and FastAPI
14 StundenDiese von einem Trainer geleitete Live-Schulung (online oder vor Ort) richtet sich an Entwickler, die FastAPI mit Python verwenden möchten, um RESTful APIs einfacher und schneller zu erstellen, zu testen und bereitzustellen.
Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:
- Eine notwendige Entwicklungsumgebung für die Entwicklung von APIs mit Python und FastAPI einzurichten.
- APIs mithilfe der FastAPI-Bibliothek schneller und einfacher zu erstellen.
- Zu lernen, wie man Datenmodelle und Schemas basierend auf Pydantic und OpenAPI erstellt.
- APIs mithilfe von SQLAlchemy mit einer Datenbank zu verbinden.
- Sicherheit und Authentifizierung in APIs mithilfe der FastAPI-Tools zu implementieren.
- Container-Images zu erstellen und Web-APIs auf einem Cloud-Server bereitzustellen.
Machine Learning with Python – 2 Days
14 StundenZiel dieses Kurses ist es, eine grundlegende Kompetenz in der Anwendung Machine Learning Methoden in der Praxis zu bieten. Durch die Verwendung der Programmiersprache und ihrer verschiedenen Bibliotheken und auf der Grundlage einer Vielzahl praktischer Beispiele lehrt dieser Kurs, wie man die wichtigsten Baublöcke von Machine Learning verwendet, wie man Datenmodellierungsentscheidungen macht, die Ergebnisse der Algorithmen interpretiert und die Ergebnisse validiert.
Unser Ziel ist es, Ihnen die Fähigkeiten zu vermitteln, die grundlegendsten Tools aus dem Toolbox vertrauensvoll zu verstehen und zu verwenden und die gemeinsamen Fälle der Anwendungen zu vermeiden.
Machine Learning with Python – 4 Days
28 StundenZiel dieses Kurses ist es, allgemeine Kenntnisse in der Anwendung von maschinellen Lernmethoden in der Praxis zu vermitteln. Durch den Einsatz der Programmiersprache Python und ihrer verschiedenen Bibliotheken und anhand einer Vielzahl von Praxisbeispielen vermittelt dieser Kurs, wie man die wichtigsten Bausteine des maschinellen Lernens nutzt, wie man Datenmodellierungsentscheidungen trifft, die Ausgänge der Algorithmen und Validierung der Ergebnisse.
Unser Ziel ist es, Ihnen die Fähigkeiten zu vermitteln, die grundlegendsten Werkzeuge aus dem Werkzeugkasten Maschinenlerntechnik sicher zu verstehen und zu nutzen und die üblichen Fallstricke von Datenwissenschaften zu vermeiden.
Accelerating Python Pandas Workflows with Modin
14 StundenDiese von einem Trainer geleitete Live-Schulung in Schweiz (online oder vor Ort) richtet sich an Datenwissenschaftler und Entwickler, die Modin verwenden möchten, um parallele Berechnungen mit Pandas für eine schnellere Datenanalyse zu erstellen und zu implementieren.
Am Ende dieser Schulung werden die Teilnehmer in der Lage sein,:
- die notwendige Umgebung einzurichten, um mit der Entwicklung von Pandas-Workflows in großem Maßstab mit Modin zu beginnen.
- die Funktionen, die Architektur und die Vorteile von Modin zu verstehen.
- Die Unterschiede zwischen Modin, Dask und Ray kennen.
- Schnellere Durchführung von Pandas-Vorgängen mit Modin.
- Implementierung der gesamten Pandas API und Funktionen.
Python for Natural Language Generation (NLG)
21 StundenIn diesem von einem Instructor geführten Live-Training in Schweiz lernen die Teilnehmer, wie sie Python verwenden können, um hochwertige natürlichen Sprachtext durch das Aufbauen eines eigenen NLG-Systems von Grund auf zu produzieren. Fallstudien werden ebenfalls untersucht und die relevanten Konzepte werden in Live-Lab-Projekten zur Erstellung von Inhalten angewendet.
Am Ende des Trainings können die Teilnehmer:
- NLG verwenden, um Inhalte für verschiedene Branchen wie Journalismus, Immobilien oder Wettersendungen und Sportberichte automatisch zu generieren.
- Quellinhalt auswählen und organisieren, Sätze planen und ein System für die automatische Generierung von Originalinhalten vorbereiten.
- Die NLG-Pipeline verstehen und an jeder Stufe die richtigen Techniken anwenden.
- Die Architektur eines Natural Language Generation (NLG)-Systems verstehen.
- Die geeignetsten Algorithmen und Modelle zur Analyse und Sortierung implementieren.
- Daten aus öffentlich zugänglichen Quellen sowie aus aufbereiteten Datenbanken holen, um sie als Material für generierten Text zu verwenden.
- Manuelle und mühselige Schreibprozesse durch von Computern generierte und automatisierte Inhaltsentwicklung ersetzen.
Unit Testing with Python
21 StundenIn dieser Live-Schulung unter Anleitung lernen die Teilnehmer, wie sie mit PyTest kurze, wartbare Tests schreiben können, die elegant, aussagekräftig und lesbar sind;
Am Ende dieser Schulung werden die Teilnehmer in der Lage sein:
- Schreiben Sie lesbare und wartbare Tests, ohne Boilerplate-Code zu benötigen.
- Nutzen Sie das Fixture-Modell, um kleine Tests zu schreiben.
- Skalieren Sie Tests bis hin zu komplexen Funktionstests für Anwendungen, Pakete und Bibliotheken.
- PyTest-Funktionen wie Hooks, Assert Rewriting und Plug-ins verstehen und anwenden.
- Reduzieren Sie die Testzeiten, indem Sie Tests parallel und auf mehreren Prozessoren ausführen.
- Tests in einer kontinuierlichen Integrationsumgebung ausführen, zusammen mit anderen Dienstprogrammen wie Tox, Mock, Coverage, Unittest, Doctest und Selenium.
- Nutzen Sie Python zum Testen von Nicht-Python-Anwendungen.
Advanced Machine Learning with Python
21 StundenIn dieser Live-Schulung in Schweiz lernen die Teilnehmer die wichtigsten und modernsten Techniken des maschinellen Lernens in Python, während sie eine Reihe von Demo-Anwendungen mit Bild-, Musik-, Text- und Finanzdaten erstellen.
Am Ende dieses Kurses werden die Teilnehmer in der Lage sein:
- Algorithmen und Techniken des maschinellen Lernens für die Lösung komplexer Probleme zu implementieren.
- Deep Learning und Semi-Supervised Learning auf Anwendungen für Bild-, Musik-, Text- und Finanzdaten anzuwenden.
- Algorithmen Python auf ihr maximales Potenzial zu bringen.
- Bibliotheken und Pakete wie NumPy und Theano zu verwenden.
Python: Automate the Boring Stuff
14 StundenDiese von einem Ausbilder geleitete Live-Schulung in Schweiz basiert auf dem beliebten Buch "Automate the Boring Stuff with Python", von Al Sweigart. Es richtet sich an Anfänger und deckt wesentliche Python-Programmierkonzepte durch praktische, praxisnahe Übungen und Diskussionen ab. Der Schwerpunkt liegt darauf, zu lernen, wie man Code schreibt, um die Produktivität im Büro drastisch zu steigern.
Am Ende dieses Kurses werden die Teilnehmer wissen, wie man in Python programmiert und diese neuen Fähigkeiten anwendet:
- Automatisierung von Aufgaben durch das Schreiben einfacher Python-Programme.
- Erstellung von Programmen, die Textmuster mithilfe von "regulären Ausdrücken" erkennen können.
- Programmgesteuerte Erstellung und Aktualisierung von Excel-Tabellenkalkulationen.
- Parsen von PDFs und Word-Dokumenten.
- Durchsuchen von Webseiten und Extrahieren von Informationen aus Online-Quellen.
- Erstellung von Programmen, die E-Mail-Benachrichtigungen versenden.
- Verwendung der Debugging-Tools von Python zur schnellen Fehlerbehebung.
- Programmgesteuerte Steuerung von Maus und Tastatur, um Klicks und Eingaben für Sie auszuführen.
Advanced Python - 4 Days
28 StundenIn dieser von einem Trainer geleiteten Live-Schulung lernen die Teilnehmer fortgeschrittene Python-Programmiertechniken, einschließlich der Anwendung dieser vielseitigen Sprache zur Lösung von Problemen in Bereichen wie verteilte Anwendungen, Datenanalyse und -visualisierung, UI-Programmierung und Wartungsskripting.
Python Programmierung
28 StundenDieser Kurs richtet sich an diejenigen, die die Programmiersprache Python erlernen möchten. Der Schwerpunkt liegt auf der Python Sprache, den Kernbibliotheken sowie der Auswahl der besten und nützlichsten Bibliotheken, die von der Python Community entwickelt wurden. Python treibt Unternehmen voran und wird von Wissenschaftlern auf der ganzen Welt verwendet - es ist eine der beliebtesten Programmiersprachen.
Der Kurs kann mit der neuesten Python Version 3.x durchgeführt werden, wobei praktische Übungen die volle Leistungsfähigkeit nutzen. Dieser Kurs kann auf jedem Betriebssystem durchgeführt werden (alle UNIX-Varianten, einschließlich Linux und Mac OS X, sowie Microsoft Windows).
Die praktischen Übungen machen ca. 70% der Kurszeit aus, und ca. 30% sind Vorführungen und Präsentationen. Diskussionen und Fragen können während des gesamten Kurses gestellt werden.
Hinweis: Die Schulung kann auf vorherige Anfrage vor dem vorgeschlagenen Kurstermin auf bestimmte Bedürfnisse zugeschnitten werden.
Test Automation with Selenium and Python
14 StundenIn dieser von einem Trainer geleiteten Live-Schulung kombinieren die Teilnehmer die Leistungsfähigkeit von Python mit Selenium, um das Testen einer Beispiel-Webanwendung zu automatisieren. Durch die Kombination von Theorie und Praxis in einer Live-Laborumgebung erhalten die Teilnehmer das Wissen und die Praxis, die sie benötigen, um ihre eigenen Web-Testing-Projekte mit Python und Selenium zu automatisieren.