Fällt es Ihnen schwer, Produktdaten von Amazon abzurufen? In dieser Anleitung erfahren Sie, wie Sie Preisdaten von Mitbewerbern, ASINs und Produktangebote von Amazon auslesen können. 

So beziehen Sie Amazon-Produktdaten.

Sie können Amazon-Produktdaten ganz einfach über die Suchfunktion des Anbieters abrufen. Für umfangreichere Datenerfassungsprojekte, die Echtzeitdaten über mehrere Websites und Angebote hinweg erfordern, ist dies jedoch nicht ausreichend. Die einzige Möglichkeit, dies zu erreichen, besteht darin, den Prozess mithilfe von Web-Scraping-Tools zu automatisieren. 

Was ist Web-Scraping?

Unter Web-Scrapingversteht man ganz einfach das Sammeln von Daten aus Webseiten und Websites. Dabei werden Bots so programmiert, dass sie automatisch die Aufgaben ausführen, die ein Mensch ausführen müsste, um dieselben Daten zu extrahieren und zu organisieren. 

Bevor Sie Daten von Amazon auslesen.

Wenn Sie ein Scraping-Projekt in kleinerem Umfang durchführen, können Sie die Kategorieliste jedes Suchbegriffs durchsuchen. Rufen Sie anschließend für jeden Suchbegriff die entsprechende Produktseite auf, bevor Sie zum nächsten übergehen. 

Die zweite Möglichkeit besteht darin, eine Datenbank mit den Produkten anzulegen, die Sie verfolgen möchten. Dazu benötigen Sie eine Liste mit ASINs (Amazon Standard Identification Number). Anschließend sollten Sie mit Ihrem Web-Scraping-Tool jede dieser einzelnen Seiten regelmäßig auslesen. Dies ist die gängigste Methode unter Scrapern, die Produkte für sich selbst oder im Rahmen einer Dienstleistung verfolgen.

Bevor wir jedoch darauf eingehen – lassen Sie uns zunächst klären, was eine ASIN ist und warum sie für die Erfassung von Produktdaten bei Amazon von entscheidender Bedeutung ist.

Was ist eine ASIN?

Die ASIN ist ein alphanumerischer Code aus 10 Zeichen, der jedes Produkt bei Amazon eindeutig identifiziert. Sie finden die ASIN in den „Technischen Details“ oder den „Produktinformationen“ des Produktangebots sowie in der URL der Produktseite.

Warum sollte man die ASIN auslesen?

Mithilfe der ASINs von Amazon können Sie Daten zu den umsatzstärksten Produkten, täglichen Umsatzschätzungen und den Umsätzen einzelner Produkte abrufen. Außerdem lassen sich mithilfe von Stichwörtern und Produktinformationen ähnliche Produkte oder Wettbewerber identifizieren. 

Ist das Scraping von Amazon überhaupt legal?

Es gibt kein spezielles Gesetz, das die Grenzen des Web-Scrapings definiert. Die Rechtsprechung enthält jedoch zahlreiche Gerichtsentscheidungen zugunsten der Staatsanwaltschaft. Datenschutzgesetze kommen ins Spiel, wenn Sie sich unbefugt Zugang zu passwortgeschützten Domains verschaffen. Sachschäden liefern ausreichende Beweise, um ein Verfahren gegen fahrlässige oder uninformierte Scraping-Praktiken einzuleiten.

Erfahren Sie mehr überdie Rechtsprechung zum Thema Web-Scraping.  

Drei Möglichkeiten, Daten von Amazon zu extrahieren.

Es gibt unzählige Möglichkeiten, Web-Scraping zu definieren und zu kategorisieren. Die drei gängigsten Ansätze sind die „Copy-Paste“-Methode, die Verwendung von Open-Source-Scraping-Vorlagen sowie Full-Service-Web-Scraping-Tools.

Kopieren-Einfügen-Methode

Wenn Sie nur einige Produktdetails von Amazon erfassen müssen, ist diese Scraping-Methode selbsterklärend. Auch die Durchführung erfordert nur wenig Zeit und Ressourcen. [Bild einfügen] Je mehr Produktdaten Sie jedoch benötigen, desto weniger effizient wird die Kopier-und-Einfügen-Methode.

Open-Source-Skripte

Angenommen, der Anblick von ComputercodelässtSienichtsofort die Flucht ergreifen. In diesem Fall stehen Ihnen Tausende kostenloser Skripte zum Crawlen, Scrapen und Parsen in Programmiersprachen wie Python, NodeJS, Scrapy, Java, PHP und Ruby zur Verfügung. Diese Alternativen weisen viele gemeinsame Merkmale auf, doch Python scheint über die umfangreichsten Vorlagen für das Web-Scraping zu verfügen. 

Web-Scraping-APIs

Web-Scraping-APIs scheinen zwar die teuerste Lösung zu sein, doch sollten Sie den Mehrwert, den sie bieten, unbedingt würdigen. Da sie einfach einzurichten und zu nutzen sind, sparen sie Ihnen die Zeit, die Sie für das Erlernen von Programmierkenntnissen aufwenden müssten, optimieren Ihren Datenerfassungsprozess und helfen bei der Behebung der Probleme, die dabei häufig auftreten können. 

Das Auslesen von Amazon-Produktdaten mithilfe vonWeb-Scraping-APIsist einfach, da die grafische Benutzeroberfläche (GUI) auf Seiten des Benutzers nur einfache Schritte erfordert, während die mühsameren Programmieraufgaben im Hintergrund automatisiert werden. 

Bei den meisten Web-Scraping-Tools wie Octoparse und Parsehub laden Sie einfach die Software herunter und folgen einem kurzen Tutorial, um loszulegen.

Die Vorteile des Webscrapings bei Amazon.

• Preisüberwachung in Echtzeit– Durch das kontinuierliche Auslesen von Daten bei Amazon verfügen Sie über die aktuellste Quelle für die Preise Ihrer Mitbewerber. Sie können die ausgelesenen Daten in eine Tabellenkalkulation importieren oder im JSON-Format speichern.

• SEO-Recherche– Verfolgen Sie das Feedback der Verbraucher und die Strategien Ihrer Mitbewerber in Echtzeit und gewinnen Sie so Daten, mit denen Sie fundierte Anpassungen an Ihrer SEO-Kampagne vornehmen können.

• Bewertungsdaten– Optimieren Sie Ihre Produktentwicklung, Ihr Produktmanagement und die Customer Journey, indem Sie Produktbewertungen zur Analyse auswerten.

• Trenderkennung– Finden Sie Artikel mit hohem Absatzvolumen, bei denen es nicht genügend qualitativ hochwertige Produkte gibt, um die Nachfrage zu decken. 

Die Probleme beim Web-Scraping bei Amazon. 

• Ein Skript allein reicht nicht aus– Die meisten Scraper sind so voreingestellt, dass sie einer bestimmten Seitenstruktur folgen. Weicht diese Struktur auch nur geringfügig ab, treten häufig Probleme auf. Amazon-Seiten gibt es in allen möglichen Formen und Größen – sie unterscheiden sich in vielerlei Hinsicht von Standardvorlagen. Wenn Sie mit Open-Source-Skripten scrapen, müssen Sie Code finden, der diese Ausnahmen berücksichtigt. 

• Amazon verfügt über große Datenmengen– das Auslesen und Speichern von Daten auf Ihrem System ist für kleine Projekte zwar ausreichend. Dennoch werden Sie irgendwann leistungsstarke Prozessoren und umfangreiche Datenbanken benötigen, um die wachsenden Datenmengen bewältigen zu können. Durch die Nutzung eines Cloud-Servers vermeiden Sie eine Überlastung Ihrer lokalen Ressourcen und optimieren Ihre gesamte Datenerfassungskette. 

• Amazon überwacht Bot-Aktivitäten und sperrt IP-Adressen sofort– Web-Scraping verstößt gegen die Richtlinien von Amazon, und das Unternehmen setzt diese konsequent durch. Sobald festgestellt wird, dass Sie beim Scraping der Amazon-Websites zu viele Anfragen von einer einzigen IP-Adresse aus senden, wird Ihre IP-Adresse von Amazon auf die Sperrliste gesetzt. Aufgrund dieser Haltung gegenüber Bot-Aktivitäten ist es schwierig, genügend Daten zu sammeln, damit sich der Aufwand für Sie lohnt. 

Dennoch führen Nutzer täglich Web-Scraping auf Amazon durch. Diejenigen, denen es gelingt, die Überwachungsmaßnahmen von Amazon zu umgehen, nutzen dazu rotierende Proxys. 

Wie rotierende Privat-Proxys helfen können. 

Durch den ständigen Wechsel der IP-Adressen erweckt dies den Anschein, als kämen Ihre Anfragen von Tausenden von einzelnen Besuchern – und nicht von einem einzigen Scraping-Bot. 

Sie können Ihre IP-Adressen zwar manuell wechseln, doch das ist zu zeitaufwendig. Die Automatisierung dieses Vorgangs mit einem Proxy-Management-Tool wie dem unseren ist wesentlich bequemer. In Kombination mit dem Zugriff auf über 75 MillionenResidential-Proxyswerden Sie keinerlei Probleme haben, Daten von Amazon zu scrapen. Laden Sie Proxy-Listen aus Hunderten von Städten weltweit herunter und binden Sie diese in die Web-Scraping-Software Ihrer Wahl ein. Alternativ können Sie unsere Browser-Erweiterung für webbasierte Scraping-Tools nutzen.

Nächste Schritte: Erfahren Sie mehr überResidential-ProxysundIP-Rotation.