Ein schneller Trick, um die Amazon-Browsingknoten zu entdecken

WordHerd | 12. Dezember 2016 | 3 Minuten Lesestunden
Teilen Sie diesen Artikel

Amazon klassifiziert jedes einzelne Produkt in seinem Katalog in numerische Kategorien, die allgemein als “Nodes” bezeichnet werden. Diese Nodes werden dann in einer strukturierten und hierarchischen Art und Weise organisiert, wobei “Dad- oder Mom-Nodes” und “Leaf-Nodes” berücksichtigt werden. Ein Leaf-Node ist eine genauere und spezifischerere Unterkategorie des “Dad- oder Mom-Nodes”. Andererseits stellen “Dad-Nodes” die häufigste Klassifizierung von Produkten dar, und jedes “Leaf-Node” oder „Baby-Node“ spiegelt eine bestimmte und verwandte Unterteilung wider. Zum Beispiel ist der Knoten 283155 der „Dad-Node“ für „Bücher“, und der Knoten 5 zeigt „PC- & Technikbücher“ an – eine bestimmte Art von Buch. In diesem Beispiel:, 283155 ist es der Vater oder die Mutter und 5 Es ist das Kind oder das Blatt. Heutzutage verfügt Amazon über 100.000+ Knoten. Dennoch sind viele davon sowohl über die API nicht zugänglich als auch nicht mit sinnvollen Daten ausgestattet.

Die Methode zur Erkennung aller Knoten von Amazon erfolgt durch wiederholte API-Anfragen. Zwischen jeder einzelnen Anfrage nach mehreren Knoten sollte mindestens eine Sekunde vergehen. Da Amazon keinen zentralen Startpunkt zur Verknüpfung aller Eltern bereitstellt, kann der Prozess der Erkennung aller Knoten zeitaufwändig sein.

Da eine Erfassung der gesamten Elternstruktur innerhalb der Amazon-API nicht existiert, ist der erste Schritt zur Erstellung einer Suchdatenbank BrowseNodes die Erstellung einer Liste verschiedener Kategorien und ihrer entsprechenden Knotenpunkte. Die umfangreichste Liste dieser Kategorien befindet sich auf der Seite “Amazon Website Listing”. Offensichtlich enthält diese Seite Verknüpfungen, die Suchmaschinen dabei helfen sollen, tiefergehende Produktkategorien zu finden, und repräsentiert alles, was Amazon zu bieten hat. Die meisten Links auf dieser Seite enthalten node-spezifische URL-Adressen, die mithilfe von PHP abgerufen werden. Nachdem nicht wesentliche HTML- und Duplikatreferenzen aus dem HTML und den Links entfernt wurden, wird die abgekürte Liste in der mySQL-Datenbank im Schema „SampleNode_US“ im Format ein Knoten pro Zeile.

Auf dieser Ebene wird jede Zeile innerhalb der SampleNode_US-Tabelle erneut über die API aufgerufen. Diesmal ist jedoch das Ziel, den Vorfahren jeder Zeile zu ermitteln. Duplicate-Vorfäule aus den zurückgegebenen API-Informationen werden eliminiert und die Ergebnisse werden dann in ihrer eigenen Datenbanktablette, RootNode_US, gespeichert. Auf diese Weise wird die Basis-BrowseNode, die alle Mütter und Väter enthält, über die Strukturierung der daraus resultierenden Informationen aus der API gefunden.

Letztendlich wird jede Zeile in den Tabellen RootNode_US über die API weitergeleitet, um Kinder zu erhalten. Node durchsuchen IDs. Jedes Baby, das in flip in einem BrowseNode gespeichert ist, wird auch der API zur Suche nach weiteren Kindern übergeben. Wenn keine weiteren Kinder gefunden werden können, wird dann das nächste Elternknoten oder Kind geladen und durchlaufen. Der Ablauf wird so oft wiederholt, bis alle Knoten für alle ihre Kinder durchsucht wurden. Die Ergebnisse werden in der Tabelle Node_US gespeichert und/oder aktualisiert. Es dauert etwa 2-3 Wochen, bis das Skript alle Knoten analysiert hat, wobei die erforderliche Zeitverzögerung zwischen den API-Anfragen berücksichtigt wurde.

Bereit, Ihre Website zu migrieren?

Beginnen Sie mit einer kostenlosen, unverbindlichen Standortbewertung. Wir prüfen Ihr Projekt, empfehlen eine geeignete Plattform und erstellen Ihnen ein detailliertes Angebot.

Garantierte Datenverlustfreiheit
Voller SEO-Konservierungsmodus und Umleitungskartierung
Termingerechte und budgetgerechte Lieferung
Dedizierte Plattform-Spezialisten, keine Alleskönner

Erklären Sie uns Ihre Website

"*" kennzeichnet Pflichtfelder

Dieser Feld ist zur Validierung erforderlich und sollte unverändert bleiben.
Name*