Review Scraper



  • Wir haben diesen Term ein Gruppenprojekt, dessen Ziel ein Program ist, das Produkte mit haeufigen Produktionsfehlern oder Designfehlern findet um anschliessend eine Gruppenklage gegen den Hersteller durchzufuehren. Siehe die Projektbeschreibung hier unter Class-y action.

    Unser Plan ist zzt. durch scraping auf Review-Seiten potenzielle, fehlerhafte Produkte zu finden und dann auf Platformen wie Twitter oder Facebook weitere Beschwerden zu suchen, um den Verdacht zu erhaerten. Fuer Twitter haben wir bereits einen erstaunlich guten Scraper gebastelt, der ueber die angebotene API fungiert.

    Amazon hat jedoch deren API schon vor Jahren eingestellt, und anscheinend sind die gegenueber Scrapern nicht sehr freundlich eingestellt--man kann mit IP Bans rechnen.

    Ist unser Ansatz verbesserbar? Wenn nicht, habt ihr irgendwelche Tips fuer die Implementierung?


Anmelden zum Antworten