April 2024

Im derzeitigen Informationszeitalter ist es sehr einfach geworden, einen eigenen Beitrag zur zunehmenden Menge an digitalen Daten zu leisten: Mit nur wenigen Klicks kann jede Person Posts auf die vielen verfügbaren sozialen Netzwerke hochladen. 

Allein an einem Tag senden Nutzende der Plattform X, ehemals Twitter, durchschnittlich 100 bis 200 Millionen Tweets. Wenn man authentische Beiträge von Nutzenden zu einem Thema sucht, muss man sich also mit einer Menge Tweets und Beiträgen befassen. Die Frage nach einer effizienten Methodik zur Handhabung dieser Datenmenge stellt sich sofort.

Das wurde auch in einem Projekt klar, in dem wir Meinungen von Nutzenden von X zu einem bestimmten Thema erfassen und anschließend auswerten. Früher bedeutete das manuelle Stichwortsuchen auf X sowie ein händisches Durchforsten der endlosen Treffer, um darin gleichzeitig die passenden Beiträge zu identifizieren. Unsere Antwort auf die Frage nach mehr Effizienz war, die Web-Scraping-Softwarelösung Octoparse zuerst testweise einzusetzen.

Unser Einsatz der Web-Scraping-Software Octoparse

Mit Web Scraping werden Onlinedaten z. B. aus Webseiten gesammelt. Web Scraper wie Octoparse fungieren als automatische und konfigurierbare Datensammler und decken dabei alle Schritte ab, wie das Suchen, Scrollen, Klicken und das anschließende Copy & Paste zur Erfassung der relevanten Inhalte. Octoparse übernimmt also all diese genannten Einzelaufgaben, die zur Sammlung der relevanten Beiträge mit einem gesuchten Schlagwort auf X nötig sind, und führt diese auf einmal aus. Den generierten Datensatz können wir übersichtlich und strukturiert in einer Microsoft-Excel-Datei herunterladen. Durch diesen neuen Prozess können wir uns voll darauf konzentrieren, die thematisch relevanten Beiträge zu identifizieren und auszuwerten.

Wir stellen fest: Der Einsatz von Octoparse hat sich in unserem Projekt positiv auf die Gesamteffizienz und -präzision ausgewirkt und wird auch in weiteren Projekten getestet werden.