Scraping Websites using Azure WebJobs, Node.js, jQuery, Async.js & gizp

In this post we’ll look at scraping Websites on a regular basis using Azure WebJobs & Node.js (jQuery / cheerio) and returning the data as JSON.

In the example below we’ll each week grab the apps that are on sale as part of the „Red Stripe Deals“ in the Windows Store. The resulting app details will be put into a JSON file that can be consumed for example by a mobile app.

Scraping Websites using Azure WebJobs, Node.js, jQuery, Async.js & gizp weiterlesen

Webseiten scrapen mit Azure WebJobs, Node.js, jQuery, Async.js & gizp

In diesem Artikel zeige ich, wie man relativ einfach eine Seite regelmäßig mit Azure WebJobs & Node.js (jQuery bzw. cheerio) crawlen und die Daten als JSON ausgeben kann.

Im konkreten Beispiel geht es darum, wöchentlich aus dem Windows Store die aktuellen „Red Stripe Deals“-Angebote auszulesen und die Informationen als JSON-Datei auf dem Server abzulegen, wo diese z.B. von einer App weiterverwendet werden können.

Webseiten scrapen mit Azure WebJobs, Node.js, jQuery, Async.js & gizp weiterlesen