HACKATHON Keepalert : scrapper de Big Data

C'est quoi un scrapper Big Data?

Scrapper consiste à moissonner les sites pour collecter de la donnée afin de la retraiter.

Keepalert a créé sa propre API et couvre un large spectre d'utilisations potentielles.

Voici des exemples d'applications possibles:

Récupérer chaque jour toutes les maisons à vendre par des particuliers dans Le Bon Coin et Se Loger   .

Trouver la Clio de 2014 la moins chère du marché de l'occasion   .

Récupérer des indicateurs boursiers, financiers, météo, sociaux, sportifs, horaires d'avion, annonces, tweets... pour les analyser, les croiser avec d'autres sources et/ou recréer automatiquement des contenus.   .

Faire de la veille de prix dans les places de marché   .

Générer des leads ; récupérer des profils qualifiés dans les réseaux sociaux (Growth hacking)   .

Alimenter une base de CV qualifiée et temps réel à partir de profils Linkedin / Viadéo   .

Aller toutes les 10mn sur un site et dérouler un scénario d'interrogation pour vérifier qu'il fonctionne (sonde de dispo ou simulation de montée en charge pour les hébergeurs)   .

Monitorer du positionnement SEO, aspirer les pages et les analyser pour créer des règles et du contenu     

....

Les étudiants vont devoir imaginer ce que peut faire cette API, en ayant accès aux ressources de Systonic

Quoi de mieux pour illustrer ce qu'est le BIG DATA et comment ça fonctionne ?