Installation et Formation aux outils My Web Intelligence

0/4 – Présentation générale

Présentation de la suite logiciel d’analyse du Web

Cette vidéo est la présentation d’une série de modules de formation très courts en vue de l’adoption des outils My Web Intelligence. My Web Intelligence est un projet d’Amar LAKEL, chercheur en Sciences de l’Information et de la Communication (S.I.C.) au sein de l’équipe E3D du Laboratoire MICA, qui vise à doter les chercheurs en SHS et les experts de l’information, de la communication et du marketing d’une suite d’outil OPEN SOURCE et VRAIMENT GRATUIT issu de la recherche publique pour se constituer de grands corpus du web. cet outil est un préalable essentiel avant tout projet d’analyse des controverses et de cartographie des influenceurs.

1/4 - Installation des logiciels

20 minutes pour comprendre comment installer la suite logicielle My Web Intelligence. Il faut absolument avoir vu la vidéo de présentation qui précède.

2/4 - Constituer une liste d'urls pour l'exploration du web

Dans la méthodologie d’enquête dite de proche en proche ou « boule de neige », on s’appuie sur le réseau de liens pour explorer/recruter un corpus. Bien évidemment les sous-réseaux ne sont pas tous interconnectés donc il est important d’avoir un maximum de liens de départ pertinents, car chacun peut être une clé d’entrée dans un sous réseau invisible. Voilà un petit outil développer par le Media Lab de Sciences Po et une ou deux astuces pour faire « cracher » les urls à Google qui n’aime pas trop les donner.

3/4 - Crawler le web et constituer son corpus numérique

Entrons au coeur de la compétence de My Web Intelligence avec la 1ère brique logicielle, MyWebIntelligencePython, et apprenons à crawler le web.
5 lignes de commandes, rien de plus facile !

4/4 - Nettoyage et annotation du corpus web

Toute enquête et a fortiori tout crawl automatisé d’un océan complexe de données necessite une phase de nettoyage et d’enrichissement de données. La brique logicielle MyWebClient est une interface web qui permet d’explorer son corpus, de le nettoyer et de l’enrichir avant la phase d’analyse.