Présentation

Article

1 - CADRER SA PRATIQUE DU SCRAPING

  • 1.1 - De bonnes pratiques

2 - ORGANISER SES DONNÉES

3 - NETTOYER LES DONNÉES

4 - CHOISIR LES LANGAGES ET LES OUTILS

5 - RESTER DANS UNE UTILISATION ÉTHIQUE

  • 5.1 - Un rappel sur le droit des données
  • 5.2 - Les Creative Commons

6 - NOTRE CONSEIL

  • 6.1 - Procédez au nettoyage de vos données
  • 6.2 - Présentez les résultats

7 - ERREURS À ÉVITER

  • 7.1 - Ne présumez pas de vos forces et de votre temps

8 - GLOSSAIRE

Fiche pratique | Réf : FIC1275 v1

Notre conseil
Le scraping, des méthodes et des outils au service de la veille

Auteur(s) : David COMMARMOND

Date de publication : 10 août 2024 | Read in English

Pour explorer cet article
Télécharger l'extrait gratuit

Vous êtes déjà abonné ?Connectez-vous !

Sommaire

Présentation

Auteur(s)

Lire cet article issu d'une ressource documentaire complète, actualisée et validée par des comités scientifiques.

Lire l’article

INTRODUCTION

La donnée est devenue le « pétrole » du XXIe siècle. Malgré cette formule, de nombreuses entreprises ignorent encore qu’elles possèdent et qu’elles peuvent trouver sur le Web de gigantesques dépôts d’informations et de données sous-exploitées ou dormant. Des entrepôts qui se sont stratifiés au cours des décennies d’évolution technique et qui, peu à peu, au gré de la vie des entreprises, ont connu diverses destinées, parfois disparues, souvent oubliées. Les questions de cybersécurité ont toutefois engagé une réflexion sur le sujet.

Le « grattage Web » peut être entendu et connu sous plusieurs termes ou technologies qui pourraient refléter ce que vous cherchez :

  • screen scraping ;

  • collecte de données et collecte de données automatisée ;

  • Data Mining ;

  • grattage de site Web ;

  • extraction des données ;

  • données Crawling.

Cet article est réservé aux abonnés.
Il vous reste 94% à découvrir.

Pour explorer cet article
Téléchargez l'extrait gratuit

Vous êtes déjà abonné ?Connectez-vous !


L'expertise technique et scientifique de référence

La plus importante ressource documentaire technique et scientifique en langue française, avec + de 1 200 auteurs et 100 conseillers scientifiques.
+ de 10 000 articles et 1 000 fiches pratiques opérationnelles, + de 800 articles nouveaux ou mis à jours chaque année.
De la conception au prototypage, jusqu'à l'industrialisation, la référence pour sécuriser le développement de vos projets industriels.

DOI (Digital Object Identifier)

https://doi.org/10.51257/a-v1-fic1275


Cet article fait partie de l’offre

Management et ingénierie de l'innovation

(450 articles en ce moment)

Cette offre vous donne accès à :

Une base complète d’articles

Actualisée et enrichie d’articles validés par nos comités scientifiques

Des services

Un ensemble d'outils exclusifs en complément des ressources

Des modules pratiques

Opérationnels et didactiques, pour garantir l'acquisition des compétences transverses

Doc & Quiz

Des articles interactifs avec des quiz, pour une lecture constructive

ABONNEZ-VOUS

Lecture en cours
Présentation

6. Notre conseil

6.1 Procédez au nettoyage de vos données

Avoir des données à disposition, c’est bien, mais savoir en tirer les informations principales, c’est essentiel. Vos données ne seront jamais directement exploitables sans une phase préalable de nettoyage. Vous pouvez apprendre à nettoyer vos données à l’aide de cours ou de MOOC disponibles sur Internet.

Réfléchissez aussi aux données que vous diffusez. Profitez de ce moment et processus pour faire un audit de votre présence sur le Web, de votre cybersécurité. Mettez-vous dans la peau d’un concurrent qui s’intéresse à votre segment. Que peut-il déduire de vos informations avec celles provenant de sources extérieures ?

HAUT DE PAGE

6.2 Présentez les résultats

Jusqu’à encore récemment, c’est-à-dire avant l’arrivée de l’intelligence artificielle, le nettoyage et la création de graphiques pouvaient prendre beaucoup de temps. L’arrivée de l’IA a permis de révolutionner cette approche. Toutefois, si les bénéfices sont indubitables, la solution n’est pas parfaite. Des erreurs sont possibles dans le traitement et le résultat obtenu, mais les prochaines évolutions devraient diminuer ce risque dans les mois à venir.

HAUT DE PAGE

Cet article est réservé aux abonnés.
Il vous reste 92% à découvrir.

Pour explorer cet article
Téléchargez l'extrait gratuit

Vous êtes déjà abonné ?Connectez-vous !


L'expertise technique et scientifique de référence

La plus importante ressource documentaire technique et scientifique en langue française, avec + de 1 200 auteurs et 100 conseillers scientifiques.
+ de 10 000 articles et 1 000 fiches pratiques opérationnelles, + de 800 articles nouveaux ou mis à jours chaque année.
De la conception au prototypage, jusqu'à l'industrialisation, la référence pour sécuriser le développement de vos projets industriels.

Cet article fait partie de l’offre

Management et ingénierie de l'innovation

(450 articles en ce moment)

Cette offre vous donne accès à :

Une base complète d’articles

Actualisée et enrichie d’articles validés par nos comités scientifiques

Des services

Un ensemble d'outils exclusifs en complément des ressources

Des modules pratiques

Opérationnels et didactiques, pour garantir l'acquisition des compétences transverses

Doc & Quiz

Des articles interactifs avec des quiz, pour une lecture constructive

ABONNEZ-VOUS

Lecture en cours
Notre conseil
Sommaire
Sommaire

    1 Bibliographie

    HAUT DE PAGE

    Cet article est réservé aux abonnés.
    Il vous reste 92% à découvrir.

    Pour explorer cet article
    Téléchargez l'extrait gratuit

    Vous êtes déjà abonné ?Connectez-vous !


    L'expertise technique et scientifique de référence

    La plus importante ressource documentaire technique et scientifique en langue française, avec + de 1 200 auteurs et 100 conseillers scientifiques.
    + de 10 000 articles et 1 000 fiches pratiques opérationnelles, + de 800 articles nouveaux ou mis à jours chaque année.
    De la conception au prototypage, jusqu'à l'industrialisation, la référence pour sécuriser le développement de vos projets industriels.

    Cet article fait partie de l’offre

    Management et ingénierie de l'innovation

    (450 articles en ce moment)

    Cette offre vous donne accès à :

    Une base complète d’articles

    Actualisée et enrichie d’articles validés par nos comités scientifiques

    Des services

    Un ensemble d'outils exclusifs en complément des ressources

    Des modules pratiques

    Opérationnels et didactiques, pour garantir l'acquisition des compétences transverses

    Doc & Quiz

    Des articles interactifs avec des quiz, pour une lecture constructive

    ABONNEZ-VOUS