Faire du scraping avec Google Dorks - Exemple

-
Faire du scraping avec Google Dorks - Exemple


Faire du scraping avec Google Dorks - Exemple

Voici une méthode qui peut être intéressante pour le scraping en s'aidant des résultats de recherche avancée de Google (aussi appelée Google Dorks).

Sommaire :

Google dorks c'est quoi ?

Les Google Dorks sont les recherches avancées de Google. Il existe des commandes pour chercher sur un site web spécifique, une URL, des fichiers .pdf, etc...

Pour les utiliser, il suffit de les taper dans la barre de recherche Google.

Il existe aussi une page web pour construire ces recherches plus aisément. : https://www.google.com/advanced_search

Quelques commande Google Dorks

  1. Recherche d'un mot exact :

    • Utilisation : "mot exact"
    • Exemple : "intelligence artificielle"

  2. Exclure un mot :

    • Utilisation : -mot
    • Exemple : pomme -iphone

  3. Recherche dans un site spécifique :

    • Utilisation : site:domaine.com
    • Exemple : intelligence artificielle site:wikipedia.org

  4. Rechercher une URL spécifique :

    • Utilisation : inurl:mot
    • Exemple : inurl:blog

  5. Rechercher un texte dans le titre de la page :

    • Utilisation : intitle:mot
    • Exemple : intitle:recette

  6. Rechercher des mots dans le texte :

    • Utilisation : intext:mot
    • Exemple : intext:"machine learning"

  7. Recherche de fichiers spécifiques :

    • Utilisation : filetype:type
    • Exemple : introduction machine learning filetype:pdf

  8. Recherche de pages liées :

    • Utilisation : link:domaine.com
    • Exemple : link:openai.com

  9. Recherche de pages qui mentionnent un certain mot, mais sans le mot lui-même :

    • Utilisation : info:domaine.com
    • Exemple : info:openai.com

  10. Recherche par plage de nombres :

    • Utilisation : mot $X..$Y
    • Exemple : laptop $500..$1000

  11. Rechercher dans le cache Google d'une URL :

    • Utilisation : cache:URL
    • Exemple : cache:openai.com

Exemple Google Dorks pour le scraping

Voila quelques exemple concret d'utilisation pour le scraping.

Recherche d'une page contact d'un site web specifique :

 -   site:bvl-menuiserie.fr inurl:contact

scraping google dorks

Recherche d'un sitemap :

 -   site:m-habitat.fr "sitemap"

scraping google dorks

Recherche de menuisier à paris avec une page contact :

 -   "menuisier" "paris" email inurl:contact

scraping google dorks

Scraper les résultats de recherche Google

Une fois que vous avez trouvé les résultats qui vous intéressent, il va falloir scraper le contenu (si vous avez beaucoup de pages).

Il existe plusieurs solutions, personnellement j'utilise le logiciel "Browser Automation Studio" de Bablosoft.

C'est un logiciel gratuit qui permet de scraper et d'automatiser des tâches. Il n'est pas simple d'utilisation, si vous souhaitez vous former, j'ai créé une formation.

Lien formation Browser Automation Studio

Il existe d'autres logiciels comme Octoparse ou Outscraper, mais le plus souvent payants ou très limités en version gratuite.

Si vous souhaitez que je scrape des résultats de recherche pour vous, je peux le faire, n'hésitez pas à me contacter.

Commentaires

Enregistrer un commentaire

🖐 Hello,
N'hésitez pas à commenter ou vous exprimer si vous avez des trucs à dire . . .👉

Posts les plus consultés de ce blog

77 Tactiques éprouvées pour diriger le trafic vers votre site web en 2022 et au-delà

-
Image
77 Tactiques éprouvées pour diriger le trafic vers votre site web en 2022 et au-delà 77 Tactiques éprouvées pour diriger le trafic vers votre site web Matteo Duò ,  20 juillet 2021 Partages Fermer Vous avez donc mis en place votre site, mais vous ne savez pas comment attirer du trafic vers votre site ? Ne vous inquiétez pas, vous n’êtes pas seul. Avec tout ce qui a été écrit sur l’amélioration du trafic, il est difficile de distinguer ce qui marchera de ce qui ne marchera pas pour vous. Vous êtes pressé ? Enregistrez cet article en PDF. Fatigué de faire défiler les pages ? Téléchargez une version PDF pour faciliter la lecture hors ligne et partager avec vos collègues. Télécharger Cet article n’énumère pas toutes les méthodes permettant d’augmenter le trafic. Au lieu de cela, il énumère les tactiques éprouvées qui fonctionnent. Ça vous paraît bien ? Comment diriger le trafic vers votre site web Pour faciliter les choses, nous avons divisé les tactiques en plusieurs catégories : Table de
Lire la suite

100 outils pour lancer sa startup sans argent (mais pas sans talent)

-
Image
100 outils pour lancer sa startup sans argent (mais pas sans talent) 100 outils pour lancer sa startup sans développeur ni graphiste (et presque sans argent) Vous êtes entrepreneur·e ? Maddyness vous a concocté un véritable kit pour créer, faire grandir et même vendre votre startup. Du recrutement au financement, vous retrouverez astuces et bonnes pratiques pour vous sortir de ce labyrinthe qu'est l'entrepreneuriat. Dans cette fiche : une centaine d'outils pour se lancer en économisant son temps, et son argent ! PARTAGER SIGNALER UNE ERREUR ENREGISTRER PDF / EXPORTER DANS CET ARTICLE 1. Le graphisme (design, photos, vidéos...) 2. Le prototypage 3. Le site de présentation et la landing page 4. Un site e-commerce 5. Les outils social media (contenus, reach, automatisation...) 6. L'emailing 7. La gestion de projet (communiquer, brainstormer, organiser) 8. La vente 9. Les applications mobiles 10. L'administratif, le financier, le réglementaire 11. L'analytique et le
Lire la suite

Les meilleurs outils de recherche pour écrire du contenu tueur

-
Image
Ma liste (incroyablement grande) d'outils de référencement et d'autres ressources utiles BY  PORTENT TEAM  /  NOVEMBER 18 2014 Je suis sur le point d'atteindre la barre des 5 ans de travail dans l'industrie du marketing en ligne, et une chose que j'ai toujours trouvée remarquable est l'ouverture et le partage que les gens dans ce domaine ont tendance à être.  Qu'il s'agisse de stratégies, de tactiques, de mises à jour, de techniques ou d'outils - les gens de cet espace partagent beaucoup, et souvent la profondeur et l'étendue sont exceptionnelles. Je trouve que cela est vrai en ligne et hors ligne - je lis beaucoup d'articles de blog de l'industrie et j'assiste à de nombreux ateliers et conférences et les gens sont généralement assez passionnés par ce qu'ils font ;  et cette passion se traduit souvent par des contributions au reste d'entre nous dans la communauté du marketing en ligne. De nos jours, en tant que stratège SEO de
Lire la suite

+400 cadeaux géniaux pour les entrepreneurs et les petites entreprises

-
+400 cadeaux géniaux pour les entrepreneurs et les petites entreprises Tous les outils et ressources gratuits pour les entrepreneurs et les startups -> Entreprise <- SITE WEB GRATUIT HTML5 UP :  modèles de sites responsive HTML5 et CSS3. Bootswatch :  thèmes gratuits pour Bootstrap. Modèles :  Une collection de 845 modèles de sites CSS et HTML5 gratuits. WordPress.org  |  WordPress.com :  Créez votre nouveau site Web gratuitement. Strikingly :  Sites Web optimisés pour mobiles gratuits et illimités pour des domaines remarquables. Layers :  Un constructeur de site WordPress si simple.  C'est gratuit, pour toujours. Bootstrap Zero :  La plus grande collection de modèles Bootstrap gratuits et open source. Landing Harbour :  Faites la promotion de votre application mobile avec une page de destination gratuite. MARQUE ET LOGO GRATUITS Logaster :  créateur et générateur de logo en ligne professionnel. Générateur de logo hipster :  c'est branché, c'est actuel, c'est élég
Lire la suite

Dorks/dorks.txt

-
Dorks/dorks.txt au niveau du maître · DefWolf/Dorks · GitHub ************************ ** MOT DE PASSE FTP DORKS ** ************************ +htpasswd +WS_FTP.LOG type de fichier:log "index of/" "ws_ftp.ini" "répertoire parent" Remplacez vulnérablesite.com par le site que vous souhaitez rechercher) "allinurl : "Vulnerablesite.com" WS_FTP.LOG type de fichier : log" ******************************** ** DORKS DUMP MOT DE PASSE SQL ** ******************************** 1.) Décharges SQL enregistrées dans la recherche de base de données. (Certains des mots de passe les plus courants pour vous) : a.) "123456" = mot de passe haché ext:sql intext:mad:gmail.com intext:e10adc3949ba59abbe56e057f20f883e b.) "654321" = mot de passe haché ext:sql intext:mad:gmail.com intext:c33367701511b4f6020ec61ded352059 c.) "mot de passe" = mot de passe haché ext:sql intext:mad:gmail.com intext:5f4dcc3b5aa765d61d8327deb882cf99
Lire la suite

T🌴'artistiK -📗 Books and Publications Spotlight | Lulu

-
Image
T-artistiK - Books and Publications Spotlight | Lulu https://www.lulu.com/spotlight/tartistik/ À propos de T-artistiK Tous les outils pros et les contenus pour les acteurs,comédiens,animateurs,villages-vacances,hôtels-club,troupes/atelier, asso ou cours/formation… .  Passionés d'animation & de Spectacle PROs ou AMATEURs et VOUS…;aussi pour passer de très bonnes soirées entre amis ….  …AMBIANCE & RIRES 100% GARANTIS….  !  A lire sans modération, à toutes heures et à toutes occasions n'importe quand dans la journée pour retrouver le Sourire et la BONNE HUMEUR !  !  Idéal pour être en pleine santé & pleine forme… Que du BIEN ETRE…!  Retrouvez-nous également sur : https://sites.google.com/view/ql--lp/Accueil/web-creations/lulu-comspotlightquizziland?authuser=0 - RÉFÉRENCE dans les domaines de l'Animation & du Spectacle pro & amateur .  .................................................. .................................................. Publications de T-arti
Lire la suite

Smart Copy - FREE - Créez du contenu en quelques minutes, pas des semaines avec AI Copywriting

-
Image
Smart Copy - Créez du contenu en quelques minutes, pas des semaines avec AI Copywriting Prix Connexion S'inscrire Snazzy AI est maintenant Smart Copy par Unbounce Découvrez notre nouveau look ! Commencez - Gratuit! ✓ Aucune carte de crédit nécessaire ! ✓ Aucune limite de temps sur le plan gratuit Smart Copy fait désormais partie de la famille Unbounce !  Lire la suite Nous écrasons la rédaction Smart Copy est le moyen le plus simple de créer du contenu pour votre marque. Donnez vie à votre contenu.  Construisez votre campagne Créez facilement des pages de destination, des annonces Google et des slogans. Résultats instantanés L'IA de Smart Copy fera le travail fastidieux pour vous.  3 clics pour créer une page de destination incroyable. Rédaction IA Générez du contenu humain et évolutif en quelques minutes à l'aide de notre plate-forme d'IA et d'un ensemble diversifié de modèles. LA MÉTHODE DE COPIE INTELLIGENTE Conçu pour les équipes qui comprennent la valeur d'
Lire la suite

Google Dorks List 2020 - Une aide-mémoire complète

-
Google Dorks List 2020 - Une aide-mémoire complète bunsahoy99@yahoo.comcreightonsimmons@yahoo.comcharliegray44@yahoo.comkristiemcshane@yahoo.compicturerockscooling@yahoo.comwolfcreek_woman@yahoo.comdesignsbydennistapp@yahoo.comdebantoon@yahoo.comoawanimalwelfare@yahoo.comdkbryan61@yahoo.comali_genius@yahoo.comaaamovingco@yahoo.compoh_thiam@yahoo.comsgedgewoodyarns@yahoo.com20bluestblues2002@yahoo.comtss.accounting@yahoo.compaulschoonover@yahoo.comrosalynd uley@yahoo.comcaplm@yahoo.comdah_ab88@yahoo.combelindaharp@yahoo.comct_footdoc@yahoo.communro@yahoo.comdanielsoffice07@yahoo.comky.illustrator@yahoo.comagrandisseur1@yahoo.comsondra.stevens@yahoo.comaustin_cherly@yahoo.comtckirk@yahoo.comabagden@yahoo.comhbudhu@yahoo.comyahoo.com-@hotmail.com-mattie.washington@yahoo.com36691251.666.6644amy.alston@yahoo.comalubudabes@yahoo.comphboogerylilsnot@yahoo.comjjmmg@yahoo.commainhouseantiqu@yahoo.comlactownaaa@yahoo.commadzikangam@yahoo.co.uktiffyt3@yahoo.comjda.ocns@yahoo.comlyzagatmaytan@yaho
Lire la suite

💯 TOP full LiSTE Outils marketing 2022

-
Image
Outils marketing Vos besoins Outils Formations Cours Gratuits Contact Outils marketing J’ai rassemblé dans cet article la liste des meilleurs logiciels marketing les plus utiles pour des PME et des Freelances. Ces outils peuvent être gratuits ou payants, avec différentes alternatives. La liste est également actualisée au fil du temps avec de nouvelles solutions. Voici la liste des nouveaux ajouts. Tapez le nom de l’outil dans votre moteur de recherches (CTRL + F) pour voir l’analyse critique dans cette page : Raw Therapee – retouche d’image (colorations…) Wrike – Gestion de projets  Converkit – eMailing Sticker Mule – Impression d’autocollants Gleam – Programme d’affiliation & de parrainage InkScape – Retouche d’images vectorielles (SVG) Sumo.com pour des pop-up originales comme le Welcome Mat Clickdesk.com une solution de chat particulièrement personnalisable et puissante 5euros.com qui est une place de marché de services low cost inspirée de Fiverr Apowersoft Screen Recorder qui
Lire la suite