Scraper les emails d'un site

Scraping
1

Bonjour.
J’aimerai récupérer les emails de l’annuaire touristique du site 30 millions d’amis.
mon soucis c’est que chaque page contient seulement 15 adresses.

J’ai essayé l’outil import.io que certains d’entre vous ont conseillé dans le forum sur d’autres sujets similaires mais je dois lui demander la requête page par page… à ce rythme là autant copier-coller les e-mails un par un dans un fichier excel, je vais aussi vite!
Une solution pour récupérer tous les emails de ce site?
Merci à vous :slight_smile:

2

Hello @Soph34

Essaye de passer cette liste dans import.io (c’est la liste des départements avec un /?perpage=1000 en fin d’url) :

http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/01-ain/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/02-aisne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/03-allier/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/04-alpes-de-haute-provence/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/06-alpes-maritimes/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/07-ardeche/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/08-ardennes/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/09-ariege/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/10-aube/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/11-aude/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/12-aveyron/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/67-bas-rhin/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/13-bouches-du-rhone/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/14-calvados/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/15-cantal/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/16-charente/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/17-charente-maritime/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/18-cher/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/19-correze/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/2a-corse-du-sud/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/21-cote-dor/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/22-cotes-darmor/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/23-creuse/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/79-deux-sevres/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/24-dordogne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/25-doubs/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/26-drome/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/91-essonne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/27-eure/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/28-eure-et-loir/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/29-finistere/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/30-gard/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/32-gers/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/33-gironde/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/971-guadeloupe/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/973-guyane/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/68-haut-rhin/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/2b-haute-corse/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/31-haute-garonne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/43-haute-loire/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/52-haute-marne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/70-haute-saone/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/74-haute-savoie/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/87-haute-vienne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/05-hautes-alpes/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/65-hautes-pyrenees/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/92-hauts-de-seine/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/34-herault/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/35-ille-et-vilaine/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/36-indre/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/37-indre-et-loire/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/38-isere/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/39-jura/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/974-la-reunion/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/40-landes/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/41-loir-et-cher/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/42-loire/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/44-loire-atlantique/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/45-loiret/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/46-lot/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/47-lot-et-garonne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/48-lozere/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/49-maine-et-loire/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/50-manche/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/51-marne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/972-martinique/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/53-mayenne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/976-mayotte/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/54-meurthe-et-moselle/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/55-meuse/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/56-morbihan/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/57-moselle/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/58-nievre/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/59-nord/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/60-oise/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/61-orne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/75-paris/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/62-pas-de-calais/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/63-puy-de-dome/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/64-pyrenees-atlantiques/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/66-pyrenees-orientales/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/69-rhone/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/71-saone-et-loire/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/72-sarthe/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/73-savoie/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/77-seine-et-marne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/76-seine-maritime/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/93-seine-saint-denis/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/80-somme/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/81-tarn/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/82-tarn-et-garonne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/90-territoire-de-belfort/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/95-val-doise/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/94-val-de-marne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/83-var/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/84-vaucluse/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/85-vendee/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/86-vienne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/88-vosges/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/89-yonne/?perpage=1000
http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/78-yvelines/?perpage=1000
1 « J'aime »
3

impec! UN GRAND MERCI! une réponse rapide et méga efficace :slight_smile:
j’ai essayé avec une url pour une page et j’ai tout récupéré facilement. je ne sais pas mettre toutes les urls d’un coup dans l’outil import.io… je suis super débutante mais bien motivée :slight_smile:

4

Salut @Soph34

C’est top que ça marche ! Si récupérer les adresses mail de ce type de site est un besoin récurrent, les prochaines fois tu peux faire dans la masse avec Scrapebox. Le logiciel est payant mais très vite rentabilisé car il t’aidera pour plein de choses :slight_smile:

Pour cet exemple, tu reprends l’url : http://www.30millionsdamis.fr/conseils/en-vacances/locations-accueillant-des-animaux/dans-le-departement/ et tu demandes à la machine de scraper toutes les pages du site commençant par cette url, à la recherche des mails. Tu peux faire plusieurs sites d’un coup, et laisser tourner en vacant à tes occupations. Tu récupères ensuite le csv avec mails.

Good luck !

5

scrapebox est top.
tu peux aussi le faire via Chrome, il y a pas mal d’extensions gratuites de dispo (« emaildrop » pour l’extraction des emails par ex)

1 « J'aime »
6

Salut à tous,

Novice en la matière, je me lance. Je souhaiterais faire un scrapping de tous les professionnels de la santé inscrits sur Amelie pour récupérer les emails. Ils sont listés selon différents choix possible. Comment faire, au secours :slight_smile:
Merci de vos retours !

7

Hello,
Les emails sont ils publiques et visibles sur le site, ou tu tente de les « deviner » ?

Aurais-tu les liens des pages concernées?

8

l’annuaire des professionnels de santé se trouve ici :

par contre il n’y a pas d’email publique mais le numéro de tel + adresse

1 « J'aime »
9

Hello,

Merci pour ton retour. Non, les emails ne sont pas visibles ni publiques. Je ne sais pas si c’est possible de les avoirs : Annuaire santé d'ameli.fr : trouver un médecin, un hôpital...
Je peux retrouver les professionnels par spécialité ou par ville etc. Mais plus je ne sais pas.

Merci

10

Oui, on a les numéros + adresses + Nom / prénoms
donc aujourd’hui il n’est pas possible de récupérer les emails par un moyen ou un autre ? Je pensais que l’on pouvais récupérer cela (je suis vraiment novice en matière de GH ^^)

Merci

11

En tout cas il ne s’agit plus de scraping ici, on passe bien dans une démarche plus globale. Il te faut identifier un process manuel valide te permettant de récupérer les emails à partir des info en ta possession, une fois ce process validé, on pourra l’automatiser.

12

J’ai automatisé l’export des datas : Num + adresse + Nom / prénom
Mais je veux aller plus loin maintenant et récupérer les emails :slight_smile:

13

il y a ici une liste d’outils de GH dont une partie sur la génération d’emails :

mais habituellement avec ce genre d’outils on essaie de trouver les emails en fonction d’un nom d’entreprise ou de site.

Avec les professionnels de la santé donc en profession libérale c’est différent.

Je ne suis pas expert mais pourquoi ne pas voir si par hasard certains de ces professionnels seraient sur linkedin ?

Une autre idée, trouver ces professionnels sur le site societe.com et récupérer le numéro de SIREN. Je me demande s’il existe des outils pour trouver les infos des prospects dont l’email à partir d’un numéro de SIREN ?

14

J’ai fais le test sur Societeinfo à partir de SIREN de pro de la santé, les résultats retournés sont sans emails pour la plupart.

Les pro de la santé ne sont pas, ou peu actifs en ligne. Du coup, Linkedin ou autre, on peut oublier, je pense que les techniques GH ne sont pas très adaptées pour ce type de profession libérales…

1 « J'aime »
15

C’est clair. Moi j’embaucherais un call center, pour faire du phoning et récolter les emails sous prétexte d’une mise en avant dans un annuaire internet.

3 « J'aime »
16

Sinon, une technique que j’avais identifiée ici. Prenons le cas de M. MORTEMOUSQUE BRUNO de Bordeaux.

Tu trouves son FB: Redirecting...

Tu passes en mode navigation privée, et tu vas dans « mot de passe oublié », là tu indiques tu l’ID du compte pour lequel tu as oublié le mot de passe est: « bruno.mortemousque »

A ce stade Facebook t’indique:

"How would you like to reset your password?
Email me a link to reset my password
be@c.fr
be@w*.fr "

Et là bingo, on joue au pendu?

J’annonce:
b******e@w.fr
[email protected]

6 « J'aime »
17

Super merci pour vos retours !!

Non, les professionnels de la santé sont très peu en ligne que ce soit sur linkedin ou autre, j’ai regardé de mon côté.
Et ils ont un numéro RPPS (un siret pour les professionnels de la santé). Peut-être que je peux les récupérer sur les différents ordres des médecins (qui sont très souvent en libéral)

Ah, sur facebook, je vais prendre ad vitam aeternam, ou alors automatiser cela.

1 « J'aime »