Aspirer le contenu d'une page web ?

[Geb]

Bonjour,

Ma question est simple : est-il possible d' "aspirer" automatiquement le contenu d'une recherche Google scholar ?

Souvent, je me trouve bien malgré moi à faire de la curation de contenu scientifique sur des sujets précis et ça me prend un temps considérable.

Par exemple, si je souhaitais faire un copier/coller des pages présentant les 849 publications apparues depuis 2017 qui, d'après Google scholar, contiennent la mention "origin of the genetic code", suis-je obligé de faire un copier-coller manuel, page par page (pour les transférer par exemple dans un fichier Word), ou existe-t-il une (des) méthode(s) plus rapide(s) ?

Cordialement.
-----

[umfred]

voir avec httrack https://www.httrack.com/

[vgondr98]

Il y a l'api de google-scholar : https://serpapi.com/google-scholar-api

[vgondr98]

Il faut s'inscrire en cliquant sur le bouton register pour obtenir la clef secrète puis tester cette url : https://serpapi.com/search.json?engi...secret_api_key.
On obtient le résultat sous la forme d'un json.
Voila, l'url pour obtenir la première page et 20 résultats par page (c'est limité à 20)
https://serpapi.com/search.json?engi...num=20&start=0

[A voir en vidéo sur Futura]