MetaFinder

Recherche des documents dans un domaine via les moteurs de recherche. L'objectif est d'extraire les métadonnées.

Installation :

> pip3 install metafinder

Les mises à jour sont également disponibles via :

> pip3 install metafinder --upgrade

Utilisation

MetaFinder peut être utilisé de 2 manières :

CLI

metafinder -d domain.com -l 20 -o folder [-t 10] -go -bi -ba

Paramètres :

• d : Spécifie le domaine cible.
• l : Spécifie le nombre maximum de résultats à rechercher dans les moteurs de recherche.
• o : Spécifie le chemin pour enregistrer le rapport.
• t : Optionnel. Permet de configurer les threads (4 par défaut).
• v : Affiche la version de Metafinder.
• Moteurs de recherche à sélectionner (Google par défaut) :
  • go : Optionnel. Rechercher dans Google.
  • bi : Optionnel. Rechercher dans Bing.
  • ba : Optionnel. Rechercher dans Baidu. (Expérimental)

Dans le code

import metafinder.extractor as metadata_extractor

documents_limit = 5
domain = "target_domain"
result = metadata_extractor.extract_metadata_from_google_search(domain, documents_limit)
# result = metadata_extractor.extract_metadata_from_bing_search(domain, documents_limit)
# result = metadata_extractor.extract_metadata_from_baidu_search(domain, documents_limit)
authors = result.get_authors()
software = result.get_software()
for k,v in result.get_metadata().items():
    print(f"{k}:")
    print(f"|_ URL: {v['url']}")
    for metadata,value in v['metadata'].items():
        print(f"|__ {metadata}: {value}")

document_name = "test.pdf"
try:
    metadata_file = metadata_extractor.extract_metadata_from_document(document_name)
    for k,v in metadata_file.items():
        print(f"{k}: {v}")
except FileNotFoundError:
    print("File not found")

Exemple

Auteur

Ce projet a été développé par :

• Josué Encinar García -- @JosueEncinar

Contributeurs

• Félix Brezo Fernández -- @febrezo

Avertissement !

Ce logiciel est conçu pour ne laisser aucune trace dans les documents que nous téléchargeons sur un domaine. L'auteur n'est pas responsable de toute utilisation illégitime.