__  __  _ __   ____
/\ \/\ \/\`'__\/',__\
\ \ \_\ \ \ \//\__, `\
 \ \____/\ \_\\/\____/
  \/___/  \/_/ \/___/

Universal Reddit Scraper - Un outil complet de scraping de Reddit en ligne de commande écrit en Python.

[][codecov] [][releases]

Sponsors

Table des matières

• Contact
• Introduction
• Aperçu de l'utilisation
• "Où est le manuel ?"
  • Manuel URS
• GIFs de démonstration
  • Scraping de subreddits
  • Scraping de redditeurs
  • Scraping des commentaires de soumissions
  • Streaming en direct de Reddit
  • Génération de fréquences de mots
  • Génération de nuages de mots
  • Vérification des limites de taux PRAW
  • Affichage de l'arborescence des répertoires

Contact

Que vous utilisiez URS pour un usage professionnel ou personnel, je suis très intéressé par votre cas d'utilisation et par la manière dont il vous a aidé à atteindre un objectif. De plus, veuillez m'envoyer un email si vous souhaitez [contribuer][contributing manual link], avez des questions, ou voulez partager quelque chose que vous avez construit par-dessus.

[][urs project email]

Introduction

C'est un outil complet de scraping de Reddit qui intègre plusieurs fonctionnalités :

• Scraper Reddit via [PRAW][praw] (l'encapsuleur officiel de l'API Reddit en Python)
  • Scraper des subreddits
  • Scraper des redditeurs
  • Scraper les commentaires de soumissions
• Streamer Reddit en direct via PRAW
  • Streamer en direct les commentaires soumis dans des subreddits ou par des redditeurs
  • Streamer en direct les soumissions soumises dans des subreddits ou par des redditeurs
• Outils d'analyse pour les données scrapées
  • Générer des fréquences pour les mots trouvés dans les titres, corps et/ou commentaires de soumissions
  • Générer un nuage de mots à partir des résultats du scraping

Aperçu de l'utilisation

[-h]
[-e]
[-v]

[-t [<optional_date>]]
[--check]

[-r <subreddit> <(h|n|c|t|r|s)> <n_results_or_keywords> [<optional_time_filter>]]
    [-y]
    [--csv]
    [--rules]
[-u <redditor> <n_results>]
[-c <submission_url> <n_results>]
    [--raw]
[-b]
    [--csv]

[-lr <subreddit>]
[-lu <redditor>]

    [--nosave]
    [--stream-submissions]

[-f <file_path>]
    [--csv]
[-wc <file_path> [<optional_export_format>]]
    [--nosave]

"Où est le manuel ?"

[URS Manuel][urs manual]

Ce README est devenu trop long pour contenir confortablement toutes les informations d'utilisation de cet outil. Par conséquent, les informations qui se trouvaient auparavant dans ce fichier ont été déplacées vers un manuel séparé créé avec [mdBook], un outil en ligne de commande en Rust pour créer des livres à partir de fichiers Markdown.

Remarque : Vous pouvez également trouver le lien dans la barre latérale À propos de ce dépôt.

GIFs de démonstration

Voici tous les GIFs de démonstration enregistrés pour URS.

Remarque : La commande nd est [nomad][nomad], une alternative moderne à tree que j'ai écrite en Rust.

[Scraping de subreddits][subreddit scraping manual link]

![subreddit demo]

[Scraping de redditeurs][redditor scraping manual link]

![redditor demo]

[Scraping des commentaires de soumissions][submission comments scraping manual link]

![submission comments demo]

[Streaming en direct de Reddit][livestream scraping manual link]

![livestream subreddit demo]

[Génération de fréquences de mots][frequencies scraping manual link]

![frequencies demo]

[Génération de nuages de mots][wordcloud scraping manual link]

![wordcloud demo]

[Vérification des limites de taux PRAW][check praw rate limits manual link]

![check praw rate limits demo]

[Affichage de l'arborescence des répertoires][display directory tree manual link]

![display directory tree demo]