GitHub affiche actuellement plus de 2 300 dépôts de Reddit scraper. On a presque l’impression d’un buffet à volonté. Sauf qu’il y a un piège : à peine 28 % d’entre eux ont montré une activité de maintenance au cours des douze derniers mois. J’ai passé les dernières semaines à explorer ces dépôts, à tester les endpoints, à lire les tickets ouverts et à recouper les infos avec les mises à jour de la politique de Reddit. L’idée : vous éviter de cloner un dépôt, de vous battre avec OAuth, puis de découvrir à minuit que tout a discrètement cassé en 2024. En 2026, le paysage des Reddit scraper GitHub ressemble à un cimetière de bonnes intentions, avec, au milieu, quelques outils vraiment utiles. Ce guide passe en revue ce qui fonctionne encore, ce qui a cassé, le moment où il faut laisser tomber le code, et comment rester du bon côté d’une application de plus en plus stricte des règles de Reddit. Si vous cherchez un raccourci, Thunderbit est l’option sans code que nous avons conçue précisément pour ce type de problème — mais je serai aussi franc sur les cas où les solutions basées sur du code restent plus pertinentes.
Qu’est-ce qu’un dépôt Reddit scraper GitHub, et pourquoi tant d’entre eux sont cassés ?
Un dépôt « reddit scraper github » est généralement un projet Python open source (ou parfois JavaScript) qui automatise la récupération de publications, de commentaires, de données utilisateur ou de médias depuis Reddit. En pratique, ils se répartissent en quatre grandes catégories :
- Wrappers d’API (comme PRAW) : utilisent l’API officielle de Reddit, nécessitent OAuth et respectent les règles de Reddit.
- Outils basés sur Pushshift/PSAW : servaient à exploiter l’immense archive Reddit de Pushshift pour les données historiques.
- Scrapers des endpoints publics
.json: ajoutent.jsonaux URL Reddit ou interrogent des endpoints publics sans authentification. - Scrapers basés sur le navigateur : utilisent Playwright, Selenium ou des extensions de navigateur pour charger les pages Reddit et extraire le contenu rendu.
Pourquoi autant de solutions ont-elles cassé ? Pour trois raisons.
- La refonte tarifaire de l’API Reddit à la mi-2023. Les limites gratuites sont passées à 100 requêtes par minute avec OAuth et seulement 10 sans OAuth. L’usage commercial plus intensif coûte désormais 0,24 $ pour 1 000 appels API. Beaucoup de dépôts avaient été conçus pour un monde où l’API était quasiment sans limite — ce monde n’existe plus.
- L’accès public à Pushshift a été révoqué. Pushshift constituait la colonne vertébrale de la recherche historique sur Reddit. Une fois Reddit l’a restreint, une grande partie des dépôts de « scraper historique » ont perdu leur principale source de données. Certains README donnent encore l’impression que ces outils sont vivants, mais la dépendance sous-jacente a disparu pour les utilisateurs ordinaires.
- Reddit a durci à la fois sa politique et son application. La mise à jour 2024 de robots.txt, la Public Content Policy de 2025 et la Responsible Builder Policy de mars 2026 montrent clairement que Reddit ne considère plus le scraping de masse comme un simple bruit de fond inoffensif. La plateforme a même déposé des plaintes contre Anthropic et SerpApi pour accès non autorisé aux données.
En résumé : cherchez « reddit scraper github » et vous obtiendrez des centaines de résultats. Les dates du dernier commit et le nombre de tickets ouverts racontent une tout autre histoire.
Le point d’étape 2026 sur les Reddit scraper GitHub : ce qui fonctionne encore
La plupart des articles concurrents ont été rédigés en 2023 ou 2024 et n’ont jamais été mis à jour. Sur les forums, les utilisateurs continuent de tomber sur des erreurs avec des dépôts qui fonctionnaient encore l’an dernier — la demande d’aide d’un utilisateur, « Keep running into Reddit API limitation error : Any ideas how I can get past this? », résume à elle seule l’expérience Reddit scraper en 2026.
J’ai mené un audit de fraîcheur, vérifié en avril 2026. Voici ce que j’ai trouvé.
PRAW : le wrapper Python officiel
Statut : ✅ fonctionne encore, avec réserves.
PRAW (Python Reddit API Wrapper) reste la base open source la plus fiable pour le scraping de Reddit. Le projet est activement maintenu — 4 099 étoiles, dernière mise à jour le 20 avril 2026, seulement 6 problèmes ouverts, et PyPI indique praw 7.8.1 (publié en octobre 2024).
Points forts : officiel, bien documenté, il abstrait la plupart des complexités de l’API Reddit.
Limites en 2026 :
- Exigences OAuth plus strictes. Il faut une application Reddit enregistrée avec une description d’usage approuvée.
- Limites de débit plus basses depuis 2024 (100 requêtes/min avec OAuth, 10 sans).
- Le plafond dur d’environ 1 000 publications par listing persiste. Les discussions sur r/redditdev et Stack Overflow confirment qu’il n’existe aucun moyen de récupérer plus de 1 000 publications par endpoint de listing.
PRAW est le choix le plus sûr si vous pouvez rester dans le cadre de l’API.
Ce n’est simplement plus un scraper de masse libre et généraliste.
Si vous voulez un guide pratique du chemin officiel via l’API, ce tutoriel s’intègre bien à cette section :
Pushshift / PSAW : l’archive qui a sombré dans l’ombre
Statut : ❌ accès public disparu.
PSAW était le wrapper Python de référence pour Pushshift, qui constituait autrefois le moyen le plus simple d’accéder aux données historiques de Reddit. En 2026, le dépôt est archivé, le README dit littéralement « THIS REPOSITORY IS STALE », et les derniers tickets ouverts incluent des perles comme « Pushshift.io UNABLE to connect » et « The code not working. Possibly due to pushshift api. »
Un accès académique peut encore exister via certains canaux, mais pour quiconque cherche aujourd’hui « reddit scraper github », Pushshift/PSAW n’est pas une option viable. Si vous avez besoin de données historiques profondes sur Reddit, il faudra vous tourner vers des accès académiques approuvés ou des voies sous licence.
snscrape (module Reddit) : partiel et peu fiable
Statut : ⚠️ partiel — pannes intermittentes, largement non maintenu.
snscrape compte 5 337 étoiles, mais la dernière mise à jour date du 15 novembre 2023. Le README indique encore que le scraping Reddit est pris en charge « via Pushshift ». Les tickets ouverts liés à Reddit incluent « Error reddit scraping » et « Reddit scraper returns no submissions before 2022-11-03 », sans activité récente de correction significative.
Il peut fonctionner pour de petites extractions ponctuelles dans certains environnements, mais il n’est pas fiable pour la production ni pour des extractions récurrentes. Considérez-le comme un outil legacy.
Playwright et scrapers d’endpoints .json : la solution de contournement qui fonctionne parfois
Statut : ✅ fonctionne, mais fragile.
L’idée est simple : utiliser un navigateur headless (Playwright, Puppeteer) pour charger les pages Reddit et scraper le contenu rendu, ou ajouter .json aux URL Reddit pour obtenir des données structurées sans l’API officielle.
Points forts : pas de clé API nécessaire, possibilité de contourner le plafond de 1 000 publications, accès au contenu rendu.
Points faibles : casse lorsque Reddit modifie son interface ou la structure JSON, peut déclencher des mesures anti-bot, et demande une configuration plus technique. Lors de mes propres tests ce mois-ci, les requêtes directes vers les endpoints publics .json de Reddit renvoyaient des réponses 403. Cela ne veut pas dire que tous les environnements seront bloqués, mais cela montre bien que le raccourci .json n’est plus quelque chose qu’il faut supposer fonctionner « tout seul ».
Des dépôts comme yars sont rafraîchissamment honnêtes à ce sujet : le README avertit les utilisateurs de « Use with rotating proxies, or Reddit might gift you with an IP ban. » C’est, en gros, l’histoire d’avril 2026 en une phrase.
Si vous évaluez la voie du contournement par automatisation du navigateur, ce tutoriel Playwright est un excellent complément à la section ci-dessous :
Thunderbit : scraping de navigateur propulsé par l’IA (sans code, sans clé API)
Statut : ✅ fonctionne — s’adapte automatiquement aux changements de page.
Thunderbit adopte une approche fondamentalement différente. C’est une extension Chrome qui utilise l’IA pour lire les pages Reddit, suggérer des champs de données (titre du post, auteur, votes, horodatage, URL, etc.) et extraire des données structurées en deux clics. Pas de configuration OAuth, pas d’enregistrement de clé API, pas d’environnement Python, pas de gestion des dépendances. L’IA relit la page à chaque fois, donc lorsque Reddit modifie sa mise en page, Thunderbit s’adapte automatiquement au lieu de casser en silence.
Export gratuit vers CSV, Google Sheets, Airtable ou Notion. Gère la pagination et le scraping de sous-pages (par exemple, extraire la liste d’un subreddit puis visiter chaque post pour récupérer les commentaires). Pour les personnes qui veulent des données Reddit sans maintenir un dépôt GitHub, c’est la voie la moins résistante.
(Transparence totale : nous avons construit Thunderbit, donc je suis biaisé — mais je serai clair plus loin dans l’article sur les cas où les solutions basées sur du code restent plus pertinentes.)
Tableau récapitulatif côte à côte
| Outil / catégorie | Toujours fonctionnel (avril 2026) ? | Clé API requise ? | Remarques |
|---|---|---|---|
| PRAW | ✅ Oui, avec réserves | Oui (OAuth) | Meilleure base open source maintenue. Contraint par les limites de débit et le plafond de 1 000 posts. |
| Pushshift / PSAW | ❌ Non (pour la plupart des utilisateurs) | N/A | Accès public disparu. Dépôt archivé. |
| snscrape (module Reddit) | ⚠️ Partiel / peu fiable | Non | Documente encore Reddit « via Pushshift ». Maintenance à l’arrêt depuis 2023. |
Scrapers .json / endpoints publics | ⚠️ Partiel | Non | Peut fonctionner, mais les requêtes directes sont de plus en plus bloquées. Dépend des proxies. |
| Playwright / scrapers de navigateur | ✅ Oui, mais fragile | Généralement non | Le contournement DIY le plus viable sans API. Les changements de page et les protections anti-bot restent importants. |
| Thunderbit | ✅ Oui | Non | Flux de travail navigateur + IA. Ni OAuth, ni sélecteurs. Idéal pour les non-développeurs. |
Limites de débit, plafond de 1 000 posts et ce qui aide vraiment
C’est le principal point de douleur pour quiconque utilise un projet reddit scraper github. Les fils de discussion sont remplis de frustration : « tired of runs dying halfway through because of rate limits », « Why am I only getting around 1,000 items? » Les deux contraintes centrales sont les limites de débit de l’API Reddit (requêtes par minute) et le plafond d’environ 1 000 publications par listing (l’API ne renvoie que les ~1 000 publications les plus récentes pour un endpoint de listing donné).
Bonnes pratiques pour gérer les limites de débit
Base publique actuelle de Reddit : 100 requêtes par minute avec OAuth, 10 sans. Voici comment les gérer en pratique :
- Backoff exponentiel. Si vous recevez une réponse de limitation, attendez, puis recommencez avec un délai plus long à chaque tentative (1 s, 2 s, 4 s, 8 s…). N’insistez pas brutalement sur l’endpoint.
- Lisez les en-têtes
X-Ratelimit-Remaining. Les réponses de l’API Reddit incluent des en-têtes qui indiquent combien de requêtes il vous reste et quand la fenêtre se réinitialise. Répartissez vos requêtes en fonction de ces valeurs, pas à l’aveugle. - Rotation des user-agents. Certains dépôts le recommandent pour éviter la détection. Cela peut aider, mais utilisez-le de manière éthique : ne vous en servez pas pour contourner des bannissements que vous avez mérités.
- Tout journaliser. Ajoutez des logs pour les réponses API, les en-têtes de limitation de débit et les erreurs. Quand votre scraper s’arrête à 2 h du matin, les logs sont votre meilleur allié.
Dépasser le plafond de 1 000 publications
La solution de contournement la plus crédible pour le plafond d’environ 1 000 éléments de l’API est le découpage par fenêtres temporelles :
- Interrogez une tranche temporelle à l’aide des paramètres d’horodatage
beforeetafter. - Faites avancer la fenêtre (ou reculez-la).
- Répétez.
- Dédupliquez à partir de l’ID du post.
Ce n’est pas élégant, mais c’est plus honnête que de prétendre qu’une boucle de requêtes peut extraire n’importe quel historique à partir d’un endpoint de listing. Pour de vraies données historiques, il faudrait un accès académique approuvé ou une voie sous licence : Pushshift n’est plus la réponse par défaut.
Le scraping basé sur le navigateur (Playwright ou Thunderbit) contourne complètement ce plafond puisqu’il extrait ce qui est rendu sur la page, et non ce que l’API renvoie. La fonction de pagination de Thunderbit permet de passer d’une page à l’autre et de collecter des données sur autant de pages que nécessaire.
Déduplication et récupération après erreur
La plupart des dépôts reddit scraper github ne gèrent pas la déduplication ni la récupération d’erreurs dès le départ. Les utilisateurs se plaignent explicitement que « none had deduping, rate limit avoidance after errors, checking if files are already downloaded ». Voici quoi faire :
- Déduplication : hachez l’ID de chaque post (ou l’ID + le contenu). Stockez les hachages déjà vus dans une simple base SQLite, voire dans un fichier plat. Avant d’insérer, vérifiez si le hachage existe déjà. C’est particulièrement important lorsque vous segmentez par fenêtres temporelles ou relancez des tâches échouées.
- Récupération après erreur : enregistrez l’état d’avancement dans un fichier de point de contrôle après chaque groupe de N enregistrements. Si l’exécution échoue, redémarrez depuis le dernier point de contrôle au lieu de repartir de zéro. Cela transforme une tâche de 3 heures qui échoue à la 2e heure en une reprise d’une heure.
Comment les différentes approches gèrent ces contraintes
| Approche | Gestion des limites de débit | > 1k posts ? | Dédup automatique ? | Récupération après erreur ? |
|---|---|---|---|---|
| PRAW (brut) | Manuelle (pause/retry) | ❌ (plafond API) | ❌ | ❌ |
| PRAW + découpage par fenêtres temporelles | Manuelle | ✅ (contournement) | ❌ | ❌ (sauf ajout de votre part) |
Scraping .json avec Playwright | N/A (pas d’API) | ✅ | ❌ | ❌ |
| Thunderbit (scraping navigateur) | Intégré (rythme IA) | ✅ (pagination) | N/A (relecture visuelle) | Intégré |
Quand un dépôt Reddit scraper GitHub n’est pas la bonne réponse : la voie sans code
La plupart des articles sur reddit scraper github supposent que vous maîtrisez Python. Mais beaucoup de personnes qui cherchent des solutions pour scraper Reddit sont des marketeurs, commerciaux, chercheurs ou fondateurs indépendants qui n’écrivent pas du Python tous les jours. Pour ce public, un dépôt GitHub entraîne des coûts cachés :
- configuration d’identifiants OAuth et d’une application développeur Reddit
- gestion des environnements virtuels Python et des conflits de dépendances
- débogage de messages d’erreur obscurs lorsque les internes de PRAW changent
- gestion de la révocation de la clé API si Reddit juge votre cas d’usage non approuvé
- maintenance du script à chaque changement côté Reddit
Ce ne sont pas des hypothèses. bulk-downloader-for-reddit compte 2 563 étoiles et 107 problèmes ouverts. Les signalements récents incluent « Struggling to install », « PRAW module error » et « Exception not allowing to even authenticate. »
Utilisez un dépôt GitHub si…
- vous avez besoin d’une logique de scraping personnalisée (par exemple, parcours spécifique de l’arborescence des commentaires, intégration à une chaîne NLP sur mesure)
- vous voulez l’intégrer à un pipeline de données Python existant
- vous devez scraper à très grande échelle avec un stockage personnalisé (base de données, entrepôt de données)
- vous êtes à l’aise avec la maintenance de code et la gestion des changements cassants
Utilisez un outil sans code si…
- vous avez besoin de données Reddit rapidement — en quelques minutes, pas après des heures de configuration
- vous ne voulez pas gérer de clés API, d’applications OAuth ou d’environnements Python
- vous voulez exporter directement vers des tableurs, Notion ou Airtable pour une utilisation immédiate
- vous voulez que l’outil s’adapte automatiquement lorsque la mise en page de Reddit change
Thunderbit s’inscrit pleinement dans l’approche sans code. Les utilisateurs peuvent scraper des posts, commentaires et données utilisateur Reddit en 2 clics avec des champs suggérés par l’IA, exporter gratuitement vers CSV/Google Sheets/Airtable/Notion et gérer la pagination sans écrire de code. Son scraping basé sur le navigateur signifie aucune configuration OAuth et aucun enregistrement de clé API.
Guide rapide : scraper Reddit avec Thunderbit (étape par étape)
- Installez l’extension Chrome Thunderbit.
- Accédez à la page Reddit que vous voulez scraper (subreddit, résultats de recherche, profil utilisateur).
- Cliquez sur « Suggérer les champs avec l’IA ». Thunderbit lit la page et suggère des colonnes — titre du post, auteur, upvotes, horodatage, URL, etc.
- Ajustez les champs si nécessaire, puis cliquez sur « Scraper ».
- Vérifiez le tableau de données. Vous pouvez aussi cliquer sur « Scraper les sous-pages » pour visiter chaque post et récupérer les commentaires ou des détails supplémentaires.
- Exportez vers la destination de votre choix : Google Sheets, Excel, Airtable, Notion, CSV ou JSON.
Deux minutes. Zéro ligne de code. Si vous voulez le voir en action, consultez la chaîne YouTube Thunderbit.
Faites correspondre le Reddit scraper à la tâche : matrice de décision par cas d’usage
La plupart des articles sur reddit scraper github s’organisent par outil. Il vaut mieux faire l’inverse.
Partez de votre objectif, puis remontez vers l’outil adapté.
Génération de leads et extraction de points de douleur
Ce qu’il vous faut : posts + commentaires avec filtrage par mots-clés, étiquetage IA, export vers des formats prêts pour un CRM.
Meilleure approche : scraper sans code avec enrichissement IA.
Outil recommandé : Thunderbit (étiquetage IA + export vers Google Sheets/Airtable pour import CRM).
Exemple de workflow : scraper un subreddit pour des posts mentionnant un point de douleur précis. Utiliser l’invite IA sur les champs de Thunderbit pour catégoriser le sentiment ou taguer les sujets. Exporter vers Airtable ou Google Sheet de votre équipe commerciale.
Étude de marché et validation d’idées
Ce qu’il vous faut : titres de posts en grand volume + scores, données de tendances au niveau du subreddit.
Meilleure approche : PRAW avec découpage par fenêtres temporelles pour le volume, ou Thunderbit pour des extractions rapides.
Exemple : scraper r/SaaS ou r/startups pour identifier les sujets tendance et les schémas d’upvotes sur les 90 derniers jours.
Archivage d’images et de médias
Ce qu’il vous faut : URL de médias, déduplication, exécutions planifiées.
Meilleure approche : dépôt GitHub spécialisé (par exemple bulk-downloader-for-reddit) + tâche cron.
Remarque : la déduplication est cruciale ici — la même image postée dans plusieurs subreddits, c’est courant.
Recherche académique et données historiques
Ce qu’il vous faut : données historiques, arbres complets de commentaires, grands jeux de données.
Meilleure approche : accès académique approuvé ou voie d’accès sous licence. Pushshift n’est plus une réponse générale.
Point de réalité : c’est le cas d’usage le plus difficile en 2026 à cause des restrictions de Pushshift et du durcissement des politiques de données de Reddit.
Veille concurrentielle et scraping planifié
Ce qu’il vous faut : extractions récurrentes à intervalles définis, détection de changements.
Meilleure approche : Extracteur Programmé de Thunderbit (décrivez l’intervalle en langage naturel, saisissez les URL, cliquez sur Planifier) ou cron + script pour les utilisateurs orientés code.
Tableau de décision par cas d’usage
| Cas d’usage | Ce qu’il vous faut | Meilleure approche | Outil exemple |
|---|---|---|---|
| Génération de leads / extraction de points de douleur | Posts + commentaires, filtrage par mots-clés, étiquetage IA | Scraper sans code + enrichissement IA | Thunderbit |
| Étude de marché / validation d’idées | Titres de posts à fort volume + scores, données au niveau du subreddit | PRAW + découpage par fenêtres temporelles ou Thunderbit | PRAW ou Thunderbit |
| Archivage d’images/médias | URL de médias, dédup, exécutions planifiées | Dépôt GitHub spécialisé + cron | bulk-downloader-for-reddit |
| Recherche académique | Données historiques, arbres complets de commentaires | Accès académique approuvé ou Playwright | API académique Pushshift (si accessible) |
| Veille concurrentielle / planifiée | Extractions récurrentes, détection de changements | Extracteur Programmé | Thunderbit Scheduled Scraper ou cron + script |
Comment évaluer n’importe quel dépôt Reddit scraper GitHub avant de vous engager
Avant de cloner un dépôt et de commencer à déboguer, faites ce contrôle de santé de 5 minutes. Il vous fera gagner des heures.
Le contrôle de santé du dépôt en 5 minutes
- Date du dernier commit. Si elle remonte à plus de 6 mois, avancez avec prudence. L’API Reddit change souvent.
- Rapport entre problèmes ouverts et problèmes fermés. Un grand nombre de tickets sans réponse est un signal d’alerte. Vérifiez si des incidents récents mentionnent des échecs d’authentification, des 403 ou des pannes de Pushshift.
- Fichier LICENSE. Vérifiez s’il existe. Pas de licence = flou juridique (j’y reviens plus bas).
- Dépendances. Les bibliothèques requises sont-elles à jour ? Le projet utilise-t-il des paquets obsolètes ? Un
requirements.txtrempli de versions figées de 2022 est un mauvais signe. - Qualité du README. Explique-t-il clairement la configuration ? Y a-t-il des exemples d’utilisation ? Une mauvaise documentation = plus de temps de débogage pour vous.
- Étoiles vs forks vs activité récente. Beaucoup d’étoiles mais peu d’activité récente peuvent signifier que le projet a été populaire mais est désormais abandonné. Comparez les étoiles à la date
pushed_at.
Petit exemple : PSAW a 364 étoiles — cela semble crédible au premier coup d’œil. Mais le dépôt est archivé et le README indique « THIS REPOSITORY IS STALE. »
Les étoiles seules ne racontent pas toute l’histoire.
Conseils pour tirer le meilleur parti de votre configuration Reddit scraper GitHub
Si vous choisissez malgré tout la voie du code, voici comment vous épargner des migraines.
Utilisez toujours un environnement virtuel
Un environnement virtuel isole les dépendances de votre scraper afin qu’elles n’entrent pas en conflit avec d’autres projets Python. Une commande suffit : python -m venv venv, puis activez-le avant d’installer quoi que ce soit. C’est de l’hygiène de base, mais j’ai vu suffisamment de tickets GitHub intitulés « module not found » pour savoir que cela mérite d’être répété.
Stockez vos identifiants en toute sécurité
N’inscrivez jamais en dur l’ID client ou le secret de votre API Reddit dans le script. Utilisez des variables d’environnement ou un fichier .env, et ajoutez .env à votre .gitignore. Si vous poussez accidentellement des identifiants sur GitHub, faites-les tourner immédiatement — des bots scannent les clés API exposées.
Tout journaliser
Ajoutez des logs pour les réponses API, les en-têtes de limitation de débit et les erreurs. Quand quelque chose casse, les logs font la différence entre « je sais exactement ce qui s’est passé » et « je n’ai aucune idée de la raison de l’arrêt ».
Planifiez et automatisez avec discernement
Si vous lancez des extractions récurrentes, utilisez cron (Linux/Mac) ou le Planificateur de tâches (Windows) — mais surveillez les échecs. Un cron qui échoue silencieusement pendant deux semaines est pire que pas d’automatisation du tout.
Alternative : l’Extracteur Programmé de Thunderbit vous permet de décrire l’intervalle en langage naturel, sans syntaxe cron.
Bonnes pratiques juridiques et éthiques pour le scraping Reddit
Ce n’est pas un simple avertissement de façade. Reddit applique agressivement ses conditions depuis les changements d’API de 2023, et le scraping de données personnelles entraîne un vrai risque juridique.
Voici ce qui compte réellement.
Conditions d’utilisation de Reddit : ce qu’elles disent vraiment
L’User Agreement de Reddit (révisé jusqu’au 31 mars 2026) interdit explicitement d’accéder, rechercher ou collecter des données depuis les services par des moyens automatisés, sauf autorisation prévue par les conditions ou par un accord séparé. Les Data API Terms et Developer Terms précisent davantage : Reddit peut surveiller et auditer l’usage des développeurs, modifier ou interrompre l’accès, et bloquer définitivement l’accès en cas d’usage excessif ou abusif. L’usage commercial nécessite généralement une approbation explicite.
La Responsible Builder Policy de mars 2026 va plus loin : une approbation est requise avant d’accéder aux données Reddit via l’API, la commercialisation non approuvée ainsi que les usages liés à l’IA et à l’exploration de données sont interdits, et l’application peut inclure la révocation des jetons, la suspension d’applications ou de comptes, ainsi que la suspension des bots ou domaines associés.
Conformité à robots.txt
Le robots.txt actuel de Reddit est inhabituellement restrictif :
User-agent: *
Disallow: /
Cela interdit globalement tous les agents utilisateurs automatisés. Il renvoie aussi à la Public Content Policy. C’est bien plus strict que les modèles permissifs de robots.txt que certains développeurs supposent encore à partir d’anciennes normes de web scraping.
Bonne pratique : vérifiez toujours robots.txt avant de scraper, même si votre outil ne le fait pas automatiquement.
Données personnelles et vie privée (RGPD/CCPA)
Si vous scrapez des noms d’utilisateur, l’historique de publications ou toute information personnellement identifiable, le RGPD (UE) et le CCPA (Californie) peuvent s’appliquer. Bonne pratique : anonymisez ou agrégez les données personnelles avant stockage. Ne construisez pas de profils d’utilisateurs individuels sans base légale.
Licence des dépôts GitHub : vérifiez avant de construire
Beaucoup de dépôts reddit scraper github utilisent des licences MIT ou Apache (permissives), mais certains n’ont pas de fichier de licence du tout — ce qui, juridiquement, signifie « tous droits réservés ». Avant de forker, modifier ou bâtir sur un dépôt, vérifiez toujours le fichier LICENSE. Pas de licence = flou juridique, quel que soit le nombre d’étoiles.
L’application des règles est bien réelle en 2025–2026
L’histoire de l’application chez Reddit ne s’est pas arrêtée en 2023. Reddit a déposé une plainte contre Anthropic en 2025, alléguant un scraping / usage non autorisé de contenus Reddit, et a également poursuivi Reddit v. SerpApi fin 2025. Ce sont des signes que Reddit est prêt à aller vers des actions juridiques, pas seulement des blocages techniques.
Choisir la bonne approche Reddit scraper GitHub en 2026
Le paysage reddit scraper github a radicalement changé depuis 2023. La plupart des dépôts sont obsolètes. Les limites de débit et le plafond de 1 000 posts sont des contraintes réelles. Pushshift n’existe plus pour les utilisateurs ordinaires. Et la pile de politiques de Reddit est à la fois plus explicite et plus appliquée que jamais.
En bref :
- PRAW reste la base open source la plus fiable si vous acceptez les limites de l’API Reddit et souhaitez construire une logique personnalisée.
- Pushshift/PSAW n’est plus une réponse générale.
- Le module Reddit de snscrape est du legacy et n’est pas fiable.
- Les scrapers
.jsonet les endpoints publics sont fragiles et souvent bloqués en 2026. - Les outils basés sur le navigateur — qu’il s’agisse de dépôts Playwright ou d’options sans code comme Thunderbit — sont la voie la plus pratique pour beaucoup d’utilisateurs, en particulier les non-développeurs.
Commencez par votre cas d’usage, pas par l’outil. Faites le contrôle de santé du dépôt en 5 minutes avant de vous engager sur un projet GitHub.
Et si vous préférez éviter la configuration et commencer à scraper Reddit en quelques minutes, essayez Thunderbit.
Essayez Thunderbit pour le scraping Reddit Get Started Free
FAQ
Quels sont les meilleurs scrapers Reddit open source sur GitHub en 2026 ?
PRAW reste le wrapper API le plus fiable, avec une maintenance active et une bonne documentation. URS est un outil CLI crédible et maintenu, construit sur PRAW. Les scrapers basés sur Playwright fonctionnent pour le scraping sans API, et le module Reddit de snscrape reste partiellement fonctionnel mais largement non maintenu. Vérifiez toujours la date du dernier commit et les tickets ouverts avant d’utiliser un dépôt — la majorité des plus de 2 300 dépôts Reddit scraper sur GitHub sont périmés.
Est-il légal de scraper Reddit ?
Le scraping de données publiquement accessibles se situe dans une zone grise juridique, mais les propres conditions de Reddit sont restrictives. L’User Agreement, les Data API Terms, la Public Content Policy, la Responsible Builder Policy et le robots.txt s’opposent tous au scraping de masse non autorisé. La redistribution commerciale de données scrapées peut nécessiter l’autorisation explicite de Reddit. Si vous scrapez des données personnelles, le RGPD et le CCPA peuvent aussi s’appliquer.
Comment contourner les limites de débit de l’API Reddit ?
Utilisez le backoff exponentiel, surveillez les en-têtes X-Ratelimit-Remaining et envisagez le découpage par fenêtres temporelles pour rester dans les limites. Le scraping basé sur le navigateur (Playwright ou Thunderbit) contourne les limites de l’API puisqu’il extrait des pages rendues, mais comporte ses propres contraintes (vitesse de chargement, mesures anti-bot). Il n’existe pas de formule magique pour supprimer totalement les limites de débit — elles sont appliquées côté serveur.
Peut-on scraper Reddit sans clé API ?
Oui. Les scrapers basés sur Playwright et l’astuce de l’URL .json ne nécessitent pas de clé API. Thunderbit n’en nécessite pas non plus puisqu’il scrape via le navigateur. Les compromis : les endpoints .json sont de plus en plus bloqués (retour 403 dans de nombreux environnements en avril 2026), et le scraping via navigateur est plus lent et plus gourmand en ressources que les appels API.
Qu’est-il arrivé à Pushshift pour le scraping Reddit ?
L’accès public à l’API Pushshift a été supprimé à la suite des changements de licence de données de Reddit à partir de 2023. Le wrapper PSAW est archivé et obsolète. Un accès académique limité peut encore exister via certains canaux approuvés, mais pour la plupart des personnes qui cherchent aujourd’hui « reddit scraper github », Pushshift n’est plus une option viable. Si vous avez besoin de données historiques profondes sur Reddit, renseignez-vous sur les voies académiques ou sous licence approuvées par Reddit.
En savoir plus
