Substack Scraper dari Thunderbit membantu Anda mengubah halaman Substack menjadi dataset yang rapi dan terstruktur dengan bantuan AI. Anda bisa mengekstrak daftar newsletter, kategori, penulis, serta detail publikasi dari Substack Discover dan halaman bergaya resource/leaderboard, lalu memperkaya hasilnya dengan men-scrape subpage untuk informasi yang lebih mendalam. Ekspor data ke Excel, Google Sheets, Airtable, atau Notion dalam hitungan menit dengan AI Web Scraper (https://thunderbit.com/ai-web-scraper).
🧠 Apa itu Substack Scraper
Substack Scraper bertenaga AI adalah sebuah yang memungkinkan Anda mengambil data dari lewat alur yang sederhana: buka halaman, klik AI Suggest Columns, lalu klik Scrape. AI Thunderbit akan membaca struktur halaman, merekomendasikan field terbaik untuk diekstrak, dan menyusunnya menjadi tabel yang bisa Anda unduh atau kirim ke tools kerja Anda.
🧾 Apa saja yang bisa Anda scrape dari Substack
Substack menyimpan banyak informasi publik yang bernilai untuk riset, kemitraan, pemantauan media, dan pengembangan audiens. Dengan Thunderbit, Anda dapat men-scrape halaman listing (seperti Discover), lalu memakai Subpage Scraping untuk membuka setiap halaman newsletter/publikasi agar dataset Anda makin kaya dengan detail yang tidak terlihat di tampilan daftar.
Berikut dua workflow umum dengan nilai tinggi yang sering digunakan dengan Substack Scraper.
🗞️ Scrape Newsletter dari Substack Discover
Gunakan ini untuk membangun database newsletter dari halaman . Cocok saat Anda ingin mencari publikasi berdasarkan topik, menilai calon partner sponsorship, atau memantau tren lintas kategori.
Langkah-langkah:
- Unduh dan buat akun.
- Buka halaman tujuan, misalnya: .
- Klik AI Suggest Columns agar AI merekomendasikan nama kolom dan tipe data.
- Klik Scrape untuk menjalankan scraper, lalu ekspor ke Excel, Google Sheets, Airtable, atau Notion.
Nama kolom
| Kolom | Deskripsi |
|---|---|
| 📰 Nama Newsletter / Publikasi | Nama newsletter atau publikasi yang tampil di Discover. |
| 🔗 URL Publikasi | Tautan ke halaman publikasi (ideal untuk enrichment lewat subpage). |
| ✍️ Penulis / Kreator | Penulis atau brand di balik publikasi, jika ditampilkan. |
| 🏷️ Kategori / Topik | Tag kategori yang terkait dengan listing (mis. Tech, Politics, Culture). |
| 📝 Deskripsi | Ringkasan singkat/positioning yang tampil pada listing. |
| 👥 Jumlah Subscriber | Angka subscriber jika ditampilkan (atau kosongkan lalu perkaya via subpage). |
| 🖼️ Gambar Publikasi | URL logo/cover image publikasi. |
| ⭐ Label Unggulan / Peringkat | Badge featured, label trending, atau indikator posisi yang tampil di halaman. |
🏆 Scrape Publikasi Teratas dari Substack Leaderboard (Resources)
Workflow ini digunakan untuk mengekstrak daftar publikasi terkurasi dari halaman bergaya resources/leaderboard milik Substack: . Berguna untuk riset kompetitor, outreach kemitraan, dan menyusun daftar lanskap media per niche.
Langkah-langkah:
- Unduh dan buat akun.
- Buka halaman tujuan, misalnya: .
- Klik AI Suggest Columns untuk membuat rekomendasi field sesuai layout halaman.
- Klik Scrape untuk mengekstrak tabel, lalu unduh atau ekspor data Anda.
Nama kolom
| Kolom | Deskripsi |
|---|---|
| 🏷️ Nama Publikasi | Nama publikasi yang tercantum di halaman. |
| 🔗 URL Publikasi | Tautan langsung ke publikasi (ideal untuk subpage scraping). |
| 🧑💼 Penulis / Tim | Nama penulis atau organisasi di balik publikasi, jika ditampilkan. |
| 🗂️ Kategori / Koleksi | Bagian atau pengelompokan tempat publikasi muncul (jika ada). |
| 📝 Ringkasan | Deskripsi singkat atau positioning. |
| 👥 Subscriber / Audiens | Indikator ukuran audiens yang ditampilkan di halaman. |
| 🖼️ Logo / Gambar | URL logo atau thumbnail publikasi. |
| 🕒 Terakhir Diperbarui / Kebaruan | Sinyal recency yang ditampilkan (atau ambil dari subpage jika tersedia). |
🎯 Kenapa Menggunakan Tool Substack
Men-scrape Substack bisa mendukung workflow bisnis nyata, terutama saat Anda membutuhkan data terstruktur untuk analisis, outreach, atau monitoring.
Alasan umum orang men-scrape Substack dengan :
- Marketing & kemitraan: Susun daftar newsletter untuk outreach sponsorship, cross-promotion, atau affiliate partnership. Anda bisa memperkaya daftar dengan men-scrape subpage untuk link kontak dan detail publikasi.
- Sales & lead generation: Temukan kreator dan publikasi niche yang sesuai ICP Anda, lalu ekspor ke Google Sheets atau Airtable untuk membangun pipeline.
- Riset media & analisis kompetitor: Pantau kategori, positioning, dan sinyal pertumbuhan antar publikasi untuk memahami apa yang sedang naik daun.
- Strategi konten: Petakan topik dan deskripsi newsletter untuk menemukan gap, tema yang muncul, dan segmen audiens.
Thunderbit sangat membantu ketika:
- Layout halaman sering berubah sehingga scraper tradisional mudah rusak
- Anda ingin Subpage Scraping untuk memperkaya setiap baris dengan info publikasi yang lebih dalam
- Anda ingin ekspor cepat ke tools yang sudah Anda pakai (Sheets, Airtable, Notion)
Jika Anda baru mulai scraping, panduan berikut bisa membantu:
🧩 Cara Menggunakan Substack Chrome Extension
- Instal Thunderbit Chrome Extension: Ambil dari dan buat akun.
- Buka halaman Substack yang ingin Anda scrape: Misalnya atau .
- Aktifkan scraper bertenaga AI: Klik AI Suggest Columns untuk membuat nama kolom, sesuaikan field yang Anda perlukan, lalu klik Scrape.
Tip: Setelah scrape pertama, gunakan Scrape Subpages agar Thunderbit mengunjungi setiap URL publikasi dan menambahkan field tambahan (mis. deskripsi lebih panjang, detail penulis, tautan, atau metadata lain yang terlihat) kembali ke tabel Anda.
💳 Harga untuk Substack
Thunderbit memakai sistem kredit yang dibuat sederhana:
- 1 kredit = 1 baris output pada tabel hasil.
- Pengalaman AI Powered Scraper (AI Suggest Columns + Scrape) tersedia sejak awal, dan ekspor data gratis (CSV/JSON, Excel, Google Sheets, Airtable, Notion).
Anda bisa mencoba Thunderbit tanpa biaya:
- Paket gratis: scrape 6 halaman per bulan
- Free trial: scrape 10 halaman gratis sebelum memilih paket berbayar
Jika Anda men-scrape Substack Discover dan mendapatkan 200 baris newsletter, itu kira-kira 200 kredit untuk sekali jalan. Jika kemudian Anda memperkaya baris-baris tersebut dengan subpage scraping, total kredit bergantung pada berapa banyak baris yang Anda hasilkan setelah enrichment.
Paket berbayar (bulanan dan tahunan) tersedia untuk berbagai kebutuhan volume, dan paket tahunan biasanya lebih hemat karena ada diskon dibanding bayar per bulan. Lihat detail lengkap di .
| Tier | Harga (Bulanan) | Harga (Tahunan) | Total Harga Tahunan | Kredit (Bulanan) | Kredit (Tahunan) |
|---|---|---|---|---|---|
| Free | Free | Free | Free | 6 pages | N/A |
| Starter | $15 | $9 | $108 | 500 | 5,000 |
| Pro 1 | $38 | $16.5 | $199 | 3,000 | 30,000 |
| Pro 2 | $75 | $33.8 | $398 | 6,000 | 60,000 |
| Pro 3 | $125 | $68.4 | $796 | 10,000 | 120,000 |
| Pro 4 | $249 | $137.5 | $1,592 | 20,000 | 240,000 |
Siap men-scrape Substack dengan AI
- Instal:
- Produk:
❓ FAQ
-
Apa itu AI Powered Substack Scraper?
AI Powered Substack Scraper adalah yang mengekstrak data terstruktur dari halaman Substack seperti Discover dan daftar publikasi. Anda cukup membuka halaman, klik AI Suggest Columns, lalu Thunderbit akan membuat skema siap-tabel dan mengambil data menjadi baris-baris yang bisa Anda ekspor. -
Apa itu Thunderbit?
adalah Chrome Extension untuk web scraping dan produktivitas berbasis AI yang membantu Anda mengumpulkan data dari website, PDF, dan gambar lalu mengubahnya menjadi dataset terstruktur. Dibuat untuk workflow bisnis seperti lead generation, riset pasar, operasional ecommerce, dan real estate, dengan ekspor cepat ke Google Sheets, Airtable, dan Notion. -
Halaman Substack apa saja yang bisa saya scrape dengan Thunderbit?
Anda bisa men-scrape banyak halaman publik Substack, termasuk , halaman resource terkurasi, dan halaman publikasi individual. Jika sebuah halaman memerlukan login, Anda sering kali bisa memakai Browser Scraping agar Thunderbit berjalan di sesi Chrome Anda yang sudah login. -
Apakah Thunderbit bisa men-scrape subpage publikasi untuk detail tambahan?
Bisa. Fitur Subpage Scraping Thunderbit dapat mengunjungi setiap URL publikasi yang Anda kumpulkan dari halaman daftar, lalu menambahkan field tambahan ke tabel Anda. Ini berguna ketika halaman listing hanya menampilkan deskripsi singkat, sementara halaman publikasi menyimpan metadata yang lebih kaya. -
Bagaimana cara memilih kolom yang tepat untuk scraping Substack?
Mulai dari AI Suggest Columns, lalu sesuaikan nama field dan tipe data sesuai kebutuhan workflow Anda. Anda juga bisa menambahkan Field AI Prompt pada sebuah kolom untuk mengarahkan ekstraksi atau format, misalnya menyeragamkan kategori atau mengambil nama penulis yang lebih bersih. -
Bisakah saya mengekspor data Substack ke Google Sheets, Airtable, atau Notion?
Ya, dan ekspor gratis. Setelah scraping, Anda bisa mengunduh CSV/JSON atau mengirim dataset langsung ke Google Sheets, Airtable, atau Notion untuk kolaborasi, filtering, dan enrichment. -
Apa bedanya Cloud Scraping dan Browser Scraping untuk Substack?
Cloud Scraping lebih cepat dan cocok untuk halaman publik yang tidak memerlukan login. Browser Scraping berjalan di sesi Chrome Anda dan lebih tepat saat Anda perlu mengakses halaman yang dilindungi autentikasi atau ingin scraper berperilaku persis seperti browser Anda. -
Berapa banyak baris yang bisa saya scrape dari Substack dalam sekali jalan?
Batas praktisnya bergantung pada struktur halaman, pagination/infinite scroll, dan kredit paket Anda. Namun, banyak workflow menargetkan ratusan baris sekaligus (seringnya hingga sekitar 500 baris untuk sekali run). Jika halaman memakai infinite scroll atau multi-page, Thunderbit dapat menangani pagination dan melanjutkan pengambilan baris saat Anda memuat lebih banyak hasil. -
Apakah aman/boleh men-scrape Substack?
Lakukan scraping secara bertanggung jawab dan patuhi hukum yang berlaku, ekspektasi privasi, serta ketentuan Substack. Thunderbit adalah alat untuk menstrukturkan data yang bisa Anda akses di browser, dan Anda yang menentukan data apa yang dikumpulkan serta bagaimana penggunaannya.
📚 Pelajari Lebih Lanjut
- Mulai dari produknya:
- Instal extension:
- Baca panduan di
- Dasar-dasar:
- Konsep list scraping:
- Alur kerja Excel:
- Ekstraksi PDF:
- Praktik terbaik pengumpulan email:
- Perbandingan tools: