Langsung ke konten utama

Apa itu Web Scraper?

Singkatnya: ambil data yang Anda butuhkan dari halaman web mana pun dengan satu klik, lalu impor ke AI Table. Web Scraper adalah alat pengumpulan data web yang cerdas. Ekstensi browser dan plugin panel samping AI Table bekerja sama untuk memberi Anda ekstraksi data terstruktur satu klik dari halaman web mana pun.

Apa yang bisa Anda lakukan dengannya?

Halaman dan tipe data yang bisa di-scrape

  • Platform media sosial: daftar catatan Xiaohongshu dan daftar video pendek — tangkap judul, penulis, jumlah suka, dan lainnya.
  • E-commerce: tangkap sampul produk, harga, peringkat, penjualan, dan lainnya.
  • Berita dan artikel: tangkap judul, isi, ringkasan, waktu publikasi, dan lainnya.
  • Bagian komentar: tangkap konten, penulis, waktu publikasi, dan lainnya.
  • Platform listing: tangkap tautan penawaran, isi, waktu publikasi, dan lainnya.
  • Halaman back-office internal: ubah tabel back-office keuangan, absensi, dan progres proyek menjadi record AI Table.

Sebelum memulai

Lihat panduan instalasi

Contoh

Scraping halaman daftar

Daftar catatan Xiaohongshu: tempel URL pencarian kata kunci Xiaohongshu atau URL beranda pengguna ke kolom input. Daftar catatan pada halaman tersebut akan diurai dan diimpor ke AI Table. Daftar produk Taobao: tempel URL daftar produk kata kunci di Taobao / Tmall atau platform e-commerce mana pun. Sampul, harga, penjualan, lokasi pengiriman, dan bidang lainnya akan terdeteksi dan diimpor ke AI Table. Komentar produk Taobao:
  1. Tempel URL detail produk Taobao. Jika daftar komentar tidak terdeteksi otomatis, klik Pilih ulang daftar.
  2. Buka halaman detail produk, lalu klik Lihat semua ulasan.
  3. Pada panel scraper di kanan atas, klik Pilih manual, lalu pilih area komentar. Daftar komentar akan terdeteksi.
  4. Gulir halaman untuk menangkap lebih banyak baris.
  5. Klik Konfirmasi untuk menulis data kembali ke AI Table.
Daftar video Douyin: tempel URL pencarian video kata kunci Douyin, URL pencarian live kata kunci, atau URL beranda pengguna — apa pun yang berisi daftar video atau live. Sampul, penulis, waktu publikasi, jumlah suka, dan lainnya akan terdeteksi dan diimpor ke AI Table.

Scraping halaman detail

Gunakan satu kolom URL yang sudah Anda miliki di AI Table (atau yang Anda scrape dengan plugin ini) sebagai input, konfigurasikan bidang mana yang akan ditangkap dari halaman detail, lalu Web Scraper akan membuka setiap URL secara bergantian dan menulis data yang tertangkap baris demi baris. Scrape massal halaman detail video Douyin: Klik Scrape halaman detail. Pada kolom input Pilih bidang tautan untuk di-scrape, pilih bidang tautan yang berisi URL video Douyin. Catatan: setiap URL di kolom itu harus berasal dari situs yang sama dan tipe halaman yang sama, atau Anda akan mengalami error. Scrape massal halaman detail catatan Xiaohongshu: Klik Scrape halaman detail. Pada kolom input Pilih bidang tautan untuk di-scrape, pilih bidang tautan yang berisi URL catatan Xiaohongshu. Perhatikan hal yang sama: setiap URL harus berasal dari situs yang sama dan tipe halaman yang sama.

FAQ

Setelah menginstal plugin di Chrome / Edge, mengapa saya masih diminta menginstal versi baru saat mulai scraping?

  1. Pastikan Anda membuka AI Table di browser. Plugin tidak berfungsi di AI Table yang dibuka dari klien DingTalk.
  2. Setelah menginstal plugin, muat ulang halaman AI Table sebelum masuk kembali.

Apakah menggunakan plugin ini akan memicu pertahanan anti-crawling atau membuat akun saya diblokir?

Web Scraper pada dasarnya adalah “alat otomatisasi salin-tempel” yang berjalan di browser lokal Anda — bukan crawler sisi server. Alat ini tidak melakukan scraping massal dan tidak berusaha melewati mekanisme anti-crawler. Mengapa tidak memicu anti-crawling?
  1. Menggunakan login Anda sendiri: plugin berjalan di browser lokal Anda dengan akun yang biasa Anda gunakan. Tanpa pengabaian login, tanpa peretasan izin — bagi situs, ini tampak seperti kunjungan pengguna biasa.
  2. Tanpa scraping massal otomatis: Web Scraper bersifat sekali jalan dan dipicu manual — Anda mengkliknya untuk menjalankannya. Alat ini tidak mendukung permintaan batch berfrekuensi tinggi.
  3. Berjalan selayaknya pengguna nyata: plugin menyesuaikan dengan kecepatan penjelajahan normal, tidak memuat ulang secara agresif, dan tidak mengirim permintaan bersamaan ke banyak halaman — pada dasarnya berbeda dari perilaku crawler pada umumnya (frekuensi tinggi, batch, otomatis).
Prinsip produk kami:
  • Menghormati aturan akses dan ketentuan layanan situs
  • Tidak melewati login, izin, atau mekanisme anti-crawler
  • Tetap fokus pada kasus penggunaan produktivitas pribadi
Web Scraper bukan sistem crawling — melainkan alat produktivitas di dalam browser Anda. Alat ini hanya membantu Anda menata konten halaman yang sedang Anda lihat. Alat ini tidak melakukan scraping massal dan tidak memicu anti-crawling platform.

Ada pertanyaan tentang plugin ini?