Scrapping Node

Pada kali ini kita akan coba buat program sederhana untuk membuat posting otomatis pada twitter dengan menggunakan puppeteer. Flow program adalah Membuka halaman twitter login. Proses login yaitu, isi username dan password lalu tekan button login. Buka halaman twitter home. Tekan tweetbox untuk input tweet. Isi tweetbox Tekan tombol tweet. Code Perhatian, code diatas bisa … Read more

TIps 1 – Filter Resource Menggunakan headless browser untuk web scrapping akan lebih lambat dan memakan bandwidth. Salah satu trik yang dapat digunakan adalah dengan menfilter request. Umumnya project scrapping adalah mengambil konten text. File seperti image, stylesheet dan font dapat kita filter agar tidak didownload. Berikut kode sederhana untuk melakukan filter resource yang didownload. … Read more

Pada modul ini kita akan bahas code sederhana untuk melakukan otomasi searching pada google.com. Untuk bisa melakukan input, fungsi yang digunakan adalah type. Type adalah fungsi untuk mengirim keypress atau input. untuk detail dokumentasi lihat disini. Setelah input text diisi, selanjutnya kita lakukan penekanan tombol enter. Fungsi yang digunakan adalah keypress. Untuk detail dokumentasi lihat … Read more

Puppeteer adalah library node.js dengan API untuk mengatur chrome atau chromium melalui protokol DevTools. Puppeteer dapat dijalankan headless, dimana browser tidak tampil atau dijalankan secara full dimana browser tampil. Instalasi library menggunakan perintah npm i puppeteer Introduksi Menggunakan Puppeteer Program diatas akan menjalankan chromium secara headless, lalu membuka halaman web google.com dan melakukan screen capture. … Read more