Jangan Mau Cuma Jadi Secret Admirer, Ayo Nyoblos Tanggal 15!
no commentsAkhirnya kesampaian juga buat infographic 🙂 Tadinya cuma iseng, kok yah susah banget scraping twitter, lalu belakangan ini jadi serius banget, lebih serius dari mengerjakan pekerjaan kantor. Pertama coba scraping twitter itu kira-kira setahun yang lalu yang tidak kunjung berhasil selama beberapa bulan. Sempat nyerah juga, tapi kira-kira sebulan yang lalu, tidak tahu dapat wangsit darimana, iseng-iseng lihat web console, kok kelihatannya ada pattern request yang tidak biasa. Mungkin bukannya tidak biasa, cuma baru ngeh saja ada pattern request tersebut yang ternyata adalah jawaban dari semua kegagalan scraping twitter sebelumnya.
Semangat dong jadinya, langsung deh tidak butuh waktu lama, bikin script php untuk mengeksploitasi pattern request tersebut. Semangat sebentar, datanglah kesulitan demi kesulitan. Ternyata tidak semudah itu meskipun kita sudah tahu apa yang harus discrap. Intinya masalah optimisasi script & efektifitas scrap. Dengan semangat pantang menyerah akhirnya jadilah script yang bisa scrap beberapa elemen twitter dengan kecepatan antara 100 data s/d 2000 data per detik.