Terimakasih sekali. Bagus sekali cerita dr Mas Sigit Dewanto, dan pancingan2 Mas Budi. Membuka wawasan bahwa ada lapangan pekerjaan lain untuk web programmer :-). Apakah berarti kita harus berhati2 dalam menyimpan secret keys, passwords API dan database yg digunakan di web portal kita supaya nggak ke crawler?
Sama2. Kalau penyimpanan secret keys/password biasanya diset sebagai environment variables dan tidak disimpan dalam file dev.to/biplov/handling-passwords-and-secret-keys-using-environment-variables-2ei0
@@belajaridn iyaa bg, aku lagi butuh metode utk ngambil data website gitu bg... metode yg aku temui itu baru ngambil data melalui web service atau web API nya website itu kak
kalau boleh tahu web browser yang tidak mempunyai GUI bisa didownload dimana ya? mungkin Mas Budi ada refrensi Terimakasih Mas Budi atas info dan ilmunya
Saya mau melakukan web scrapping, untuk mencari bahan contekan dari suatu website saat lagi di Ubuntu Server. Ada tool yang sekiranya bagus untuk saya korek-korek tidak mas budi?
@@belajaridn Terimakasih mas budi sarannya saya lagi coba, tapi belum eksplorasi lebih lanjut, saat ini masih memakai gitlab.com/gardenappl/readability-cli untuk mendapatkan artikel via CLI.
Bagus materinya, saya ingin belajar lebih jauh lagi mengenai scrapinghub, dimana saya harus belajar dengan mas Sigit, mungkin ada CP atau fan pagenya? Trimksh
Terimakasih sekali. Bagus sekali cerita dr Mas Sigit Dewanto, dan pancingan2 Mas Budi. Membuka wawasan bahwa ada lapangan pekerjaan lain untuk web programmer :-). Apakah berarti kita harus berhati2 dalam menyimpan secret keys, passwords API dan database yg digunakan di web portal kita supaya nggak ke crawler?
Sama-sama, semoga sesi ini bisa bermanfaat.
Untuk proteksi terhadap bot, kita perlu menerapkan anti bot protection; salah satunya dengan recapcha :)
Sama2. Kalau penyimpanan secret keys/password biasanya diset sebagai environment variables dan tidak disimpan dalam file dev.to/biplov/handling-passwords-and-secret-keys-using-environment-variables-2ei0
@@sigitdewanto6702 Terimakasih linknya. Kl gitu makin mantap pakai .env sj. Saya add di LinkedIn ya Mas.
@@belajaridn Mantap, tepat banget waktunya. Terimakasih sekali lg. Semakin sukses sesi podcastnya.
Menarik banget isi podcast nya bang, terimakasih banyak, semoga sehat selalu dan sebarkan terus ilmu yang bermanfaat bang 🙏
Banyak informasi berharga yang dibagikan oleh Mas Sigit di sesi ini :)
Sangat bermanfaat... 👍👍
Banyak insight menarik yang disampaikan oleh Mas Sigit dalam sesi ini 😊☕
Wah mantep, auto nonton ^_^
Semoga bisa dinikmati dan memberikan manfaat :)
asyiik sekali Mas diskusinya...
salam kenal Mas Budi
Semoga bermanfaat ya sesi bincang2 ini ☺️☕🙏
ini nih bg, aku lagi butuh banget metode iniiii
makasih bang 😊
alhamdulillah
Syukurlah, bisa pass banget ya :)
@@belajaridn iyaa bg, aku lagi butuh metode utk ngambil data website gitu bg...
metode yg aku temui itu baru ngambil data melalui web service atau web API nya website itu kak
eh bg, wkwk
Ingat pesan Mas Sigit ya, polite scraping dan jangan excessive scraping :)
@@belajaridn okee bang, siapp.. makasih bg
Mau tanya mas, kalo untuk programmer pemula bagus nya cari kerja on-site atau freelance/remote ? Minta arahan road map nya
bang, next podcast boleh how to become QA manual/automations gak :D
Topik QA belum pernah dibahas di sesi podcast Indonesia Belajar. Nanti kami akan carikan narasumber yang memiliki keahlian di bidang ini ya :)
@@belajaridn sip makasih bang XD
Yg ngisi pycon id kemarin bukan ya ini?
Betul, mas Sigit pernah menjadi pembicara di PyconID 2019 dan menjadi moderator di PyconID 2020 :)
Sukses selalu bang
Sesi podcast ini rilis di Hari Senin pukul 10 pagi :)
@@belajaridn okee😁
Gimana sesinya? Semoga bermanfaat ya :)
@@belajaridn sangat menginspirasi bang, mantap :)
kalau boleh tahu web browser yang tidak mempunyai GUI bisa didownload dimana ya?
mungkin Mas Budi ada refrensi
Terimakasih Mas Budi atas info dan ilmunya
Ada phantom JS bikinan mas ariya hidayat setauku
Saya mau melakukan web scrapping, untuk mencari bahan contekan dari suatu website saat lagi di Ubuntu Server. Ada tool yang sekiranya bagus untuk saya korek-korek tidak mas budi?
Sudah pernah coba Scrapy atau BeautifulSoup?
@@belajaridn Terimakasih mas budi sarannya saya lagi coba, tapi belum eksplorasi lebih lanjut, saat ini masih memakai gitlab.com/gardenappl/readability-cli untuk mendapatkan artikel via CLI.
@@bimagv Terus semangat mas dalam bereksplorasi :)
Bagus materinya, saya ingin belajar lebih jauh lagi mengenai scrapinghub, dimana saya harus belajar dengan mas Sigit, mungkin ada CP atau fan pagenya? Trimksh
Tamu kita kali ini memang sudah 7 tahun berpengalaman secara profesional dalam bidang web scraping. Mantap memang Mas Sigit ini.
Scraping berantem sama perimeter x baru puyeng 😁
LoL, makanya solusi untuk common problems dalam scraping gak dibahas dalam sesi podcast ini :)
print("keren bang")
Mas Sigit banyak berbagi informasi berharga di sesi podcast ini :)
Bedanya scraper sama crawler apa yaa?
Scraper untuk mengambil data spesifik dari satu website, sedangkan Crawler untuk menjelajahi dan mengambil data dari berbagai halaman website.
untuk stalking email address bisa ya gan?
Lebih tepatnya untuk scrape data email addresses dari halaman web secara otomatis 😊
@@belajaridn nah penting skali brti ya om, bkin tutor nya dong hehe
@@endremurti kebetulan saat ini kami sedang berfokus pada materi terkait Machine Learning :)
@@belajaridn wah keren apakah ada kontak mas atau forum tertentu ? sy ingin ikutan terlibat hehe sy jg pngn bljr big data untuk marketing
Bisa bergabung dengan komunitas Python ID mas. Biasa aktif di group Telegram :)
keropi
He3... iya keroppi :D