Crawling Data Twitter dengan Rapidminer - Seri Perkuliahan Data Analytic & Data Mining #09
Vložit
- čas přidán 24. 11. 2021
- Pada video ini, kita belajar bagaimana cara mengumpulkan data (crawling) dari media sosial Twitter menggunakan operator Search Twitter pada Rapidminer. Pada video ini juga dijelaskan bagaimana langkah-langkah membangun koneksi antara Rapidminer milik kita dengan Twitter API agar kita dapat dengan mudah mengambil data dari Twitter. Ada banyak data yang bisa kita ambil dari Twitter, di antaranya tweet, profil user, dsb.
#crawling #twitter #rapidminer
Terima kasih ilmunya pak, ditunggu part selanjutnya
Siap insya Allah mas. Ditunggu ya 🙂
Alhamdulillah Pak, terimakasih banyak ya Pak, ilmunya sangat bermanfaat, sehat selalu Pak...
Terima kasih atas support dan doanya ya 😊🙏
terima kasih pak.. sangat membantu dalam perkuliahan
Terima kasih kembali 🙂
luar biasa bang, makasih ilmunya...penjelasanya keren..
Terima kasih banyak atas atensinya.. semoga bermanfaat ya
@@KuliahInformatika aamiin....allhumma aamiin...
terima kasih ilmunya sangat membantu, jadi pingin ngikut matkul bapak lagi
Wah, Anda alumni/ mahasiswa UTY ya mas? Alhamdulillaah jika videonya bermanfaat 🙂🙏
Alhamdulillah terimakasih banyak pak, sangat bermanfaat sekali kontennya untuk tugas kuliah saya di matakuliah Data Warehouse dan Business Intelligence. Semoga ilmunya berkah ya pak. Aamiin
Izinkan saya bertanya pak, apabila saya ingin menghilangkan result dari ID atau hanya membutuhkan data text saja bagaimana ya pak caranya? saya sudah melakukan Select Attribute hanya untuk Text saja tetapi ID masih tampil di resultnya
secara default, rapidminer memang selalu menyajikan ID dari textnya. Jika ingin data text saja, kita bisa hapus manual kolom ID melalui aplikasi seperti Ms. Excel.
@@KuliahInformatika Saya pikir bisa menghilangkannya melalui operator yang ada di rapid miner, terimakasih banyak atas informasinya pak.
Lebih sempet ikut workshopnya waktu akhir januari, tapi ternyata ada channel youtubenya, terimakasih Pak, izin nanti bertanya terkait sentimen analysis menggunakan rapid miner dengan data tweet
silakan mas :)
Keren deh pak. Kuyyyy Subcribe yaaaak
hahaha... tengkyu bu saucha
semangat kakak
makasih kakak hendri.. jangan lupa topinya dilepas dulu kalo mau ngajar ya kak.. haha
Terima kasih atas ilmunya, Pak. Mohon maaf tanya. Apakah ada tool yang bisa crawling data twitter berupa tweet dan komentar-komentarnta secara utuh dan tidak berbasis pada kata kunci, tetapi berbasis pada cuitan? Jika ada, mohon informasinya. Terima kasih.
Maaf, saya belum tahu
Izin bertanya pak, blom ada penjelasan tentang pengolahan data Twitter dengan operator proses dokumen data dengan sub kayak tokenzine/filter stopwordbahasa gitu pak??🙏
sudah ada. silakan cek video ini: czcams.com/video/kPXtoYCnycg/video.html
semoga bermanfaat :)
Izin bertanya bapak, bagaimana apabila terdapat nontifikasi "twitter API error, there was an error connection to the twitter API, please check your settings and retry the request" ketika ingiin crawling datanya pak, itu bagaimana cara benerinnya ya pak? terimakasih sebelumnya bapak
Iya, sejak Twitter dibeli oleh Elon Musk, user biasa tidak bisa akses API nya lagi 🙏
untuk solusinya gimana ya pak?@@KuliahInformatika
@@hasbiassiddiqi756 coba koding pakai Python, pake library twit harvest
Izin bertanya pak, waktu mengautentikasi rapidminer ketwitter kok error ya, ada tulisan "twitter service or network is not availaible"
coba cek: apakah sudah login ke akun twitter atau belum? jika sudah, apakah koneksi dari rapidminer sudah berhasil? atau coba cek juga koneksi internetnya, jangan2 putus :)
Jika masih bermasalah, bisa jadi service-nya Twitter memang sedang sibuk sehingga tidak bisa diakses untuk sementara waktu. Bisa dicoba beberapa saat lagi.
alhamdulillah makasih pak, pak mau bertanya...bagaimana merubah data yang sudah kita crawling dari twiter ke type CSV ? apakah saya ketinggalan video selanjutnya?
Mohon maaf bu, sepertinya memang belum ada di video saya. Ibu tinggal tambahkan operator 'Write CSV' setelah operator Search Twitter. jadi koneksi dari Search Twitter disambungkan ke Write CSV, kemudian pada panel parameter (window bagian kanan), klik tombol gambar folder, lalu tentukan direktori penyimpanan dan nama file CSVnya.
Pak izin bertanya, connection twitter tersebut bisa di gunakan untuk mengambil data project berikutnya kah?
Bisa dipakai berulang kali. Tapi sekarang sepertinya ada kebijakan baru dari Twitter terkait pembatasan akses ke data mereka
Pak bagaimana caranya crawling data tahun sebelumnya, karena hasil crawling saya tahun 2022 saja
Nah ini limitasinya, Twitter membatasi hak akses kita. Data yang bisa diambil hanya sampai 8 hari yang lalu. Ini memang kebijakan Twitter
Mau tanya pak, kalo rapidminer gak bisa tarik data likes juga ya, cuma untuk retweet aja ? Terima kasih, Pak. Penjelasannya sangat jelas dan bermanfaat.
Iya, rapidminer ga bisa narik data likes. Terima kasih atas supportnya
Izin bertanya pak, saya mencoba Crawling data untuk ke 3 kli nya di rapid minner tapi kok tidak bisa ya? Jaringan sudah konek, dan akun juga sudah ada.
Memang seperti itu mbak. Twitter membatasi durasi kita untuk terkoneksi ke aplikasi mereka. Biasanya 15 menit sekali. Kalau sudah gak mau konek, kita tunggu dulu 10 s.d. 20 menit, lalu coba lagi, insya Allah bisa :)
Ini memang trkait dengan aturan yang dibuat oleh Twitter.
Salam dari Malaysia, saya ada persoalan, macam mana nak predict age twitter users?
Terima kasih jiran dari Malaysia sudah mampir ke channel CZcams saya. Persoalan yang menarik sangat :)
Terus terang saya belum pernah predict age dari twitter user, tapi menurut saya hal demikian dapat dilakukan dengan melakukan analisis terhadap konten dari twit yang dia share ke Twitter. Misal, bila sebagian besar konten yang dia bagikan berisi tentang game atau boyband macam BTS, kita bisa predict dia ada di usia muda. Tapi sepertinya akan sulit jika harus memprediksi angka usianya. Yang jelas, sebelum melakukan prediction, kita perlu meninjau dahulu konten-konten twitter dari setiap level usia. Begitu menurut saya, maaf jika kurang sesuai :)
Mau tanya pak, kenapa semua data yang saya crawl dari twitter terbatas dari tahun 2023 saja (data yang dihasilkan tidak banyak)
Kebijakan Twitter hanya menizinkan akun gratis mengambil data maksimal hingga 7 hari ke belakang
Terima kasih pak, penjelasannya mudah dipahami.👍👍
izin nanya pak, untuk klasterisasi titik koordinat
dengan parameter longitude dan latitude
apa bisa diolah langsung dengan rapidminer?
saya udah coba, tapi hasilnya aneh, hasil klasternya jomplang bgt
atau data titik kordinatnya diubah dulu menjadi jarak (km) atau gmn.
mohon pencerahannya, terima kasih sebelumnya..🙏
jomplang itu bisa karena beberapa faktor, misalnya pemilihan nilai k yang tidak tepat, atau memang sebaran datanya tidak seimbang, atau bisa jadi data longitude-latitude harus diubah dulu ke format lain sebelum dipakai
mungkin bisa dicoba dulu mengonversi longitude latitude ke nilai yang lain
izin bertanya pak, kenapa data yang ingin kita crawling tidak muncul? padahal baru beberapa hari dicobak muncul tetapi pas dicrawling lagi gak muncul?
barusan saya coba crawling dan berhasil. mungkin koneksi internet tidak stabil, atau tweet yang mau diambil terlalu banyak sehingga dia time out, atau bisa jadi keyword yang diminta memang sudah tidak tersedia di Twitter
@@KuliahInformatika Baik pak, terimakasih untuk informasinya 🙏🏻
halo pak, izin bertanya, saya ingin crawling data twitter untuk tanggal dan bulannya yaitu bulan september, namun ketika kita run kenapa kosong ya pak?, mohon bantuannya nggih pak. terima kasih banyak🙏
Twitter hanya mengizinkan kita mengambil data maksimal 7 hari yang lalu. Data bulan september sudah tidak bisa ditarik dengan akun gratisan, harus dengan akun premium (berbayar)
Mau tanya pak, kalo mengambil data dari jurnal menggunakan svm di rapidminer gimana caranya pak? 🙏
Saya belum pernah mencoba mas, jadi belum tau bisa atau tidaknya. mohon maaf
Pak mau nanya pak misalkan kita udah Crawling data ni pak nah gimna cara nyimpan data yg kita Crawling dalam bentuk bike csv pak supaya bisa di lihat lagi🙏
Tinggal tambahkan operator Write CSV setelah operator Search Twitter.
Terimakasih banyak pak, sangat membantu saya dalam pengerjaan skripsi 😇 dan penjelasannya sangat detail dan mudah dipahami, oh iya pak ijin bertanya, untuk cara membagi termin saat akan mengambil data twitter itu gimana yah?apakah ketik 1000 terus dicplay, kemudian ketik 1000 lagi kemudian di play ulang atau bagaimana yah? Terimakasih
Idealnya tiap 1 hari sekali kita ambil datanya.. biasanya twit itu kan datanya diambil dalam jangka waktu tertentu. Sebenarnya bisa lebih dari 1000, misal: 2000, 3000 msh bisa dia
@@KuliahInformatika ooh begitu, baik pak terimakasih banyak 🙏 semoga berkah ilmunya aamiin
@@silmiutamiputri3194 sama2 🙏
@@KuliahInformatika mohon maaf pak, mau bertanya lagi, saya lihat di tutorial lain tentang analisis sentimen ada yg menggunakan bantuan rosette dalam penentuan label, tapi saya mencari informasi apa itu rosette belum ketemu pak, menurut bapak jika labelingnya menggunakan aplikasi rosette yg kemudian di implementasikan pada rapidminer bagaimana yah pak? Terimakasih mohon arahannya 🙏
@@silmiutamiputri3194 bisa juga dengan rosette, tapi rosette sudah tidak disupport lagi oleh Rapidminer
pas dijalankan kog ada pesan pada "search twitter" Twitter API error. Error on connection to twitter API. Kenapa ya?
Iya, sejak Twitter dibeli oleh Elon Musk, akun reguler sudah tidak bisa unduh data ke API Twitter. Bisa dicoba pakai Python.
untuk percobaan menggunakan python apakah ada tutorialnya pak
Mohon maaf pak izin bertanya, jika aplikasi Twitter tidak ditemukan di Operator bagaimana ya? sudah saya coba tambahkan dengan search di marketplace juga tidak ada opsi Twitter. Terimakasih.
Iya, versi Rapidminer terbaru sudah tidak menyediakan operator Search Twitter karena sejak dibeli oleh Elon Musk, akses ke Twitter API sudah ditutup untuk umum, sehingga Rapidminer sudah tidak bisa ambil data dari Twitter.
@@KuliahInformatika :" lagi lagi elon berulah ... terimakasih bapak atas infonya
@@KuliahInformatika terus solusinya apa pap? Apa aja aplikasi lain?
@@iklima9852 bisa pakai kode program dengan bahasa python, plus library twit-harvest, atau bisa dengan library lainnya
@@KuliahInformatikaitu bagaimana ya pak? Boleh tidak membuatkan vidio caranya pak
izin bertanya pak untuk extensionnya menggunakan apa untuk analis sentimen? terima kasih sebelumnya
Pakai text processing, klasifikasinya pake operator naive bayes bawaan rapidminer
@@KuliahInformatika apakah bisa untuk data berbahasa indonesia?
@@dinnanurfadlillah4506 harus siapkan corpus bahasa indonesia sendiri. Operator2 rapidminer belum support bahasa Indonesia
@@KuliahInformatika baik siap terima kasih banyak bapak atas ilmunya😀🙏
Pak izin tanya,kalau twitter API error itu ngatasin nya gimana ya pak? Soalnya mau ambil data lain, step by step nya udah bener semua tapi gak bisa crawling data dari twitter,padahal kemarin2 bisa pak. Itu kenapa ya pak?
Banyak yang tanya hal serupa. Saya menduga ini karena adanya kebijakan baru dari Twitter sejak dibeli oleh Elon Musk, jadi akun2 gratisan sudah tidak bisa lagi mengunduh data dari Twitter secara bebas.
@@KuliahInformatikaizin up pak, biar kita jadikan kolom diskusi komentar ini mungkin ada teman-teman yang sudah menemukan solusinya...
@@PappyDomino coba pakai library twitter-scraper di Python. Search aja di Google
@@KuliahInformatika halo pak, saya tadi udh utak atik sama temen saya coba menggunakan twitter scraper ternyata udh gabisa juga, akhirnya kita nemu cara crawl data dari salah satu channel youtube menggunakan metode tweet-harvest.
@@PappyDomino nice... 😊😊 thank you mas informasinya. Mudah2an teman2 yg lain bisa pakai juga
izin bertanya pak, kalau kita mau crawling data untuk tweet tokoh tertentu bagaimana ya pak ?
Bisa, pakai operator "Get Twitter User Statuses", kita tinggal ketikkan nama akun dan limit twit yang ingin diambil.
@@KuliahInformatika siap bapak,terima kasih atas jawabannnya
ini artinya kita tidak perlu daftar ke developertwitter yang harus menunggu 1 harian untuk bisa mengambil data di twitter ya pak? saya dpt info ini dari teman saya, tinggal ikuti cara bapak di dlm video dg konekkan akun kita kemudian mendapatkan token yg nanti diinput ke rapidnya begitu pak?
iya betul. Langsung bisa download datanya
Pak kalo untuk analisis sentimen kan menggunakan periode tanggal itu gimana pak caranya
Hmm.. saya kurang paham maksud dari periode tanggal itu gimana? untuk apa?
@@KuliahInformatika misalnya crawling data dari tanggal 11 Januari 2023 -16 Januari 2023 antara tanggal segitu saja pak bagaimana caranya
@@arifrahman7990 Twitter membatasi kita hanya bisa mengambil data maksimal 7 hari ke belakang, terhitung dari saat kita melakukan pengambilan data. Jika ingin memfilter tanggal, sebaiknya unduh dulu semua data dari twitter, kemudian data tersebut bisa disimpan di excel dulu, lalu buka proses baru dan load data excel tadi, setelah itu gunakan operator "Filter Example", dan nanti parameternya diset utk memfilter berdasarkan atribut "Created At", lalu value nya disesuaikan dengan kebutuhan tanggal yang kita perlukan.
@@KuliahInformatika baik Pak terimakasih informasinya
izin bertanya pak untuk export resultnya bagaimana ya pak caranya?
Jika ingin disimpan dalam excel, gunakan operator "Write Excel" di akhir proses.
@@KuliahInformatika sudah pak, kenapa input connection is missing ya pak tulisannya?
@@ahlulwursitakumar8801 Write Excel tidak usah dikoneksikan ke result, klik 2 kali di Write Excel, lalu tentukan nama file dan direktori tempat menyimpan file excelnya.
Izin bertanya pak cara mengatasi hasil crawling data yang tidak sesuai dengan limit yang kita masukkan itu gimana ya? Saya ngeset limitnya 1000 tetapi data yang dihasilkan cuman 190an data? Itu kenapa ya pak
artinya, kemungkinan besar memang tweet yang tersedia hanya 190an saja :)
Salam pak saya mau tny di paramater Select Atribute setelah saya pilih single combobox yg dibawah enggak keluar ya pak? ada yg salah kah dr rapidminer saya
Kalau boleh tahu, settingan filter yang dipakai bagaimana ya?
@@KuliahInformatika Saya mau Filter Text yg bentuk nya comment sama seperti video bpk.. cuma setelah saya pilih atribute filter type nya single atribute nya kosong tidak ada header kolom nya
@@achmadrivanifauzi1751 Oh, sepertinya mas Achmad belum menghubungkan operator 'Search Twitter' ke operator 'Select Attribute' ya? makanya dia ngga muncul
@@KuliahInformatika Saya sudah ikutin cara nya tp ga muncul apa mngkin ada step yg saya kelewat?
bisa jadi 😊
ada baiknya coba diulangi lagi beberapa step yang ada di video. Jika memang masih tidak bisa, bisa kirim capture layarnya ke email saya: muhammad.fachrie@staff.uty.ac.id
izin bertanya bagaimana cara menyimpan data crawling?🙏🏻🙏🏻
Bisa dicopy aja ke excel, atau bisa juga pakai operator write csv atau write excel
mau tanya pak, kalau menggunakan tanggal dari tanggal sekian sampai tanggal sekian bagaimana caranya?
klik operator "Search Twitter", terus di panel parameternya, cari opsi "until", kalo gak ada, klik dulu tulisan "Show advance parameters", nanti di bagian "until" itu tinggal isi aja kita mau ambil data sampe tgl brp. Terkait waktu, Twitter membatasi kita hanya bisa ambil data maksimal hingga 8 hari ke belakang.
Selain cara di atas, bisa juga kita ambil dulu semua data dari twitter, lalu nanti kita koneksikan ke operator "Filter Example" lalu kita filter berdasarkan tanggal twitnya. Semoga membantu ya 🙂
@@KuliahInformatika halo Pak, terima kasih banyak atas ilmunya. Ingin tanya terkait hal ini. Jika saya ingin mengambil data lebih dari 8 hari kebelakang untuk riset apakah tetap bisa difasilitasi oleh rapid miner dengan catatan mengupgrade API twitter?
@@ferdinandapascha mungkin yang dimaksud adalah upgrade akun twitter ke premium ya? Saya belum pernah coba, jadi tidak bisa kasih jawaban. Mohon maaf 🙂🙏
@@KuliahInformatika oalah baik pak, makasih tanggapannya Pak🙂🙏
idzin pak, apakah sekarnag kita sudah tidak bisa crawling data di twitter menggunakan rapit minier lagi, karena adanya perubahan di twitternya ? kok saya error di api nya ya tulisanya, padahal tes koneksi sukses
Iya betul. sejak Twitter dibeli oleh Elon Musk, akses ke Twitter API pakai akun reguler (gratisan) sudah ditutup.
@@KuliahInformatika pantesan kak, aku crawling data twitter gk bisa lagi :) ada solusinya gk kak?
Izin bertanya Cara menyimpan data hasil crawlingnya itu bagaimana ya ? Kemudian ketika kita ingin mengimport kembali data hasil crawling bagaimana ya ?
Pakai operator write csv atau write excel. Nanti ketika mau diimport lagi, pakai operator read csv atau read excel
@@KuliahInformatika pak....apakah ada tutorialnya?
@@sitimasripah1219 di video belum ada. Tapi sangat mudah kok implementasinya. Dicoba dulu saja
Assalamu alaikum Pak
Ijin bertanya, bagaimana cara menghindari data tweet-nya yang diperoleh itu sama atau berulang-ulang..
Wa'alaikumussalaam. Bisa gunakan operator "Remove Duplicates" setelah operator "Search Twitter". Nanti parameter "attribute filter type" pada Remove Duplicates diganti menjadi "single", lalu paramter "attribute" dipilih "Text". Tapi cara ini bisa efektif jika isi Twitnya bener2 sama karakter per karakter.
Assalamualikum kak saya mau bertanya soal Operator Twitter, saya mencari ini tapi tidak tampil kak apa diubah nama nya bukan Twitter lagi.
Terima Kasih
Wa'alaikumussalaam. Iya, versi Rapidminer terbaru sudah tidak menyediakan operator Search Twitter karena sejak dibeli oleh Elon Musk, akses ke Twitter API sudah ditutup untuk umum, sehingga Rapidminer sudah tidak bisa ambil data dari Twitter.
Izin bertanya pak 🙏
Cara menyimpan hasil Crawling nya gimana pak 🙏
Tinggal tambahkan operator Write CSV setelah operator Search Twitter. Nanti pada parameter Write CSV diatur dulu folder tempat kita menyimpan CSV nanti
Izin bertanya pak, saya sudah menginstall rapidminer namun operator search twitternya tidak muncul pak. Bagaimana caranya supaya operator search twitter bisa muncul?
Sepertinya anda kurang beruntung, Mas, hehe. Sejak Twitter dibeli oleh Elon Musk, kita sudah ga bisa mengakses data twitter lewat Rapidminer. Oleh karena itu Rapidminer versi terbaru menghilangkan operator Search Twitter
@@KuliahInformatika ohh pantes...kira saya cuman kekurangan ekstensi doank :'D
Izin bertanya Pak, saya sudah coba crawling data di Twitter, tetapi kenapa hanya menghasilkan 7 data ya, padahal limitnya sudah saya atur hingga 1000? Terima kasih🙏
kemungkinan besar datanya memang cuma segitu. Keyword apa yang dicari? nanti biar bisa saya coba juga.
@@KuliahInformatika keyword nya "doxing" Pak (hanya postingan berbahasa Indonesia). Bulan lalu saya coba dengan tutorial dari Bapak dan berhasil kumpulkan >500 data, tapi tadi malam saya ulangi tidak bisa. Mohon bantuannya Pak, terima kasih.
@@aqiilahzu5428 perlu diketahui, twitter hanya mengizinkan kita mengambil data paling jauh itu 7 hari yang lalu. Kalau doxing ini sifatnya temporer, bisa saja sekarang karena tidak lagi trending, jadi twit yang ada juga sangat sedikit. CMIIW
@@KuliahInformatika wah, informasi baru bagi saya Pak. Apakah batas waktu 7 hari tsb hanya berlaku pada RapidMiner atau juga software serupa? Terima kasih atas responnya Pak, sukses selalu🙏
@@aqiilahzu5428 semua, karena itu kebijakan dari Twitter untuk setiap akun reguler
Permisi pak, pas di run kok operator search twt nya muncul tulisan API EROR sokusi gmana ya
Iya, sejak twitter dibeli oleh Elon Musk, akses ke Twitter API sudah dibatasi, sehingga akun2 reguler yang gratisan sudah tidak bisa akses data twitter
@@KuliahInformatika oh siap pak harus langganan dulu brarti
Bagaimana cara menambah operator search twitter nya Pak ?
sejak Twitter dibeli oleh Elon Musk, operator ini sudah dihilangkan karena Elon Musk sudah menutup akses ke data meraka secara gratis.
kog ndak bisa ya...twitter API error apakah karena twitter berubah ke X?
Iya, sudah tidak bisa sejak dibeli oleh Elon Musk
Halo bapak, saya Ifada, izin bertanya, bagaimana jika operator search twitter tidak ditemukan ya pak. Padahal rapidminer saya sudah punya lisenci
Di Rapidminer terbaru memang sudah tidak ada lagi operator Search Twitter. Hal ini karena sejak Twitter dibeli oleh Elon Musk (dan diubah menjadi X), akses ke Twitter API sudah ditutup untuk umum, sehingga Rapidminer pun meniadakan operator tersebut di versi terbarunya.
Pak saya kan mau crawling data yaa, tapi pas di jalankan tulisannya twitter API error kira2 knp yaa pak?
Iya, sejak dibeli oleh Elon Musk, akun twitter gratisan sudah tidak bisa lagi ambil data dari Twitter. Alternatifnya coba pakai bahasa pemrograman Python, lalu gunakan modul Tweet harvest: helmisatria.com/blog/crawl-data-twitter-menggunakan-tweet-harvest/
Saya install rapidminer, ga ada widget twitternya, kenapa ya? bagaimana cara install twitter di rapidminer Pak?
Rapidminer versi terbaru memang sudah tidak support untuk operator Search Twitter karena ada pembatasan akses sejak Twitter diakuisisi oleh Elon Musk 🙃
Pak apa bisa yaa crawling data selain twitter misalnya tiktok atau instagram
Setau saya, rapidminer belum support untuk itu.
untuk menghilangkan kolom id bisa tidak pak..bagaimana caranya...?
Untuk data twit hasil crawling, rapidminer selalu mengikutsertakan kolom id. Kalau mau dihilangkan, secara manual saja pakai excel
Bang mau nanya kalo ga ada operator twiiter itu kenapa
Sejak Twitter dibeli oleh Elon Musk, akses ke Twitter API sudah ditutup untuk umum, jadi Rapidminer juga menghilangkan operator ini di versi terbarunya
pak ,knp di bagian operators gk ada search twitter
Memang sudah nggak ada lagi sejak Elon Musk menutup akses ke Twitter API. Alternatifnya coba pakai python, search di google tutori twit crawling dengan python
Jika search Twitter nye dak muncul gimana ya pak?
Versi Rapidminer terbaru sudah tidak menyediakan operator Search Twitter karena sejak dibeli oleh Elon Musk, akses ke Twitter API sudah ditutup untuk umum, sehingga Rapidminer sudah tidak bisa ambil data dari Twitter.
Pak, kalau mau dapat data jumlah like dan reply bagaimana caranya?
Kalau di rapidminer setahu saya tidak bisa
pak saya mau bertanya, saya sudah mengikuti langkah nya tapi twitter api saya bermasalah itu bagaimana ya pak?
iya, sudah banyak yang bertanya hal serupa. jadi gini, sejak dibeli oleh Elon Musk, Twitter sudah mengubah kebijakan mereka terkait pengambilan data melalui Twitter API. Akun-akun biasa yang tidak berbayar sudah tidak bisa lagi mengambil data secara cuma-cuma seperti dulu. Sebagai alternatif, coba menggunakan Python dengan tweet-harvest helmisatria.com/blog/crawl-data-twitter-menggunakan-tweet-harvest/
@@KuliahInformatika baik pak terima kasih banyak atas informasinya
izin bertanya pak, apakah di rapidminer hanya bisa crawling data twitter atau bisa platform medsos lain? jika iya medsosnya apa pak? mohon bantuannya pak 🙏
setahu saya belum ada operator khusus untuk crawling dari platform lain di rapidminer.
@@KuliahInformatika kalau tools lain ada ga ya pak selain rapidminer dan python?
@@laurentzanne saya kurang tau. Tapi sepertinya ada, meski berbayar. Coba digugling ya
Kalau ambil data komentar di facebook, bisa nggak bang?
sayangnya Rapidminer belum support untuk itu
Pak, minggu kemarin saya bisa ambil data tweet tapi hari ini ga bisa, kata rapidminer error conection api padahal udah bener step-step nya. Mohon bantuan nya pak
Sama di saya juga gak bisa lagi, error mulu.Itu kenapa ya?
@@jejaklangkah8239 kyk nya emng gabisa dari twitter nya kak, soalnya elon punya kebijakan baru gitu. Saya udah coba di 3 laptop dengan akun yang beda hasilnya tetep error
Ini sepertinya karena ada aturan baru dari Twitter sejak dibeli oleh Elon Musk, jadi akun2 gratis sepertinya tidak bisa lagi secara bebas mengunduh data dari Twitter
@@KuliahInformatika kira-kira ada cara lain untuk crawling data selain dengan media sosial twitter engga ya pak? atau mungkin ada cara agar kita tetap bisa mengakses data twitter pada rapidminer?
@@lailaatikahsari5260 kalau di rapidminer sepertinya belum ada alternatif lain. Coba pakai library twitter-scrapper di Python pypi.org/project/twitter-scraper/
pak punya saya ko twitter API nya error itu knp ya?
Sejak twitter dibeli oleh Elonk Musk, akses ke API Twitter secara gratis memang sudah tidak bisa lagi
mohon buat toterial ambil data bertahap. terima kasih
maksudnya seperti apa? di video ini saya sudah bahas secara bertahap 🙏
@@KuliahInformatika ambi Crawling data Twitter nya pak. Ambil bertahap nya bagaimana ya??
Izin bertanya pak 🙏 cara mengembalikan parameter nya gimana 🙏 soalnya ngak sengaja terhapus tadi
Panel parameternya? Klik menu View, lalu pilih Restore Default View
@@KuliahInformatika Alhamdulillah berhasil pak 🙏 terimakasih banyak atas bantuannya pak 🙏
Pak punyak saya ko nitif nya.. twitter API error terus ?
Iya, sejak Twitter dibeli oleh Elon Musk, ada kebijakan baru bahwa akun reguler sudah tidak bisa mengakses Twitter API. Alternatifnya bisa menggunakan library twit-harvest yang ada di Python.
mohon ijin Pak untukcara alternatif ini apakah sudah ada video tutorialnya ?😀@@KuliahInformatika
@@hermila3386 hehehe.. mohon maaf, belum ada videonya
Operators search Twitter nya kenapa ga muncul ya
Iya di saya juga ga muncul
Sepertinya karena sejak Twitter dibeli oleh Elon Musk, akses ke API Twitter sudah ditutup, dan user Twitter reguler sudah tidak bisa akses data dari Twitter, maka dari itu Rapidminer mungkin menghilangkan operator Search Twitter.
pak kalo twitter API error knapa ya? padahal udah cek koneksinya udah succes
error pas di running
Sama kak, udah jalan belum yg kakak?
Sepertinya karena ada perubahan kebijakan dari Twitter sejak dibeli oleh Elon Musk, jadi akun free tidak bisa lagi download data dari Twitter
betul pak, pass running error
@@nabatuu belum juga
Knapa disearch operator gada Twitter nya pak?🙏
Oya? Seharusnya ada. Anda pakai rapidminer versi berapa?
rapidminer studio gitu gatau versi berapa kak@@KuliahInformatika
@@cindynadaadela9079 dilihat versinya di menu Help atau About. Secara default harusnya ada sih operator Twitter di situ
Izin tanya, Pak. Setelah crawling data, saya cek beberapa data ada yang tidak lengkap kalimatnya, jadi hanya diakhiri dengan "....". Misal "RT @PDI_Perjuangan: Kesehatan merupakan kebutuhan dasar bagi individu. Tidak hanya terkait dengan kesehatan fisik semata, namun juga keseha…", hanya sampai situ saja. Kira-kira kenapa ya, Pak? Apakah memang ada keterbatasan dari rapidMiner? Dan apakah ada cara untuk mengatasinya?
Umumnya, tweet yang berupa Retweet dibuat seperti itu, terutama tweet yang panjang (Twitter hanya mengizinkan max 150 karakter).
@@KuliahInformatika Setelah saya liat lagi, ternyata memang yang berupa Retweet saja yang begitu, Pak. Terima kasih banyak atas tanggapannya 😄🙏🏻 Videonya sangat membantu 👍
hi bro .. we need english version please..
I hope I can fulfill your request :)
Pak, punya saya kok gaada connection nya ya
Di bagian mana? Di panel repository?
@@KuliahInformatika nggih pak, itu gimana ya nambahnya pak, terimakasih pak
@@Yuhuuuin sepertinya ketika membuka rapidminer, terjadi error. Kadang2 seperti itu. Saya belum tau cara penanganannya, mohon maaf. Kalau masih seperti itu juga, mungkin install ulang bisa jadi alternatif 😁
Baik pak, brrti bukan pengaruh dr versinya ya pak
Mohon maaf izin bertanya pak, saya sudah instal ulang tetapi kok masih tidak ada, itu gmna ya penanganannya pak? Terimakasoh pak
bapak, saya mau bertanya, ketika kita mengambil data twitter dengan cara di cicil, per 1000 atau per sekian setiap download, apakah tidak akan terjadi double data yang kita download, misalkan yang 1000 data pertama yang kita download , di download yang kedua data yang kita dapatkan masih sama,
Ya akan terjadi dobel data. Strateginya bisa diatur di bagian Time Period di parameter Twitternya. Di situ kita bisa tentukan mau ambil dari tanggal berapa sampai tanggal berapa. Tapi twitter membatasi pengambilan data hanya sampai 7 hari yang lalu
Rapidminer versi berapa ini ya pak ?
di video ini kalau tidak salah saya pakai versi 9.10. Sepertinya sekarang ada yang terbaru lagi
@@KuliahInformatika Oh iya ka, API twiiter error saat bagian flow search twiiter apakah karena ada limitasi dari twiiter nya atau seperti apa ya ?
@@hifzonhifzon7276 iya, saya juga menduga seperti itu. Kalo gak salah Twitter sudah mengeluarkan aturan baru terkait download data dari mereka