Wikipedia:Permohonan pendapat/Penerapan Automoderator untuk meringankan patroli suntingan vandal

Penerapan Automoderator untuk meringankan patroli suntingan vandal

Pengusul: BAPerdana-WMF (b • k • l)

Status:    Dalam diskusi

Halo, rekan-rekan kontributor Wikipedia!

Tim Moderator Tools dari Wikimedia Foundation menyadari bahwa kontributor yang melakukan patroli menghabiskan sebagian besar waktunya untuk memeriksa dan mengembalikan suntingan tersebut secara manual. Sayangnya jumlah kontributor aktif tidak sebanding dengan banyaknya suntingan masuk yang mengakibatkan beban kerja kontributor semakin banyak. Maka dari itu, mereka berinisiatif untuk sebisa mungkin mengurangi beban kontributor dalam berpatroli dengan membuat Automoderator.

Automoderator merupakan perkakas yang dapat mengembalikan suntingan berpotensi vandal secara otomatis berdasarkan model pembelajaran mesin. Bisa dikatakan Automoderator sama seperti akun bot yang melakukan tugas kosmetika, tetapi bedanya adalah Automoderator akan digunakan di seluruh proyek Wikimedia. Sekadar informasi bahwa perkakas ini sudah diaktifkan di Wikipedia bahasa Turki pada Juni 2024.

Sesuai dengan permintaan komunitas di Wikipedia bahasa Turki, Automoderator diaktifkan dengan mode sangat waspada, sehingga per harinya perkakas ini membalikkan satu suntingan per harinya. Intinya, komunitas dapat menentukan seberapa ketat atau longgarnya Automoderator dalam membalikkan suntingan vandal. Apabila komunitas merasa ragu untuk langsung mengaktifkan Automoderator dengan mode longgar (memeriksa semua suntingan untuk dikembalikan jika terdeteksi vandal), maka dipersilakan untuk mengaktifkan mode sangat waspada terlebih dahulu.

Berbicara soal model pembelajaran mesin, tim Moderator Tools juga menyadari bahwa Automoderator memiliki risiko kesalahan pemeriksaan suntingan. Akibatnya, beberapa suntingan yang berniat baik juga berisiko secara tidak sengaja dibalikkan oleh perkakas ini. Maka dari itu, mereka akan membuat halaman terpisah untuk melaporkan kejadian kesalahan pemeriksaan agar segera ditindaklanjuti.

Informasi selengkapnya mengenai Automoderator dapat dilihat melalui halaman ini.

Sekian terlebih dahulu dari saya dan untuk diskusi dapat dilanjutkan di bawah ini. Terima kasih atas perhatian Anda dalam membaca dan menanggapi permohonan ini. Salam.

BAPerdana-WMF (bicara) 19 Juli 2024 17.39 (UTC)

@27christian11:

@Agus Damanik: @Argo Carpathians: @Ariandi Lie: @Ariyanto: @Bennylin: @David Wadie Fisher-Freberg: @Cun Cun: @Enperfectify World: @Ezagren: @Fazoffic: @Gombang: @HaEr48: @Hariadhi: @Herryz: @Hidayatsrf: @Ivan Humphrey: @IvanLanin: @Jeromi Mikhael: @JohnThorne: @Johnstad Di Maria: @Kembangraps: @Kenrick95: @Kuramochi Akihiko: @M. Adiputra: @Meursault2004: @Murbaut: @NaufalF: @NFarras: @Nohirara: @Nyilvoskt: @Pierrewee: @Rachmat04: @RaFaDa20631: @Rahmatdenas: @RaymondSutanto: @RianHS: @Rintojiang: @RXerself: @Symphonium264: @Taylor 49: @Ustad abu gosok: @Veracious: @Wagino 20100516: @WillsonEP09: @Yogwi21:

----

Izin mengundang para pengurus untuk berdiskusi dan menyampaikan pendapat. Terima kasih 🍃Zulf🍃^talk 28 Juli 2024 14.11 (UTC)

Mengingat kerja patroli memang berat dan membuat pengguna dan pengurus jadi emosi yang tidak pada tempatnya, saya setuju saja 😄 Hariadhi - ^Ngobrol 28 Juli 2024 14.27 (UTC)

 Setuju untuk penerapan automoderator ini. Enperfectify World (bicara) 29 Juli 2024 08.34 (UTC)

Diskusi

@BAPerdana-WMF: Apakah perkakas tersebut dapat digunakan oleh pengguna pengembali revisi? Badak Jawa (bicara) 22 Juli 2024 12.09 (UTC)

@Badak Jawa: Terima kasih atas pertanyaannya! Apakah yang Anda maksudkan dari "digunakan" di sini adalah dapat mengatur preferensi (konfigurasi) dari Automoderator? Apabila benar, maka jawabannya preferensi hanya dapat dilakukan oleh pengurus. Terlepas dari itu, sangat disarankan bagi pengurus untuk melakukan diskusi bersama dengan komunitas jika ingin mengubah tingkat sensitivitas pemeriksaan perkakas ini. Semoga membantu. BAPerdana-WMF (bicara) 22 Juli 2024 12.44 (UTC)

Jadi, ini seperti sebuah bot yang dikelola oleh operator bot kan, dan operator botnya pengurus? Saya rasa saya  Agak setuju agar diterapkan di Wikipedia Indonesia ini. kenapa tidak!🍃Zulf🍃^talk 23 Juli 2024 11.11 (UTC)

Secara sederhana bisa dikatakan demikian, kok. :)

Komunitas memiliki peran utama dalam menentukan tingkat pemeriksaan hingga fungsional dari Automoderator, yaitu dengan cara menyampaikannya kepada operatornya (dalam hal ini adalah pengurus). BAPerdana-WMF (bicara) 23 Juli 2024 15.04 (UTC)

@BAPerdana-WMF saya ingin bertanya lagi, apakah automoderator dapat memblokir pengguna yang melakukan vandalisme? Badak Jawa (bicara) 23 Juli 2024 15.21 (UTC)

Terima kasih atas pertanyaannya. Fokus dari Automoderator pada saat ini adalah hanya untuk membantu meringankan kontributor yang melakukan patroli dengan cara mengembalikan suntingan secara otomatis, bukan untuk menggantikan tugas pengurus (dalam hal memblokir pengguna vandal maupun menghapus halaman).

Selain itu, perkakas ini masih dalam tahap pengembangan yang notabene akan ada kemungkinan terjadi kesalahan pemeriksaan (false positive). Apabila perkakas ini diberikan kemampuan layaknya pengurus, maka kerusakan yang ditimbulkan akan lebih besar karena bisa saja pengguna berniat baik terkena dampaknya.

Maka dari itu, saat ini fokus dari Automoderator hanya pada pengembalian suntingan vandal secara otomatis. Partisipasi dari rekan-rekan sangat dibutuhkan agar ke depannya perkakas ini semakin andal dalam membantu tugas kontributor yang melakukan patroli. BAPerdana-WMF (bicara) 23 Juli 2024 17.16 (UTC)

 Setuju setelah membaca penjelasan bung Bona saya jadi tertarik jika perkakas tersebut dapat digunakan di Wikipedia Indonesia mengingat banyaknya vandalisme Badak Jawa (bicara) 23 Juli 2024 17.19 (UTC)

Izin nanya @BAPerdana-WMF, klo memang automoderator berarti kan otomatis akan jalan pas kita memberikan perintah. Berarti ini mirip2 bot gitu ya? Nah kalau misal ada kesalahan/bug, berarti kita harus revert manual? F1fans (bicara) 24 Juli 2024 08.35 (UTC)

@F1fans: Terima kasih atas pertanyaannya. Apabila terjadi kesalahan pemeriksaan suntingan (false positive) yang dilakukan oleh Automoderator berupa pengembalian suntingan berniat baik, maka kontributor dapat mengembalikan suntingan tersebut. Selain itu, kami juga berusaha untuk menerapkan aturan tiga kali pengembalian ke dalam Automoderator (diskusi terkait di Phabricator) agar tidak memancing perang suntingan.

Apabila perkakas ini diaktifkan di Wikipedia bahasa Indonesia, kami sangat menyarankan untuk mengaktifkannya dalam mode sangat waspada terlebih dahulu agar Automoderator tidak akan mengembalikan sebagian besar suntingan berpotensi vandal secara otomatis. Apabila tidak terdapat anomali, komunitas bisa memutuskan untuk menaikkan tingkat sensitivitas pemeriksaan Automoderator. Ke depannya, kami akan menyiapkan halaman terpisah bagi kontributor dalam melaporkan kesalahan pemeriksaan perkakas ini.

Semoga membantu. BAPerdana-WMF (bicara) 26 Juli 2024 18.30 (UTC) (ini merupakan revisi dari balasan yang dibuat pada 24 Juli 2024 16.22 (UTC))

@BAPerdana-WMF: Saya masih ragu akan keakuratannya. Jika ada kontributor nakal yang meniru pola pengguna lain misal pengurus, ini bisa merepotkan pengurus atau kontribusi yang patroli. Tapi, sudahkah ada laporan dari Turki sebaik apa perangkat ini? Herryz (bicara) 26 Juli 2024 05.44 (UTC)

@Herryz: Terima kasih atas tanggapannya. Kami menyadari bahwa perkakas ini tidak sepenuhnya sempurna, bahkan memiliki risiko kesalahan pemeriksaan (false positive). Namun, Automoderator memiliki beberapa opsi tingkat sensitivitas pemeriksaan yang disebut dengan mode pemeriksaan. Maka dari itu, seperti yang sudah saya sampaikan di atas, kami sangat menyarankan untuk mengaktifkan Automoderator dalam mode sangat waspada terlebih dahulu.

Melalui mode ini, Automoderator tidak akan mengembalikan sebagian besar suntingan berpotensi vandal secara otomatis dan meminimalkan risiko kesalahan pemeriksaan. Apabila terdapat kesalahan pemeriksaan yang dilakukan oleh Automoderator, kontributor dapat melaporkan hal tersebut ke halaman terpisah yang akan kami buat (apabila Automoderator diaktifkan di Wikipedia bahasa Indonesia) dan akan kami teruskan kepada tim terkait untuk ditangani lebih lanjut.

Apabila dirasa mode sangat waspada pada Automoderator sudah tidak lagi terjadi kesalahan pemeriksaan, komunitas dapat memutuskan untuk meningkatkan sensitivitas pemeriksaannya. Intinya, peran dari komunitas sangat penting dalam membantu perkakas ini agar semakin andal untuk membantu memberantas vandalisme. Saya akan menyampaikan kekhawatiran Anda kepada tim terkait sebagai bahan pertimbangan, serta meminta laporan penerapan Automoderator di Wikipedia bahasa Turki jika ada. Salam. BAPerdana-WMF (bicara) 26 Juli 2024 18.30 (UTC)

Ok. Bisa dicoba. Terima kasih. Herryz (bicara) 28 Juli 2024 11.12 (UTC)

@BAPerdana-WMF: Saya cukup tertarik, namun ada pertanyaan yang dari tadi mengganggu saya. Bagaimana cara automoderator yang notabenenya adalah bot dapat mendeteksi sebuah suntingan sebagai vandal? Serta, apakah automoderator ini semacam bot yang bekerja setengah manual (semi-otomatis) ataukah bekerja sendirian secara otomatis dengan diprogram?. Terima kasih ▪ ^{꧋ꦩꦣꦪ.} Fazoffic _{( ʖ╎ᓵᔑ∷ᔑ)} 28 Juli 2024 11.21 (UTC)

@Fazoffic: Terima kasih atas pertanyaannya. Sederhananya, Automoderator menggunakan model pembelajaran mesin yang datanya berasal dari berbagai contoh suntingan vandal. Layaknya model pembelajaran mesin pada umumnya, lambat laun perkakas bisa "belajar" dari data yang sudah dimasukkan maupun praktiknya di lapangan (dalam hal ini adalah memeriksa suntingan di Perubahan Terbaru).

Automoderator sendiri bekerja secara otomatis mengembalikan suntingan yang berpotensi vandal. Selain itu, pengurus memiliki hak untuk mengatur perkakas ini mulai dari tingkat sensitivitas pemeriksaannya hingga mengaktifkan/mematikan Automoderator.

Semoga membantu. BAPerdana-WMF (bicara) 29 Juli 2024 16.43 (UTC)

Pertanyaan dari HaEr48

• Jika terjadi masalah dengana automoderator ini (misalnya mengembalikan suntingan yang sebenarnya baik), bagaimana proses untuk melaporkannya, dan apakah ada jalur komunikasi dengan para pengembang bot? HaEr48 (bicara) 28 Juli 2024 14.57 (UTC)

  Terima kasih atas pertanyaannya. Seperti yang sudah saya sampaikan di atas, nantinya kami akan membuat halaman tersendiri yang dapat memungkinkan kontributor dalam melaporkan kesalahan pemeriksaan Automoderator. Misalnya seperti halaman ini di Wikipedia bahasa Turki. BAPerdana-WMF (bicara) 29 Juli 2024 16.52 (UTC)

• Apakah ada angka/statistik yang menunjukkan performa automoderator ini di Wikipedia Bahasa Turki? HaEr48 (bicara) 28 Juli 2024 14.57 (UTC)