Netizen mengecam pengerusi ACL kerana mengkritik arXiv secara terbuka dan mencadangkan mempertimbangkan persidangan teratas lain

Emily M. Bender, profesor di University of Washington dan naib presiden persidangan ACL 2023, mencetuskan kekecohan besar beberapa hari lalu dengan ucapannya

arXiv telah merosakkan suasana penyelidikan, jadi apa yang kita baca setiap kali hari? Profesor Universiti Harvard Boaz Barak berkata bahawa arXiv telah melakukan lebih banyak lagi untuk menggalakkan kemajuan saintifik dan meluaskan penyertaan saintifik daripada semua campur tangan tanpa nama Sebarang dasar yang menghalang arXiv bukan sahaja bodoh, tetapi juga menjejaskan kemajuan saintifik dan inklusif mempunyai kesan sebaliknya

Gergasi pembelajaran mendalam Yann LeCun menyokong pandangannya

Perbincangan tentang pandangan Emily Bender sebenarnya bukanlah sesuatu yang tidak munasabah. Lagipun, arXiv ialah platform yang hampir tiada ulasan: jika anda menyerahkan manuskrip ke persidangan akademik atau jurnal, pengarang akan kekal tanpa nama semasa tempoh semakan, tetapi pada arXiv orang sentiasa mengikuti institusi penyelidikan dan sarjana terkenal secara tidak sengaja. Namun, sejak kejadian semalam, hala tuju perbincangan telah menyerong sepenuhnya

Untuk memahami selok belok perkara tersebut, kita perlu melihat terlebih dahulu insiden penolakan kertas ACL yang menimbulkan kekecohan di komuniti AI semalam

Naomi Saphra, seorang felo pasca doktoral di New York University (belajar dengan Kyunghyun Cho) menyiarkan pada X pada 4 September, mengatakan bahawa kertas kerjanya baru sahaja ditolak oleh ACL, persidangan antarabangsa terkemuka dalam bidang pemprosesan bahasa semula jadi. Ini adalah penyerahan kertas persidangan pertamanya dengan pelajar, dan dia sebelum ini memberitahu pengarang pertama bahawa persidangan teratas tentang pemprosesan bahasa semula jadi lebih mesra pengguna daripada persidangan pembelajaran mesin. Semasa tempoh semakan, pengarang pertama menghabiskan banyak masa untuk menafikan, dan keputusan eksperimen juga menyokong maksud kertas itu

Walau bagaimanapun, perkara yang paling penting ialah sebab mengapa dia ditolak adalah kerana dia menyerahkan manuskrip selepas tarikh akhir dasar tidak mahu dikenali Menyerahkan kertas kerja kepada arXiv

Naomi Saphra berkata bahawa dasar ACL telah menyebabkan kemudaratan kepada penyelidik peringkat kemasukan baharu, menyebabkan persidangan itu menyimpang daripada niat asal bidang pemprosesan bahasa semula jadi

Persidangan Teratas AI melarang publisiti semasa semakan Kertas itu mempunyai sejarah kontroversi yang panjang. Kini, dalam kalangan AI, ramai orang sudah terbiasa menatap platform kertas pracetak arXiv setiap hari, kerana platform ini dikemas kini setiap hari. Sebagai perbandingan, penyelidikan persidangan setahun sekali dikeluarkan lebih perlahan

Dalam bidang AI, jika anda tidak membaca berita, anda akan ketinggalan

Selepas Naomi Saphra mengadu, orang ramai mula mengkritik semasa yang menjengkelkan Dasar persidangan AI

Sebastian Raschka, penyelidik pembelajaran mesin terkenal dan penolong profesor di Universiti Wisconsin-Madison, telah menjalankan beberapa penyelidikan. Beliau menegaskan bahawa kertas kerja ini ditolak bukan kerana ia terlepas tarikh akhir penyerahan kertas persidangan oleh beberapa orang minit, tetapi kerana ia telah lewat beberapa minit untuk menyerahkan kepada platform kertas pracetak pihak ketiga pilihan. Apa yang berlaku?

Mereka tidak membenarkan orang ramai membincangkan kertas arxiv mereka dalam talian sebelum ini, kini bolehkah mereka juga mengehadkan masa orang boleh memuat naik ke arxiv?

Sebastian Raschka mendapati dasar semakan secara khusus seperti berikut: Pada ACL 2023, kertas yang dihantar melalui kaedah langsung mempunyai tempoh tidak mahu dikenali dan tidak dibenarkan untuk didedahkan tandatangannya pada platform kertas pracetak. Masa yang dinyatakan pada arXiv merujuk kepada masa penyerahan, bukan masa penerbitan di arXiv. Dasar semakan yang ditemui oleh Sebastian Raschka secara khusus adalah ini: pada ACL 2023, kertas kerja yang diserahkan melalui penyerahan langsung akan mempunyai tempoh tanpa nama dan tidak akan dibenarkan untuk ditandatangani secara terbuka pada platform kertas pracetak. Masa yang ditetapkan merujuk kepada masa penyerahan pada arXiv, bukan masa awam di arXiv

Profesor Gautam Kamath dari Universiti Gaotielu juga berkata, Saya rasa dasar ini sangat bodoh, dan dalam proses pelaksanaan sebenar, situasi lebih baik daripada yang dibayangkan Lebih teruk

Kini dia telah menetapkan tarikh akhir untuk memuat naik ke arXiv, dan kertas kerja oleh Naomi Saphra et al telah ditolak kerana ia terlepas kali ini. Anda lihat, dia kini telah menetapkan tarikh akhir untuk anda memuat naik ke arXiv Kerana terlepas kali ini maka kertas Naomi Saphra dan yang lain ditolak

Boaz Barak secara sinis berkata, mungkinkah pengarangnya. kertas Ingin meluangkan sedikit masa di biara sebelum keputusan semakan keluar?

Kami kini berada dalam era model besar, dan persaingan dalam bidang NLP telah menjadi sangat sengit. Kerjaya ramai penyelidik muda bergantung pada memaparkan hasil kerja mereka pada platform keterlihatan tinggi dengan harapan mendapat lebih banyak petikan. Walau bagaimanapun, amalan semasa persidangan kecerdasan buatan teratas adalah bertentangan dengan ini

Mengikut tujuan asal persidangan seperti ACL, ia jelas sekali untuk menggalakkan pertukaran akademik dan menggalakkan pembangunan penyelidikan lanjutan. Bagaimanapun, dasar yang menyakitkan itu malah membuatkan orang ramai mempersoalkan kuasa persidangan itu sendiri

Naib Presiden Google, Fernando Pereira berkata: ACL telah lama tidak lagi bersifat akademik, dan kini ia mengikuti laluan birokrasi.

Pelajar PhD Fu Yao berkata, saya telah menyertai persidangan ACL dan ICML tahun ini, dan terdapat perbezaan yang ketara antara kedua-duanya. Kandungan ACL 2023 pada asasnya adalah lebih daripada satu tahun ketinggalan zaman, manakala kandungan ICML penuh dengan prospek untuk masa depan. Jika generasi muda penyelidik pemprosesan bahasa semula jadi ingin mempunyai masa depan, mereka harus menyerahkan artikel mereka kepada NeurIPS/ICLR/ICML

Seseorang menyebut bahawa peraturan yang membawa kepada penolakan kertas kerja Saphra bermula pada 2017. Berbanding dengan perkembangan pesat teknologi AI, pembangunan peraturan untuk persidangan AI nampaknya agak perlahan

Menariknya, ACL sebenarnya tidak diubah dengan sangat perlahan. Sejak 2022, ACL telah melancarkan mekanisme yang dipanggil "rolling review", iaitu ACL Rolling Review (ARR), yang serupa dengan proses semakan jurnal. Baru-baru ini, ACL telah menyemak peraturan penyerahan langsung akan dibatalkan sepenuhnya pada persidangan 2024, dan semua orang hanya boleh memilih untuk menyerahkan kepada ARR

Sebelum ini, kertas yang dihantar terus ke persidangan ACL boleh diproses mengikut semakan biasa. proses: 1. Setiap kertas kerja akan disemak oleh 3 atau lebih penyemak Pengarang boleh menghantar jawapan untuk membalas ulasan ulasan Setelah kertas diterima, penulis boleh mengedit draf akhir

Di bawah mekanisme ARR, kertas yang diserahkan. akan disemak oleh Ketua Kawasan Kanan (SAC) mengendalikan penyerahan dan pengarang boleh memberikan respons tetapi tidak boleh menyemak kertas kerja. Kertas kerja perlu mendapatkan semua ulasan ulasan dan ulasan ulasan komprehensif (meta-review) dan menyerahkannya kepada ACL sebelum tarikh akhir Kandungan tidak boleh diubah suai, tetapi jawapan pengarang boleh dilampirkan. Setelah diserahkan kepada ACL, ia tidak boleh diubah suai dan diserahkan kepada ARR sekali lagi (melainkan persidangan memberikan keputusan penerimaan)

Mengikut trend semasa, ACL akan terus berkembang ke arah beberapa pusingan ulasan pada masa hadapan untuk lebih dekat kepada keperluan jurnal akademik Piawaian

Pada masa ini kami belum menemui penyelesaian untuk mengimbangi penyelidikan berkualiti tinggi dan kelajuan semakan yang ketat dan adil Walaupun semakan bergulir telah mencuba yang terbaik, ia masih tidak setanding dengan kelajuan arXiv

. Berikut ialah kandungan rujukan:

Sila klik pada pautan berikut untuk melihat maklumat terperinci tentang Persidangan Utama ACL 2023: https://2023.aclweb.org/calls/main_conference/

Atas ialah kandungan terperinci Netizen mengecam pengerusi ACL kerana mengkritik arXiv secara terbuka dan mencadangkan mempertimbangkan persidangan teratas lain. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!