Courtesy of TechCrunch
Startup AI Mistral telah meluncurkan API baru untuk moderasi konten yang dapat disesuaikan dengan aplikasi dan standar keselamatan tertentu. API ini menggunakan model yang telah disempurnakan, yaitu Ministral 8B, yang mampu mengklasifikasikan teks dalam berbagai bahasa seperti Inggris, Prancis, dan Jerman ke dalam sembilan kategori, termasuk konten seksual, kebencian, kekerasan, dan informasi pribadi. Mistral percaya bahwa sistem moderasi berbasis AI ini dapat membantu membuat proses moderasi lebih efisien dan efektif.
Namun, meskipun sistem ini menjanjikan, ada kekhawatiran tentang bias dan kesalahan teknis yang mungkin terjadi, seperti kesulitan dalam mendeteksi bahasa tertentu atau konteks yang berbeda. Mistral mengakui bahwa model moderasinya masih dalam tahap pengembangan dan berkomitmen untuk bekerja sama dengan pelanggan dan komunitas penelitian untuk meningkatkan keamanan dan efektivitas sistem ini.