DIGIVESTASI - Chatbot yang dikembangkan oleh perusahaan milik Elon Musk berhasil mengalahkan ChatGPT. Dalam beberapa pengujian, Grok mampu meraih skor lebih tinggi dibandingkan chatbot yang dikembangkan oleh OpenAI.  Grok yang  dirilis beberapa waktu lalu mengumumkan telah mendapat upgrade ke versi 1.5. Pengembang Chatbot xAI menjelaskan bahwa model terbarunya dapat memahami dokumen yang lebih panjang, perintah yang lebih kompleks, dan penalaran yang lebih maju.

Pengusaha menunjukkan bahwa Grok 1.5 mencapai 74,1% pada benchmark HumanEval. Terdiri dari 164 soal pemrograman dan tidak termasuk dalam pelatihan model AI.  GPT-4 mencapai 67%. Gemini Pro, chatbot Google,  memiliki skor 71,9%. 

Pada tes MMLU, Grok memperoleh hasil yang hampir sama (83,7%) dengan Gemini dalam pengetahuan 57 mata pelajaran dasar dan lanjutan. Model terbaru mendapat skor 81,3% yang tercatat pada Senin (1 April 2024). Pak Grok mendapat nilai 50,6% pada tes matematika yang mencakup pertanyaan kompetitif untuk kelas K-12. Nilai pada kategori ini masih di bawah GPT-4 atau 52,9%. 

Bukan rahasia lagi kalau Musk  punya ambisi besar untuk chatbots. Laporan X menyatakan bahwa Grok baru akan mengungguli  AI yang ada di setiap metrik. Ia juga mengatakan bahwa pembaruan pada Grok  akan terus dilakukan. “Grok 2 sedang dalam pelatihan,” ujarnya. Grok diumumkan akhir tahun lalu dan bersiap untuk tersedia bagi pengguna X. Namun, chatbots hanya dapat digunakan dengan layanan berbayar di dalam aplikasi. Grok berharga $16 per bulan dan mencakup fitur X-Premium.

Temukan berita dan artikel lainnya di Google Berita