Tags:
Node Thumbnail

LMSYS ผู้จัดอันดับแชตบอทโดยอาศัย Chatbot Arena เป็นการ "ต่อสู้" ระหว่างแชตบอทสองตัวให้ตอบคำถามเดียวกันแล้วให้ผู้ใช้เลือกว่าชอบคำตอบฝั่งใด รายงานผลรอบล่าสุดวันที่ 26 มกราคม 2024 และพบว่า Bard รุ่นที่ใช้ Gemini Pro นั้นแซงหน้า GPT-4 ขึ้นมาเป็นรองเพียง GPT-4 Turbo เท่านั้น

กูเกิลเปิดตัว Gemini โดยระบุว่าทดสอบวงปิดกับผู้ทดอบแล้วว่า Bard รุ่นใหม่นี้เป็นแชตบอทฟรีที่คุณภาพสูงสุดในตลาด ผลการทดลองนี้ก็ดูจะสนับสนุนว่า Gemini ให้ผลโดยรวมที่ดีในภาพรวมจริงๆ

ตัว Bard ได้คะแนนดีกว่า Gemini Pro ผ่าน API พอสมควรแต่ LMSYS ไม่ได้ทดสอบให้ Bard แข่งกันเองกับ Gemini Pro ความต่างกันเช่นนี้เป็นไปเพราะแม้กูเกิลจะระบุว่าภายใน Bard ใช้ Gemini แต่ก็ปรับแต่งโมเดลไปบ้าง ตลอดจนอาจจะอัพเดตโมเดลไประหว่างทาง ขณะที่ฝั่งที่ให้บริการ API นั้นมักจะอัพเดตโมเดลเป็นรอบๆ โดยแจ้งนักพัฒนาล่วงหน้า

ที่มา - LMSYS

No Description

No Description

Get latest news from Blognone

Comments

By: kernelbase on 27 January 2024 - 15:17 #1304514

googleกลับมาแล้ว คาดไว้อยู่แล้วว่าบริษัทที่มีข้อมูลในมือเยอะสุดต้องมีaiเจ๋ง(หรือเกือบ)สุด

By: Fzo
ContributorAndroid
on 28 January 2024 - 15:38 #1304571
Fzo's picture

mistral-medium โอเพ่นซอร์สไหมครับ


WE ARE THE 99%

By: shub on 29 January 2024 - 15:25 #1304653

เอาจริงๆนะในตลาดสามเจ้าดังตัวฟรี bing bard gpt ผมว่าbingเนี้ยตอบไม่รู้เรื่องสุดละ ต้องเปลี่ยนคำถามหลายรอบมากกว่าจะได้คำตอบที่พอใจ