DeepSeek V4.1 Flash Abliterated vs OrcaVerify Text 1.0: เบนช์มาร์ก ราคา และความเร็ว (ตุลาคม 2569)

ต่อวินาที) กำหนดว่าคำตอบสตรีมเร็วแค่ไหนเมื่อเริ่มแล้ว สำหรับแชทเชิงโต้ตอบและลูป agent latency p50 ต่ำสำคัญที่สุดเพราะผู้ใช้กำลังรอ token แรกอยู่ ส่วนการสร้างแบบชุดและเอาต์พุตรูปแบบยาว throughput ครอบงำเวลารวมเพราะคำตอบยาว กราฟแนวโน้ม 7 วันด้านบนแสดงว่า latency ของแต่ละโมเดลคงที่หรือเลื่อนไหล ซึ่งเป็นสิ่งที่ตัวเลขเด่นเพียงตัวเดียวปิดบังไว้ — โมเดลที่มีค่าเฉลี่ยดีเยี่ยมแต่หางแกว่งก็ยังอาจพลาด p95 SLA ที่เข้มงวดได้ หากผลิตภัณฑ์ของคุณมีงบประมาณ latency ให้อ่านทั้งค่ามัธยฐานและรูปทรงของเส้นโค้ง และจำไว้ว่า latency แบบครบวงจรยังรวมถึงการกระโดดข้ามเครือข่ายของคุณและการดึงข้อมูลหรือการเรียกเครื่องมือใด ๆ ที่คุณทำรอบ ๆ โมเดลด้วย

และเปอร์เซ็นไทล์บอกว่าแต่ละโมเดลอยู่ตรงไหนเมื่อเทียบกับทุกโมเดลที่เทียบเคียงได้ในแคตตาล็อก — เป็นสัญญาณคัดกรองที่มีประโยชน์ ไม่ใช่การรับประกันสำหรับงานของคุณ โมเดลที่นำในดัชนีความฉลาดทั่วไปก็ยังอาจตามหลังในโดเมนของคุณ (การเขียนโค้ด การสกัด หลายภาษา การให้เหตุผลบน context ยาว) ดังนั้นจงใช้ benchmark เพื่อจำกัดตัวเลือก แล้วรันทั้งสองโมเดลบนสไลซ์ทราฟฟิกที่เป็นตัวแทน จงใส่ใจกับดัชนีเฉพาะที่ตรงกับกรณีใช้งานของคุณ มากกว่าตัวเลขรวมบนสุด: ผลิตภัณฑ์ที่เน้นการเขียนโค้ดควรให้น้ำหนักกับดัชนีการเขียนโค้ด ส่วนผู้ช่วยวิจัยให้น้ำหนักกับดัชนีการให้เหตุผล benchmark ยังล้าสมัยลงเมื่อโมเดลได้รับการอัปเดต ดังนั้นจงถือว่ามันเป็นสมมติฐานตั้งต้นที่คุณยืนยันด้วยชุดประเมินของคุณเอง