
SKY-001: Engineering World Model ของ Skyfall AI เอาชนะ GPT-6 Astra ด้านต้นทุนได้ 150 เท่า — และด้านความแม่นยำ 0.6 คะแนน
- Orcaใหม่Orca: OrcaCyber Ultra 1.02026-10-17$5.00 / $10.00 ต่อ 1 ล้านโทเค็น · 11 tok/s
- deepseekใหม่DeepSeek: DeepSeek V4.1 Flash 10172026-10-1745ความฉลาด
- DeepSeekใหม่DeepSeek: DeepSeek V4.1 Flash2026-10-1740ความฉลาด
- Orcaใหม่Orca: OrcaCyber Zero 1.52026-10-10$3.00 / $7.50 ต่อ 1 ล้านโทเค็น · 136 tok/s
- openaiOpenAI: GPT-6.1 Sol2026-09-2952ความฉลาด
- anthropicAnthropic: Claude Sonnet 5.52026-09-2856ความฉลาด
- typesafeTypeSafe: Jev 1.132026-09-24$0.04 / $0.00 ต่อ 1 ล้านโทเค็น · 1055 tok/s
- OpenAIOpenAI: GPT-6 Luna2026-09-2238ความฉลาด
- OpenAIOpenAI: GPT-6 Sol2026-09-2248ความฉลาด
- AnthropicAnthropic: Claude Opus 5.52026-09-2258ความฉลาด
- xAIGrok 4.72026-09-2146ความฉลาด
- OrcaOrca: OrcaCyber Zero 1.02026-09-17$3.00 / $7.50 ต่อ 1 ล้านโทเค็น · 50 tok/s
- OrcaOrca: OrcaVerify Text 1.02026-09-16$2.00 / $0.00 ต่อ 1 ล้านโทเค็น · 826 tok/s
- OpenAIOpenAI: GPT-6 Astra2026-09-0453ความฉลาด77การเขียนโค้ด
- GoogleGoogle: Gemini 3.8 Flash2026-09-0241ความฉลาด76การเขียนโค้ด
- AlibabaQwen: Qwen3.8 Max (0902)2026-09-0245ความฉลาด76การเขียนโค้ด
- AnthropicAnthropic: Claude Fable 5.12026-09-0153ความฉลาด82การเขียนโค้ด
- TencentTencent: Hy4 preview2026-08-28$0.83 / $2.50 ต่อ 1 ล้านโทเค็น · 47 tok/s
- AlibabaQwen: Qwen3.8 Flash2026-08-26$0.15 / $0.47 ต่อ 1 ล้านโทเค็น · 94 tok/s
- z-aiZ.ai: GLM 5.3 Flash2026-08-2642ความฉลาด72การเขียนโค้ด
Skyfall AI ประกาศ SKY-001 เมื่อวันที่ 19 ตุลาคม 2026 และคำกล่าวอ้างที่คุณจะเห็นซ้ำ ๆ คือมันทำงานด้าน CAD และ BIM ได้เหนือกว่า GPT-6 Astra และ Claude Opus 5.5 ตัวเลขที่อยู่ใต้คำกล่าวอ้างนั้นเล็กกว่าและน่าสนใจกว่าตัวคำกล่าวอ้างเอง บนเบนช์มาร์กงานก่อสร้าง CAD ของผู้ขายเอง SKY-001 ทำคะแนนได้ 79.7% IoU เทียบกับ 79.1% ของ GPT-6 Astra นั่นคือ 0.6 พอยต์ — ช่องว่างแบบที่คุณได้จากซีดสุ่มที่ต่างกัน ไม่ใช่จากสถาปัตยกรรมใหม่ สิ่งที่ไม่ใกล้เคียงกันเลยคือทุกอย่างรอบ ๆ มัน: 3.9 วินาทีต่อเคส เทียบกับ 199 และ $0.005 เทียบกับ $0.75 ความแม่นยำเสมอกัน ประสิทธิภาพนั้นขาดลอย เอกสารของ Skyfall เองประกาศจุดที่สองอย่างกึกก้อง และในจุดหนึ่งก็ยืนยันจุดแรกให้คุณโดยไม่ได้ตั้งใจ ความล้มเหลวของ AI และเหตุการณ์ของเอเจนต์ที่มีการบันทึกไว้ซึ่งอยู่เบื้องหลังการเปิดตัวแบบนี้ ถูกรวบรวมไว้ใน the OrcaRouter AI Incident Archive ซึ่งแต่ละรายการมีแหล่งอ้างอิง ระดับความรุนแรง เกรดความเชื่อมั่น และธงข้อโต้แย้งของตัวเอง
มีอีกเรื่องที่ต้องรู้ก่อนที่ตัวเลขเหล่านั้นจะมีความหมายกับคุณ: SKY-001 ไม่ใช่สิ่งที่คุณจะเรียกใช้ได้ มันอยู่ในช่วงพรีวิวงานวิจัย ภายใต้รายชื่อรอ โดยมีเป้าหมายการใช้งานเชิงพาณิชย์เต็มรูปแบบในช่วงต้นปี 2027 ไม่มี API ไม่มีราคา ไม่มีค่าน้ำหนักโมเดล ไม่มีจำนวนพารามิเตอร์ ไม่มีใบอนุญาต บทความนี้ว่าด้วยสิ่งที่การเปิดตัวนี้กำหนดขึ้นจริง ๆ — benchmark จะยังคงความน่าเชื่อถืออย่างไรเมื่อคุณอ่านตารางแทนที่จะอ่านพาดหัว โมเดลทำอะไรที่แตกต่างออกไปอย่างแท้จริง และทีมที่ต้องการความสามารถนี้ในวันนี้ควรทำอะไรแทนการรอ
สิ่งที่ Skyfall ส่งออกมาจริง ๆ
Skyfall AI เป็นบริษัทในซานฟรานซิสโกที่มีศูนย์วิจัยในโตรอนโต ก่อตั้งโดยทีมที่อยู่เบื้องหลัง Maluuba ซึ่งเป็นห้องปฏิบัติการการเรียนรู้เชิงลึกที่ Microsoft เข้าซื้อในปี 2017 Sam Pasupalak ดำรงตำแหน่ง CEO โดย Kaheer Suleman และ Sumit Pasupalak เป็นผู้ร่วมก่อตั้ง บริษัทเปิดตัวออกจากโหมดลับในเดือนกรกฎาคม 2026 ด้วยข้อเสนอที่แปลกใหม่ — เวิลด์โมเดลสำหรับองค์กร และในที่สุดก็เป็นบริษัทที่ขับเคลื่อนโดย AI — โดยได้รับการสนับสนุนจาก Fidelity, Touring Capital, M13 และ iNovia SKY-001 คือการเปิดตัวโมเดลแรกของบริษัท และเป็นผลงานรูปธรรมชิ้นแรกที่รองรับแนวคิดดังกล่าว
คำโปรยในหนึ่งประโยค: การออกแบบเชิงวิศวกรรมไม่ใช่ปัญหาทางภาษา ดังนั้นจงเลิกแก้มันด้วยโมเดลภาษา เครื่องยนต์หนึ่งเครื่องแตกออกเป็นชิ้นส่วนหลายร้อยชิ้นที่ซ้อนกันหลายระดับ โดยแต่ละชิ้นถูกจำกัดด้วยชิ้นส่วนข้างเคียง แปลนพื้นประกอบด้วยผนัง แล้วเป็นยูนิต แล้วเป็นห้อง แล้วเป็นประตูและอุปกรณ์ติดตั้ง ซึ่งวาดตามลำดับที่สำคัญ โมเดลที่ปล่อยสายข้อความออโตรีเกรสซีฟยาวเส้นเดียวออกมาจะต้องเก็บทั้งหมดนั้นไว้ในบริบทเดียวและยิ่งแย่ลงเมื่อสายยาวขึ้น SKY-001 กลับวางแผนในโลกเชิงภาพ ในโครงสร้างแบบลำดับชั้น โดยแต่ละระดับส่งเป้าหมายย่อยที่ชัดเจนให้ระดับถัดลงไป
มีสององค์ประกอบที่ทำสิ่งนี้ Hierarchical Composerรับเจตนาในการออกแบบ — ภาพ ข้อความ หรือเปลือกอาคารพร้อมโจทย์ — และสร้างงานออกแบบทั้งหมด จากนั้นแยกออกเป็นระดับทีละระดับ โดยปรับแต่งแต่ละใบพร้อมกัน ส่วนConstruction World Modelจากนั้นจะทำนายลำดับของสถานะทางภาพที่เรียงกันซึ่งใช้สร้างแต่ละใบ: ใน CAD เป็นลูกโซ่ของสถานะทรงตัน 3D โดยมีสเก็ตช์ 2D วาดอยู่ระหว่างคู่ที่ต่อเนื่องกันแต่ละคู่; ใน BIM เป็นผังพื้นที่วาดทีละเส้น การวาดเองทำงานแบบ diffusion ในสองรอบ โดยรอบแรกเป็นการแผ่แบบหยาบในปริภูมิแฝงที่บีบอัดจากออโตเอนโคเดอร์สไตล์ Matryoshka จากนั้นเป็นตัวปรับละเอียดที่ฟื้นคืนความละเอียดเต็ม ทั้งสองเป็นทรานส์ฟอร์เมอร์แบบ diffusion; ทั้งคู่ไม่ได้ทำนายโทเคน
ไม่มีข้อมูลเกี่ยวกับขนาดของสถาปัตยกรรมนั้นที่เปิดเผยต่อสาธารณะ Skyfall เปิดเผยข้อมูลของตน ไม่ใช่โมเดลของตน โดยมีชิ้นส่วนมากกว่า 200,000 ชิ้นสำหรับคอมโพเซอร์ และตัวอย่างการก่อสร้างมากกว่า 600,000 ตัวอย่างสำหรับเวิลด์โมเดล พร้อมแผนผังชั้นจริงและสังเคราะห์ราว 35,000 แบบ ซึ่งเป็นตัวแทนของสถานะแบบเขียนแบบประมาณสองล้านสถานะ ข้อมูล CAD ถูกสร้างขึ้นใหม่จากชุดข้อมูลการประกอบสาธารณะที่มีลำดับชั้นไม่สอดคล้องกัน ชิ้นส่วนไม่มีชื่อ และประวัติการก่อสร้างหายไป Skyfall จึงทำวิศวกรรมย้อนกลับข้อมูลเหล่านั้นด้วยเครื่องมือทางวิศวกรรมและเวิร์กโฟลว์ที่ใช้ LLM ช่วย และตรวจสอบผลลัพธ์ก่อนนำไปฝึก ข้อโต้แย้งเรื่องขนาดข้อมูลนั้นมีจริง เมื่อเทียบกับ PartVerse ซึ่งเป็นชุดข้อมูลการแยกชิ้นส่วนที่ใช้กันทั่วไป วัตถุค่ามัธยฐานมี 6 ชิ้นส่วน และเปอร์เซ็นไทล์ที่ 99 มี 33 ชิ้น ส่วนค่ามัธยฐานของ Skyfall คือ 288 และเปอร์เซ็นไทล์ที่ 99 คือ 4,180
การอ่าน CAD benchmark อย่างถูกต้อง
เบนช์มาร์กการสร้าง CAD ประกอบด้วยชิ้นส่วน 1,000 ชิ้นที่สุ่มมาจากวัตถุที่ซับซ้อน — Jaguar E-Type Roadster, แขนเชื่อม FANUC ArcMate 100iB, Minitractor 4×4, เฮลิคอปเตอร์ Bell 222 และเครื่องยนต์ไอพ่น — โดยแต่ละชิ้นใช้ขั้นตอนการวาดประมาณ 100 ขั้น และให้คะแนนด้วย IoU เทียบกับรูปร่างอ้างอิง มีการรันโมเดลระดับแนวหน้า 5 โมเดลกับเบนช์มาร์กนี้ ตัวเลขทุกตัวด้านล่างเป็นของ Skyfall ผลิตโดย Skyfall บนโมเดลที่ Skyfall รันเอง
• เวลาต่อเคส — SKY-001 3.9 วินาที; GPT-6 Astra 199 วินาที; Gemini 4 253 วินาที; Kimi K3 439 วินาที; Qwen 3.8 Max 764 วินาที; Grok 4.7 1,250 วินาที และทำเสร็จ 0 รายการ
• ต้นทุนต่อเคส — SKY-001 $0.005; GPT-6 Astra $0.75; Gemini 4 $0.25; Qwen 3.8 Max $0.30; Kimi K3 $0.13; Grok 4.7 $0.59 สำหรับกรณีที่ไม่มีเอาต์พุต
• คุณภาพ (IoU เฉลี่ย) — SKY-001 79.7%; GPT-6 Astra 79.1%; Gemini 4 76.9%; Qwen 3.8 Max 34.4%; Kimi K3 9.5%; Grok 4.7 ไม่มีผลลัพธ์
นี่คือตารางทั้งหมด และมันคุ้มค่าที่จะอ่านเป็นรอบที่สอง เรื่องประสิทธิภาพนั้นแข็งแกร่งสมกับที่โฆษณาไว้: เร็วกว่า 51 เท่าและถูกกว่า 150 เท่าเมื่อเทียบกับคู่แข่งที่ดีที่สุด ซึ่งที่หนึ่งพันดีไซน์ต่อสัปดาห์ นั่นคือความแตกต่างระหว่างรายการค่าใช้จ่าย 5 ดอลลาร์กับ 750 ดอลลาร์ ส่วนเรื่องคุณภาพนั้นเสมอกัน SKY-001, GPT-6 Astra และ Gemini 4 ต่างอยู่ในช่วงห่างกันไม่เกินสามคะแนนที่อันดับบน การทรุดตัวลงใต้พวกมัน — 34.4%, 9.5%, ไม่มีเอาต์พุต — บอกอะไรได้มากกว่าว่าการพรอมป์ LLM แบบไร้ชั้นเชิงล้มเหลวอย่างรุนแรงเพียงใดกับลำดับการก่อสร้างที่ยาว มากกว่าที่มันบอกเกี่ยวกับผู้ชนะ Grok 4.7 ที่ทำเสร็จศูนย์จาก 1,000 เคสเป็นเครื่องเตือนใจว่าสิ่งเหล่านี้คือ rollout ที่ยาวและเปราะบาง และ benchmark กำลังวัดว่าโมเดลสามารถคงความสอดคล้องได้ตลอด 100 ขั้นหรือไม่เลย
ข้อควรระวังหนึ่งประการเกี่ยวกับคอลัมน์ต้นทุน: Skyfall รายงานต้นทุนต่อเคส แต่ไม่ได้เปิดเผยวิธีบัญชีเบื้องหลัง ไม่ว่าจะเป็นราคาตามรายการของ API เวลา GPU ที่เช่า หรือต้นทุนการอนุมานแบบโฮสต์เองที่ตัดจำหน่ายแล้ว สิ่งนี้เปลี่ยนการเปรียบเทียบอย่างมีนัยสำคัญ โดยเฉพาะสำหรับโมเดลที่ Skyfall รันเองแทนที่จะเรียกผ่านบริการ ให้ถือว่าอัตราส่วนมีทิศทางที่ถูกต้อง และตัวเลขดอลลาร์แบบสัมบูรณ์ยังไม่ได้รับการอธิบาย

คำกล่าวอ้างเรื่องประสิทธิภาพจะเปลี่ยนไปขึ้นอยู่กับว่าคุณอ่านหน้าไหน
เอกสารเปิดตัวของ Skyfall ไม่สอดคล้องกัน ซึ่งควรทราบไว้หากคุณวางแผนจะอ้างอิงสิ่งเหล่านี้ บล็อกเปิดตัวพาดหัวว่า "เร็วขึ้นประมาณ 50× และน้อยลง 150 เท่า" ต่อเคส CAD และป้ายกำกับในแผนภูมิระบุ 51× และ 150× หน้าผลิตภัณฑ์ SKY-001 พาดหัวว่า "3.9 s เทียบกับ 199 s เร็วขึ้น 49×" และ "$0.005 เทียบกับ $0.75 ต้นทุนต่ำลง 143×" ข่าวประชาสัมพันธ์ระบุว่า "เร็วขึ้น 100x" และ "ต้นทุนต่ำลง 150x" โมเดลเดียวกัน benchmark เดียวกัน แต่มีตัวคูณความเร็วที่แตกต่างกันถึงสี่ค่าในสามเอกสารที่เผยแพร่ในวันเดียวกัน
เลขคณิตช่วยสรุปกรณี CAD ได้อย่างชัดเจน: 199 หารด้วย 3.9 เท่ากับ 51.0 และ $0.75 หารด้วย $0.005 เท่ากับ 150 บล็อกนั้นถูกต้อง ส่วนอีกสองหน้าถูกปัดเศษ ล้าสมัย หรือคำนวณบนฐานอ้างอิงที่แตกต่างออกไป — ตัวคูณ 100× ในข่าวประชาสัมพันธ์ไม่สามารถทำให้สอดคล้องกับตัวเลขใด ๆ บนเว็บไซต์ได้ นี่ไม่ใช่เรื่องอื้อฉาว หน้าเปิดตัวถูกเขียนโดยคนละคนและมีกำหนดส่งต่างกัน และไม่มีใครนำมาเปรียบเทียบความแตกต่างกัน นี่เป็นเหตุผลให้อ้างอิงตารางหลัก ไม่ใช่พาดหัวข่าว และให้คาดว่าตัวคูณที่คุณเห็นในข่าวสัปดาห์นี้จะผิดไปในทิศทางที่ผู้เขียนบังเอิญอ่านเจอก่อน
หน้าแลนดิ้งยังรายงานแผงคุณภาพแผงที่สองที่ไม่สอดคล้องกับบล็อกด้วย แผนภาพ 3D CAD ของมันแสดง SKY-001 ที่ IoU 76.1% เทียบกับ GPT-6 Astra ที่ 73.4%, Claude Opus 5.5 ที่ 61.8%, Gemini 3.8 Flash ที่ 45.9%, Qwen 3.8 Max ที่ 26.6% และ Kimi K3 ที่ 6.5% ส่วน benchmark งานก่อสร้างในบล็อกแสดง 79.7% เทียบกับ 79.1% คนละงาน คนละคะแนน แต่มีชื่อโมเดลเดียวกันในทั้งสองที่ และส่วนต่างที่เหนือกว่า Astra เปลี่ยนจาก 0.6 คะแนนเป็น 2.7 คะแนน ขึ้นอยู่กับว่าคุณหยิบอันไหนมาอ้าง ถ้าคุณจะโต้แย้งเรื่องความแม่นยำของโมเดลนี้ ก็จงระบุชื่อ benchmark พร้อมตัวเลข
BIM: ส่วนนำที่แคบลง และ Gemini ตามมาติด ๆ
เบนช์มาร์ก BIM ประกอบด้วยแปลนพื้น 1,000 แปลน — ประมาณ 350 แปลนเป็นทั้งชั้นที่นำมาจากแบบจำลองอาคาร IFC และอีก 650 แปลนในระดับอพาร์ตเมนต์ — โดยแต่ละแปลนมีขั้นตอนการวาดตั้งแต่ 20 ถึงมากกว่า 200 ขั้น เฉลี่ยประมาณ 70 ขั้น และให้คะแนนด้วย IoU จากแปลนที่วาดเสร็จแล้ว
• เวลาต่อแผน — SKY-001 1.22 วินาที; Kimi K3 113.9 วินาที; GPT-6 Astra 144.6 วินาที; Qwen 3.8 Max 255.3 วินาที; Gemini 3.8 Flash 346.2 วินาที; Grok 4.7 592.1 วินาที
• ต้นทุนต่อแผน — SKY-001 $0.0024; Qwen 3.8 Max $0.111; Gemini 3.8 Flash $0.218; Kimi K3 $0.270; Grok 4.7 $0.305; GPT-6 Astra $0.446
• คุณภาพ (mean IoU) — SKY-001 43.6%; Gemini 3.8 Flash 42.3%; GPT-6 Astra 40.6%; Kimi K3 33.7%; Qwen 3.8 Max 28.8%; Grok 4.7 28.2%
ตัวเลขความเร็ว 119 เท่าและต้นทุน 186 เท่าเมื่อเทียบกับ Astra นั้นถูกต้อง แต่ลองดูคอลัมน์คุณภาพ: Gemini 3.8 Flash ตามหลัง SKY-001 อยู่ 1.3 คะแนน และ Gemini 3.8 Flash มีต้นทุนสูงกว่า 91 เท่า แต่เมื่อคิดเป็นมูลค่าสัมบูรณ์ก็ยังถือว่าถูกที่ 22 เซนต์ต่อแบบ ช่องว่างที่สำคัญสำหรับบริษัทที่เขียนแบบหลายพันแบบนั้นเป็นเรื่องจริง ส่วนช่องว่างที่สำคัญสำหรับบริษัทที่เขียนแบบเพียงไม่กี่สิบแบบนั้นเป็นแค่ความคลาดเคลื่อนจากการปัดเศษเมื่อเทียบกับการเปลี่ยนแปลงเวิร์กโฟลว์
และลองดูตัวเลขสัมบูรณ์สิ โมเดลที่ดีที่สุดบนเบนช์มาร์กนี้สร้างผังพื้นขึ้นมาใหม่ได้ 43.6% เมื่อวัดด้วย intersection-over-union นั่นคือเกณฑ์คุณภาพระดับตัวอย่างงานวิจัย ซึ่งระบุไว้ตรง ๆ จากการให้คะแนนของเจ้าของผลิตภัณฑ์เอง ไม่ใช่เกณฑ์ระดับ "แทนสถาปนิกได้" เมื่ออ่านในแง่นั้น ข้ออ้างจริงของการเปิดตัวนี้จึงแคบกว่าและป้องกันได้มากกว่าทวีต: โมเดลเชิงพื้นที่ที่สร้างขึ้นเพื่อจุดประสงค์เฉพาะสามารถวางแผนลำดับการก่อสร้างยาว ๆ ได้ด้วยความเร็วที่ทำให้การสร้างแบบจำนวนมากและการค้นหาทำได้จริง ในระดับความแม่นยำเทียบเท่ามนุษย์โดยประมาณเมื่อเทียบกับ LLM ชั้นแนวหน้าที่ถูกนำมาเปรียบเทียบด้วย — ไม่ใช่ข้ออ้างว่าแก้ออกแบบอาคารได้แล้ว
สิ่งที่ทวีตนั้นเข้าใจผิด
การวางกรอบว่า SKY-001 "ทำได้เหนือกว่า GPT-6 Astra และ Opus 5.5 ในงาน CAD และ BIM" ทำให้การเปรียบเทียบหนึ่งในสองรายการนั้นเกินจริง Claude Opus 5.5 ไม่ปรากฏใน benchmark งานก่อสร้างทั้งสองรายการเลย มันปรากฏในอีกสองที่: ในวิดีโอเชิงคุณภาพที่โมเดลทั้งสี่ต่างเขียนสคริปต์ Blender สำหรับชิ้นงานประกอบทั้งหมดในคำขอเดียว — ซึ่ง Skyfall เองกล่าวว่า GPT-6 Astra "นำหน้าอย่างมาก" เมื่อเทียบกับโมเดลระดับแนวหน้าอื่น ๆ — และในฐานะหนึ่งในผู้ตัดสิน LLM แบบ blind สองคนที่ให้คะแนน SKY-001 เทียบกับ Astra ควบคู่กับ GPT-6.1 Sol แผง 3D CAD บนหน้าแลนดิ้งเพจนั้นมี Opus 5.5 รวมอยู่ที่ 61.8% จริง และนั่นเป็นที่เดียวที่มีตัวเลขของมันอยู่
บน BIM ไม่มีแถวของ Opus 5.5 อยู่เลย และในตารางการก่อสร้าง CAD ก็ไม่มีแถวของ Opus 5.5 เช่นกัน ดังนั้นเวอร์ชันที่ซื่อสัตย์ของข้อกล่าวอ้างนี้คือ: SKY-001 โดยประมาณเทียบเท่า GPT-6 Astra ในด้านความแม่นยำ โดยใช้เวลาและต้นทุนเพียงเศษเสี้ยว และเอาชนะโมเดลแนวหน้าที่ถูกทดสอบซึ่งรวมถึง Gemini, Qwen และ Kimi ด้วยส่วนต่างที่เพิ่มขึ้นเมื่องานยาวขึ้น ส่วนของ Opus ในประโยคนั้นสืบทอดมาจากวิดีโอสาธิตและตำแหน่งกรรมการ ไม่ใช่จากเบนช์มาร์ก
การเปรียบเทียบ composer สมควรมีข้อควรระวังของตัวเอง เพราะเป็นผลลัพธ์ที่อ่อนกว่าจากสองผลลัพธ์ Skyfall ทดสอบ SKY-001 เทียบกับ GPT-6 Astra, Claude Opus 5.5 และ Claude Fable 5.1 บนภาพถ่ายอินพุตเดียวกัน โดยให้ LLM แต่ละตัวเขียนสคริปต์ Blender สำหรับการประกอบทั้งหมดในคำขอเดียว ผู้ตัดสิน LLM แบบ blind สองตัวให้คะแนนเรนเดอร์ตั้งแต่ 1 ถึง 10 ในห้ามิติ และ SKY-001 ชนะสี่ในห้ามิติ ได้แก่ การแยกชิ้นส่วน 7.8 ต่อ 6.4, ภายใน 7.3 ต่อ 6.3, ความซับซ้อน 8.0 ต่อ 7.3, ความตรงกับภาพอินพุต 8.1 ต่อ 6.7, ความสมจริงภายนอก 7.7 ต่อ 7.4 ข้อควรระวังอยู่ในเชิงอรรถของ Skyfall เอง: ผู้ตัดสินเป็น LLM, การตั้งค่าเป็นการพรอมป์แบบ one-shot โดยไม่มีการใช้เครื่องมือหรือการวนซ้ำสำหรับคู่แข่ง และ GPT-6 Astra ส่งคืนโมเดลมาเพียง 82% ของแอสเซต เท่านั้น ดังนั้นใน 18% ของชุดข้อมูล SKY-001 จึงแข่งขันกับสิ่งที่ไม่มีอยู่เลย สคริปต์ Blender ในคำขอเดียวเป็นวิธีที่จงใจไม่เอื้อประโยชน์ในการรัน LLM ชั้นแนวหน้าในงานประกอบ 3D นั่นไม่ได้ทำให้ผลลัพธ์เป็นเท็จ แต่ทำให้มันเป็นการเปรียบเทียบระหว่างไปป์ไลน์ที่สร้างขึ้นเพื่อวัตถุประสงค์เฉพาะกับพรอมป์สำเร็จรูป ซึ่งเป็นสิ่งที่เบนช์มาร์ก construction เป็นเช่นกัน

สิ่งนี้หมายความว่าอย่างไรหากคุณสร้างซอฟต์แวร์วิศวกรรมจริง ๆ
ข้อกล่าวอ้างที่น่าสนใจไม่ใช่ส่วนต่างของคะแนน benchmark แต่คือการที่แบบจำลองโลกเชิงพื้นที่แบบลำดับชั้นสามารถรักษาแผนการก่อสร้าง 100 ขั้นไว้ด้วยกันได้เลย โดยครอบคลุมระดับการประกอบห้าระดับและชิ้นส่วนหลายพันชิ้น และสร้างสิ่งที่ได้คะแนนห่างจาก LLM ชั้นแนวหน้าไม่เกินหนึ่งจุดในด้านการทับซ้อนทางเรขาคณิต หากสิ่งนี้ยังคงยืนได้ภายใต้การทดสอบอิสระ ผลกระทบในทางปฏิบัติจะเกี่ยวกับการค้นหามากกว่าการแทนที่: เมื่อการ rollout การออกแบบหนึ่งครั้งมีต้นทุนครึ่งเซนต์และสี่วินาที แทนที่จะเป็น 75 เซนต์และสามนาที คุณจะสร้างรูปแบบได้หนึ่งพันแบบแล้วเลือกหนึ่งแบบ นั่นเป็นผลิตภัณฑ์ที่แตกต่างจากแบบจำลองที่สร้างการออกแบบหนึ่งแบบอย่างช้า ๆ
ส่วนที่ Skyfall บอกว่าจะตามมาถัดไปนั้นชี้ไปในทิศทางเดียวกัน ภาพร่าง CAD จะกลายเป็นปฏิบัติการพาราเมตริกที่รันได้พร้อมประวัติฟีเจอร์ที่แก้ไขได้ นักออกแบบจึงสั่งให้ขยายแบร็กเก็ตได้ และชิ้นส่วนข้างเคียงที่ต้องเปลี่ยนก็จะเปลี่ยนตาม เอาต์พุต BIM จะกลายเป็นผนัง ประตู หน้าต่าง และห้องในแบบจำลองอาคารที่แก้ไขได้ แทนที่จะเป็นแบบวาด นอกจากนั้นยังมีเลย์เอาต์ PCB และฮาร์ดแวร์อื่น ๆ ทั้งหมดนี้เป็นข้อความบนโรดแมป ไม่ใช่ฟีเจอร์ที่เปิดให้ใช้แล้ว และพรีวิวงานวิจัยนี้ไม่มีสิ่งเหล่านั้นเลย
ยังมีคำถามที่การเปิดตัวโมเดลโดยปกติจะตอบไว้ แต่ครั้งนี้ไม่ได้ตอบ ไม่มีจำนวนพารามิเตอร์ ไม่มีบทความสถาปัตยกรรม ไม่มีน้ำหนักโมเดล ไม่มีสัญญาอนุญาต ไม่มีวิธีโฮสต์เอง ไม่มีหน้าต่างบริบท เพราะมันไม่ใช่แชตโมเดล ไม่มีชุดทดสอบการประเมินที่เผยแพร่ ดังนั้นจึงไม่มีทางรัน benchmark ซ้ำกับชิ้นส่วนของคุณเองได้ และไม่มีการวัดผลที่เป็นอิสระ: Artificial Analysis, LMArena และกระดานบุคคลที่สามตามปกติไม่มีรายการ SKY-001 ซึ่งก็ไม่น่าแปลกใจสำหรับโมเดลที่เปิดต่อสาธารณะมาได้หนึ่งวันและยังเรียกใช้งานไม่ได้ ทุกตัวเลขในชิ้นนี้เป็นการรายงานโดยผู้ขายและยังไม่มีใครทำซ้ำได้ และหน้าเพจของผู้ขายเองก็ขัดกันเองมากถึง 2× ในตัวคูณความเร็วที่เป็นจุดขาย สิ่งที่ควรรอก่อนที่ตัวเลขจะกลายเป็นน้ำหนักชี้ขาดในการตัดสินใจสร้าง คือการทำซ้ำอย่างเป็นอิสระ
หากคุณต้องการความสามารถนี้ภายในไตรมาสนี้
คุณยังไม่สามารถใช้ SKY-001 ได้ หน้าเพจผลิตภัณฑ์มีรายชื่อรอ ข่าวประชาสัมพันธ์ระบุว่าเป้าหมายการเปิดใช้งานเชิงพาณิชย์เต็มรูปแบบคือต้นปี 2027 และการผสานรวมเดียวที่ถูกระบุชื่อเป็นการสาธิตภายใน Autodesk Fusion ไม่ใช่คอนเนกเตอร์ที่วางจำหน่ายแล้ว ไม่มีสิ่งใดที่นี่เป็นเหตุผลให้วางแผนไปป์ไลน์ปี 2026 โดยอิงจากมัน
สิ่งที่คุณใช้งานได้คือโมเดลที่ใช้เป็นตัวเปรียบเทียบกับมัน GPT-6 Astra ให้บริการผ่านเส้นทางของ OrcaRouter ในชื่อ openai/gpt-6-astra ในราคาตามรายการของ OpenAI ที่ $10.00 ต่อหนึ่งล้านโทเค็นอินพุต และ $50.00 ต่อหนึ่งล้านโทเค็นเอาต์พุต พร้อมหน้าต่างบริบทขนาด 1.05M โทเค็น ส่งต่อโดยมีมาร์กอัป 0% — ดังนั้นหาก OpenAI เปลี่ยนแปลงราคา ราคาที่นี่จะเปลี่ยนในวันเดียวกัน แทนที่จะเปลี่ยนหลังการคำนวณส่วนต่างกำไรใหม่ โมเดลนี้มี Artificial Analysis Intelligence Index ที่ 54.7, Coding Index ที่ 76.9 และ Agentic Index ที่ 51.6 ซึ่งเป็นตัวเลขอิสระที่ SKY-001 ไม่มี
นั่นก็เป็นวิธีที่สมเหตุสมผลในการจับตาดูโมเดลที่ยังไม่ผ่านการพิสูจน์ โดยไม่เดิมพันเส้นทางโปรดักชันกับมัน เมื่อ SKY-001 เปิดให้เข้าถึงผ่าน API ได้จริง — ต้นปี 2027 ตามแผนปัจจุบัน และอาจผ่านพาร์ตเนอร์ก่อนที่ Skyfall จะขายตรง — การทดสอบที่คุ้มค่าคือชิ้นส่วนของคุณเอง ไม่ใช่เบนช์มาร์กที่มีส่วนประกอบ 1,000 รายการ จนถึงตอนนั้น รูปแบบการจัดเส้นทางที่ยังใช้ได้กับโมเดลที่คุณยังไม่ได้ประเมินคือแบบธรรมดาที่สุด: เก็บการเรียกไว้ที่ปลายทางเดียว แล้ววางเชนสำรองไว้ด้านหลัง และปล่อยให้เราเตอร์ย้ายทราฟฟิกเมื่อผู้ให้บริการทำงานช้า หรือโมเดลไม่ใช่คำตอบที่ดีที่สุดอีกต่อไป ฟีเจอร์ failover ของ OrcaRouter มีอยู่ก็เพราะโมเดลใหม่ควรได้รับทราฟฟิกโปรดักชันโดยอิงจากผลลัพธ์ที่วัดได้ และยังไม่มีใครวัด SKY-001 นอก Skyfall

ดูอะไรดี
สามสิ่งจะเปลี่ยนสิ่งนี้จากเดโมของผู้ขายที่น่าเชื่อถือให้กลายเป็นข้อมูลประกอบการตัดสินใจ ประการแรก การประเมินที่เป็นอิสระบนชุดทดสอบสาธารณะ — benchmark ด้านการก่อสร้างเป็นของ Skyfall เอง กำหนดโดย Skyfall และไม่มีชุดงานที่เผยแพร่ ส่วนช่องว่าง 0.6 คะแนนใน CAD นั้นอยู่ในช่วงที่วิธีการให้คะแนนที่ต่างออกไปสามารถพลิกผลได้อย่างสบาย ประการที่สอง รูปแบบเชิงพาณิชย์: ต้นปี 2027 จะมาในรูป API ที่คิดราคาต่อดีไซน์ เป็นปลั๊กอินภายในเครื่องมือ CAD และ BIM ที่ผู้ซื้อทำงานอยู่แล้ว หรือเป็นไลเซนส์องค์กรที่ขายให้บริษัทแทนที่จะขายให้นักพัฒนา การกล่าวถึง Autodesk Fusion บ่งชี้ถึงทางเลือกที่สอง ซึ่งจะทำให้ SKY-001 เป็นฟีเจอร์ของซอฟต์แวร์ออกแบบที่คุณมีอยู่แล้ว ไม่ใช่โมเดลที่คุณเรียกใช้ ประการที่สาม ลำดับชั้นนี้จะขยายผลได้เกินกว่า CAD และ BIM ไปสู่งาน PCB และฮาร์ดแวร์ที่ Skyfall ระบุชื่อเป็นลำดับถัดไปหรือไม่ — นั่นคือข้ออ้างว่าสถาปัตยกรรม ไม่ใช่ข้อมูลฝึก คือความได้เปรียบ
ตอนนี้ สรุปที่แม่นยำยังคงแคบอยู่ Skyfall AI ได้เปิดตัว world model ด้านวิศวกรรมตัวแรกที่น่าเชื่อถือ และสิ่งที่มันชนะจริง ๆ คือความเร็วและต้นทุนต่อการออกแบบ โดยต่างกันหนึ่งถึงสองอันดับขนาด ด้วยความแม่นยำที่ทัดเทียมแนวหน้า มากกว่าจะเอาชนะได้ นั่นคือความสามารถใหม่จริง ๆ และเป็นการเดิมพันเชิงกลยุทธ์อย่างแท้จริงกับการใช้ LLM ในการออกแบบเชิงกายภาพ และวันนี้มันก็ยังเป็นเพียงหน้ารายชื่อรอและ benchmark จากผู้ขาย — และตัวเลข 0.6 คะแนน ไม่ใช่ 150× คือตัวเลขที่จะตัดสินว่ามันเป็นมากกว่านั้นหรือไม่
การเปรียบเทียบในบทความนี้2
ตรวจพบจากบทความนี้ · เบนช์มาร์ก: Artificial Analysis · อัปเดตทุกวัน
