บล็อกของ Workstation
Machine Learning
บทความที่ติดแท็ก Machine Learning
เทอร์โบชาร์จเจอร์ LLMs
Workstation บนเทอร์โบชาร์จ LLMs: การเพจ PagedAttention สำหรับแคช KV, การให้บริการ vLLM, Self-Debugging สำหรับตัวแทน, อัตราโทเค็น PowerInfer และการตัดหน่วยความจำ EG-MLA — พร้อมข้อเสียด้านการผลิต
Balinder Waliaอ่าน 
ระบบดีปลิร์นนิง: บทสรุปทางเทคนิคสำหรับวิศวกรและเอเจนต์
บทสรุปทางเทคนิคของ Workstation เรื่องดีปลิร์นนิง: เครือข่ายลึกที่เทรนด้วยเกรเดียนต์ โมเดล discriminative กับ generative เมตริกงาน และ Bedrock กับ Kubernetes serving
Balinder Waliaอ่าน 
อธิบายโมเดลภาษาขนาดใหญ่: วิธีการทำงานของ LLM และวิธีเรียกใช้งานของคุณเองบน Kubernetes
โมเดลภาษาขนาดใหญ่คืออะไร และทำงานอย่างไร คำอธิบายที่ชัดเจนและไม่ใช่ด้านเทคนิคสำหรับผู้จัดการและวิศวกร เช่น โทเค็น การฝัง หม้อแปลง การฝึกอบรม และการอนุมาน รวมถึง Kubernetes YAML ที่ใช้งานจริงเพื่อปรับใช้ LLM ของคุณเองกับ Ollama และ vLLM
Balinder Waliaอ่าน