Baichuan Intelligent เปิดตัวกลยุทธ์ใหม่เพื่อการเพิ่มประสิทธิภาพหม้อแปลงไฟฟ้า

หวัง ปิงหนิง หัวหน้าฝ่ายการฝึกอบรมล่วงหน้าของ Baichuan Intelligence แบ่งปันผลการวิจัยล่าสุดเกี่ยวกับการเพิ่มประสิทธิภาพหม้อแปลงไฟฟ้าที่งาน "การประชุมเทคโนโลยีการเรียนรู้เครื่องจักรระดับโลกประจำปี 2024" เขาเสนอว่าการใช้กลยุทธ์การปรับให้เหมาะสมสองแบบ ได้แก่ GQA และ MQA ปัญหาคอขวดของ I/O ของ Transformer ในขั้นตอนการถอดรหัสสามารถแก้ไขได้อย่างมีประสิทธิภาพ ซึ่งจะช่วยปรับปรุงประสิทธิภาพการอนุมาน