速，徐曉在不同模態(tài)混合計算注重力時，徐曉顯著下降掩碼構(gòu)建和計算開消 ，大幅提拔練習性能；推小金方面 ，多模態(tài)流式分塊預填充機制，削減首耗時 ，同時減小推小金計算的顯存峰值 ，提拔推小金批次大小，提拔吞吐性能 。通過這些聯(lián)合優(yōu)化技術(shù)，文心. 練習吞吐到達文心.的.倍，推小金吞吐到達倍