火山發(fā)動(dòng)機(jī)發(fā)布高速訓(xùn)練引擎,實(shí)現(xiàn)高性價(jià)比模型訓(xùn)練
近日,2023年火山發(fā)動(dòng)機(jī)春季FORCE原動(dòng)力大會(huì)在上海外灘落下帷幕。會(huì)上,火山發(fā)動(dòng)機(jī)發(fā)布了“智能推薦-高速培訓(xùn)發(fā)動(dòng)機(jī)”?;鹕桨l(fā)動(dòng)機(jī)總裁譚待表示,希望通過(guò)這款新產(chǎn)品,實(shí)現(xiàn)高性價(jià)比模型培訓(xùn),大力支持公司在云上的智能創(chuàng)新。
譚待介紹,推薦是移動(dòng)互聯(lián)網(wǎng)時(shí)代內(nèi)容分發(fā)的核心因素。早在2016年,火山引擎就開始為手機(jī)制造商和其他用戶提供內(nèi)容推薦服務(wù)。
隨著客戶數(shù)據(jù)的沉淀越來(lái)越多,算法模型需要快速迭代,越來(lái)越多的企業(yè)面臨著無(wú)法滿足稀疏模型培訓(xùn)速度要求的問(wèn)題,導(dǎo)致模型更新緩慢影響線上效果?;鹕桨l(fā)動(dòng)機(jī)發(fā)布的“智能推薦-高速培訓(xùn)發(fā)動(dòng)機(jī)”完美提高了模型培訓(xùn)推理的效率,讓更多企業(yè)可以通過(guò)云服務(wù)享受與字節(jié)推薦相同的智能推薦基礎(chǔ)設(shè)施。
他指出,火山發(fā)動(dòng)機(jī)最新推出的“智能推薦-高速訓(xùn)練發(fā)動(dòng)機(jī)”,可以為合作伙伴提供快速訓(xùn)練,實(shí)現(xiàn)軟硬兼施,快速訓(xùn)練100GB-10TB。 超大型模型;基于PS-Worker架構(gòu),在服務(wù)發(fā)現(xiàn)的基礎(chǔ)上,“智能推薦-高速訓(xùn)練引擎”也具有可擴(kuò)展性,支持 PS、Chief、Worker 全方位容錯(cuò);在高速、通用的基礎(chǔ)上,“智能推薦-高速訓(xùn)練引擎也保證了數(shù)據(jù)的安全性,節(jié)省了成本?!爸悄芡扑]-高速訓(xùn)練引擎”僅傳輸高度脫敏后的訓(xùn)練樣本,采用不可逆哈希技術(shù),保證數(shù)據(jù)安全,提供多種模型瘦身技術(shù),提供多種GPU方法,改進(jìn)大量算法,大大提高訓(xùn)練和推理性能?;谧止?jié)內(nèi)部實(shí)踐,綜合成本可降低25%~67%。
與此同時(shí),譚待還指出,目前只有做好云創(chuàng)新,才能實(shí)現(xiàn)云價(jià)值?;鹕桨l(fā)動(dòng)機(jī)大力支持大模型發(fā)展。目前,火山發(fā)動(dòng)機(jī)已經(jīng)支持包括MiniMax在內(nèi)的、許多企業(yè),如智譜,在模型領(lǐng)域發(fā)展迅速。
譚待認(rèn)為,未來(lái)大模型將在各行各業(yè)不斷興起,行業(yè)專屬、公司專屬的大模型將百花齊放?;鹕揭嬉矊⒋罅χС帧岸嘣贫嗄P汀钡奈磥?lái)結(jié)構(gòu),讓更多的企業(yè)在模型領(lǐng)域的發(fā)展中獲得更好的算率保障。(作者:張紹)
本文屬于原創(chuàng)文章。如果轉(zhuǎn)載,請(qǐng)注明來(lái)源:火山引擎發(fā)布高速訓(xùn)練引擎,實(shí)現(xiàn)高性價(jià)比模型訓(xùn)練https。://news.zol.com.cn/816/8163712.html
本文僅代表作者觀點(diǎn),版權(quán)歸原創(chuàng)者所有,如需轉(zhuǎn)載請(qǐng)?jiān)谖闹凶⒚鱽?lái)源及作者名字。
免責(zé)聲明:本文系轉(zhuǎn)載編輯文章,僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布,請(qǐng)及時(shí)與我們聯(lián)系進(jìn)行審核處理或刪除,您可以發(fā)送材料至郵箱:service@tojoy.com

