近日,Meta公司發(fā)布了其最新研發(fā)成果——開源大模型Llama 3,相較于前代產(chǎn)品Llama 2,Llama 3在預(yù)訓(xùn)練數(shù)據(jù)上擴(kuò)大了7倍(達(dá)到15T tokens),在數(shù)據(jù)質(zhì)量與訓(xùn)練方式上也進(jìn)行了深度優(yōu)化。此次發(fā)布的開源大模型,包含Llama 3 8B和Llama 3 70B兩種規(guī)格,參數(shù)量級(jí)分別為80億與700億,Meta表示Llama 3是目前同體量下性能最好的開源模型,這為開源大型語言模型(LLM)領(lǐng)域發(fā)展再次書寫了輝煌篇章。
為了方便廣大AI技術(shù)愛好者與從業(yè)者快速上手學(xué)習(xí)與使用大語言模型技術(shù),天翼云基于開源的Meta-Llama-3-8B-Instruct模型以及text-generation-webui框架,制作了一鍵部署、開箱即用的云主機(jī)鏡像。同時(shí),天翼云CPU/GPU云主機(jī)近期即將上線Llama 3大模型學(xué)習(xí)機(jī),期望能夠成為幫助用戶打開大模型領(lǐng)域之門的第一把鑰匙,讓更多用戶從此了解大模型、學(xué)習(xí)使用大模型,并利用大模型創(chuàng)造更多可能。
依托天翼云彈性云主機(jī)的優(yōu)勢(shì)與資源性能,用戶在具體部署操作時(shí)僅需登錄天翼云主機(jī)控制臺(tái),創(chuàng)建云主機(jī),使用指定的規(guī)格與Llama 3鏡像,隨后從瀏覽器登錄到學(xué)習(xí)機(jī)頁(yè)面,便能基于天翼云主機(jī)快速搭建Llama 3的推理或微調(diào)環(huán)境,無需復(fù)雜配置即可快速體驗(yàn)和應(yīng)用大語言模型。
此外,天翼云Llama 3大模型學(xué)習(xí)機(jī)在一鍵部署的基礎(chǔ)上還提供模型加載、模型推理、推理參數(shù)修改、模型微調(diào)等各類功能,包括支持加載主流基于transformers框架的模型,用戶只需將模型下載并放置到指定目錄下, 無需其他操作,且鏡像內(nèi)已預(yù)裝Llama 3模型;
支持使用大語言模型進(jìn)行多輪對(duì)話與文本生成,且支持多人同時(shí)使用;支持修改大語言模型在推理時(shí)控制結(jié)果走向的temperature, top_k, top_p等參數(shù);支持基于基礎(chǔ)大模型和私有數(shù)據(jù),微調(diào)訓(xùn)練自己的LoRA小模型,并使用小模型進(jìn)行推理。針對(duì)這些功能,天翼云還配有詳細(xì)的文檔與教學(xué)視頻,助力用戶打破知識(shí)壁壘,降低學(xué)習(xí)門檻。
據(jù)了解,天翼云彈性云主機(jī)是天翼云推出的“明星”產(chǎn)品,具備快捷易用、配置豐富、專有網(wǎng)絡(luò)、安全穩(wěn)定、多種鏡像、高效管理和高性價(jià)比等產(chǎn)品優(yōu)勢(shì),能夠?yàn)橛脩籼峁﹥?yōu)質(zhì)服務(wù)體驗(yàn)。云主機(jī)支持動(dòng)態(tài)調(diào)整計(jì)算資源,提供多種實(shí)例規(guī)格和存儲(chǔ)類型,滿足用戶多元化業(yè)務(wù)需求;擁有靈活自定義的網(wǎng)絡(luò)空間,以及多重安全防護(hù),全面保障數(shù)據(jù)可靠性,助力業(yè)務(wù)批量快速部署。用戶可以通過多種管理方式和多維度監(jiān)控實(shí)現(xiàn)高效管理,并可根據(jù)需要靈活選擇計(jì)費(fèi)模式,享受專業(yè)運(yùn)營(yíng)團(tuán)隊(duì)的7*24小時(shí)服務(wù)。此外,天翼云還提供多樣異構(gòu)芯片和計(jì)算模型,為用戶提供更優(yōu)算力選擇。
當(dāng)前,人工智能技術(shù)與各領(lǐng)域深度融合,成為助推千行百業(yè)創(chuàng)新發(fā)展的重要引擎。天翼云作為全球領(lǐng)先的云服務(wù)商、國(guó)內(nèi)領(lǐng)先的大模型算力服務(wù)商,通過科技創(chuàng)新持續(xù)為用戶提供可快速搭建大型模型推理或微調(diào)環(huán)境的解決方案,以及高性能的AI算力集群,將有助于推動(dòng)AIGC產(chǎn)業(yè)實(shí)現(xiàn)高質(zhì)量發(fā)展,加速千行百業(yè)數(shù)字化、智能化升級(jí)。