北京2024年8月22日 /美通社/ -- 近日,浪潮信息AIStation人工智能平臺助力某省人工智能工程師競賽,快速構(gòu)建了一站式部署的競賽實操平臺,實現(xiàn)了對計算資源的動態(tài)、高效管理,讓眾多選手同臺訓(xùn)練大模型,助力高技能"數(shù)字工匠"培養(yǎng)。
本次競賽共設(shè)置人工智能理論考試和實操技能競賽兩個比賽科目,理論考試主要考察計算機(jī)視覺、自然語言處理等方面理論知識,實操技能競賽則要求參賽人員在競賽平臺完成數(shù)據(jù)處理、業(yè)務(wù)分析、智能訓(xùn)練、智能系統(tǒng)設(shè)計等技能操作。
競賽籌備過程中,在實操競賽平臺構(gòu)建方面遇到較大挑戰(zhàn)。人工智能訓(xùn)練對算力資源需求大,涉及數(shù)據(jù)處理、開發(fā)環(huán)境構(gòu)建、模型訓(xùn)練等多個環(huán)節(jié),特別是基礎(chǔ)AI開發(fā)環(huán)境的構(gòu)建繁瑣且耗時。如何充分利用算力資源,滿足數(shù)十名參賽人員同時使用且保證無故障?如何快速構(gòu)建比賽環(huán)境,并降低競賽平臺的學(xué)習(xí)成本,讓選手專注于比賽?如何保證參賽人員的數(shù)據(jù)安全并防止作弊?這些都是競賽組織方需要解決的問題。
對此,浪潮信息AI團(tuán)隊聯(lián)合競賽組織方,借助AIStation將原有算力平臺快速改造為競賽平臺,實現(xiàn)了精細(xì)化資源管理、快速共享資源、秒級創(chuàng)建開發(fā)環(huán)境、數(shù)據(jù)隔離。AIStation具備顯存隔離功能,最小支持申請1G顯存。競賽期間,AIStation助力競賽組織方在單節(jié)點(diǎn)8卡服務(wù)器上創(chuàng)建了56個開發(fā)環(huán)境,滿足多人共享算力資源的訴求。
賽前,競賽組織方通過AIStation統(tǒng)一構(gòu)建了PyTorch、TensorFlow等比賽鏡像。競賽期間,參賽人員通過比賽鏡像創(chuàng)建開發(fā)環(huán)境,在Jupyter交互工具完成語音數(shù)據(jù)處理、圖像分類、大模型微調(diào)等競賽題目。
此外,AIStation通過精細(xì)化設(shè)置共享目錄權(quán)限,讓參賽人員可同時獲取競賽題目,但無法共享數(shù)據(jù)到其他目錄,保證數(shù)據(jù)安全,并設(shè)置普通用戶不能同時登錄平臺,防止作弊。競賽結(jié)束后系統(tǒng)管理員可以同時登錄平臺,快速閱卷。
競賽組織方表示:"AIStation支持細(xì)粒度切分AI算力資源,僅用一臺服務(wù)器,就能支持多人多地競賽,節(jié)約了賽事成本。AIStation自定義的AI開發(fā)流程,非常簡單易用,參賽人員可以快速上手,順利完成比賽。此外,AIStation的租戶權(quán)限管理和數(shù)據(jù)安全能力保障了比賽公平公正。"
浪潮信息AIStation是面向企業(yè)級訓(xùn)練與推理場景開發(fā)的人工智能開發(fā)平臺,實現(xiàn)從模型開發(fā)、訓(xùn)練、部署、測試、發(fā)布、服務(wù)的全流程一站式高效交付。通過統(tǒng)一管理計算資源、數(shù)據(jù)資源、深度學(xué)習(xí)軟件棧資源,以及支持大模型業(yè)務(wù)全鏈條,AIStation能夠為企業(yè)用戶提供敏捷高效的一體化AI平臺,加快AI開發(fā)應(yīng)用創(chuàng)新落地。