上海建科咨詢集團(tuán)近日宣布，正式推出國內(nèi)首個(gè)工程監(jiān)理行業(yè)大模型測(cè)評(píng)基準(zhǔn)——Norma-MESBench 1.0。這一創(chuàng)新成果填補(bǔ)了監(jiān)理領(lǐng)域在AI大模型測(cè)評(píng)方面的空白，為行業(yè)提供了科學(xué)、量化的評(píng)估工具，幫助企業(yè)精準(zhǔn)判斷AI技術(shù)在監(jiān)理各專業(yè)領(lǐng)域的應(yīng)用能力。

Norma-MESBench 1.0的構(gòu)建基于“全維度測(cè)評(píng)框架”，涵蓋專業(yè)技術(shù)、通用綜合和特色場(chǎng)景三大板塊，并細(xì)分為多個(gè)層級(jí)。項(xiàng)目團(tuán)隊(duì)采用“人工+大模型輔助”的混合模式，生成了超過一萬條測(cè)評(píng)數(shù)據(jù)，并通過格式標(biāo)準(zhǔn)化、去重算法和多輪人工復(fù)核等流程確保題目質(zhì)量。這一框架不僅為行業(yè)提供了統(tǒng)一的測(cè)評(píng)標(biāo)準(zhǔn)，還通過“多層級(jí)加權(quán)評(píng)分”和“裁判模型評(píng)審組”等算法，實(shí)現(xiàn)了測(cè)評(píng)流程的自動(dòng)化和標(biāo)準(zhǔn)化。

目前，該測(cè)評(píng)集已完成對(duì)17款主流通用大模型在監(jiān)理工作場(chǎng)景中的能力評(píng)估，為企業(yè)和從業(yè)人員提供了專業(yè)、精準(zhǔn)的參考依據(jù)。這一成果有助于企業(yè)科學(xué)選擇適合自身需求的AI大模型，推動(dòng)AI技術(shù)在工程監(jiān)理領(lǐng)域的落地應(yīng)用。

為促進(jìn)行業(yè)AI生態(tài)的開放與可持續(xù)發(fā)展，上海建科咨詢集團(tuán)決定將Norma-MESBench 1.0開源發(fā)布。此舉旨在鼓勵(lì)更多企業(yè)和科研機(jī)構(gòu)參與進(jìn)來，共同推動(dòng)監(jiān)理行業(yè)人工智能技術(shù)的創(chuàng)新與發(fā)展。

作為工程監(jiān)理行業(yè)AI測(cè)評(píng)體系的重要突破，Norma-MESBench 1.0的發(fā)布標(biāo)志著“人工智能+”戰(zhàn)略在工程建設(shè)領(lǐng)域邁出了關(guān)鍵一步。隨著AI技術(shù)的深入應(yīng)用，工程監(jiān)理行業(yè)有望迎來更高質(zhì)量、更可靠的智能化轉(zhuǎn)型。