T-SIA 038-2024 人工智能企業(yè)能力評估規(guī)范

T/SIA038—2024Specificationsforcapabilityas2024-6-15發(fā)布前言 1 2人工智能企業(yè)能力評估規(guī)范 3 32規(guī)范性引用文件 33術(shù)語和定義 33.1人工智能 33.2精確率 33.3召回率 33.4F1值 33.5混淆矩陣 3 33.7AUC值 33.8交叉熵?fù)p失 43.9魯棒性 43.10軟件項(xiàng)目管理能力評估 44人工智能企業(yè)能力評估要素 45人工智能企業(yè)能力評估模型 55.1企業(yè)基礎(chǔ) 55.1.1穩(wěn)定性 55.1.2人員規(guī)模 65.1.3服務(wù)鏈 65.2技術(shù)創(chuàng)新能力 65.2.1研發(fā)投入 65.2.2研發(fā)人員 65.2.3研發(fā)成果 65.2.4行業(yè)認(rèn)可 65.3項(xiàng)目管理與質(zhì)量管理能力 65.3.1項(xiàng)目級管理能力 65.3.2組織級管理能力 75.3.3質(zhì)量管理能力 75.4財(cái)務(wù)與信用狀況 75.4.1收入情況 75.4.2成長性 75.4.3信用狀況 75.5產(chǎn)品技術(shù)能力 75.5.1人工智能企業(yè)通用產(chǎn)品能力 75.5.2人工智能企業(yè)個(gè)性產(chǎn)品能力 86評價(jià)標(biāo)準(zhǔn)等級劃分 87人工智能企業(yè)能力評估模型應(yīng)用場景 8T/SIA038-2024人工智能企業(yè)能力評估規(guī)范1T/SIA038-2024人工智能企業(yè)能力評估規(guī)范2展現(xiàn)出廣泛應(yīng)用前景。2024年全國兩會期間，告提出，深化大數(shù)據(jù)、人工智能等研發(fā)應(yīng)用，T/SIA038-2024人工智能企業(yè)能力評估規(guī)范3GB/T22900-2009科學(xué)技術(shù)研究項(xiàng)目評GB/T40147-2021《科技評估通GB/T40148-2021《科技評估基本術(shù)GB/T11457-2006信息技術(shù)軟件精確率（Precision）是一種衡量分類模型或信息檢索系統(tǒng)性能的指標(biāo)，它專注于所檢模型識別出的所有真正正類占所有實(shí)際正類的3.5混淆矩陣ConfusionM3.6ROC曲線ReceiverOperatingCharacteristic（TruePositiveRate,TPR）對假陽性率（FalsePositiveRate,FPR）的圖形，展現(xiàn)了T/SIA038-2024人工智能企業(yè)能力評估規(guī)范4AUC值是指ROC曲線下方的面積。ROC曲線通過圖形化展示了一種二分類模型在所有可能3.8交叉熵?fù)p失Cross-Entropy交叉熵?fù)p失也常稱為邏輯損失（LogisticLoss）或負(fù)對數(shù)似然損失（NegaLikelihoodLoss），是一種在機(jī)器學(xué)習(xí)和深度學(xué)習(xí)中廣泛使用的損失函數(shù)，尤其適用于分3.10軟件項(xiàng)目管理能力評估CompetencyofProjectManagement4人工智能企業(yè)能力評估要素T/SIA038-2024人工智能企業(yè)能力評估規(guī)范5AUC值5人工智能企業(yè)能力評估模型6b）考察企業(yè)員工結(jié)構(gòu)，包括年齡結(jié)構(gòu)、學(xué)歷結(jié)構(gòu)、崗位結(jié)構(gòu)等。d）考察企業(yè)供應(yīng)商的可替代情況，以判斷企a）考察企業(yè)的研發(fā)投入總量以及研發(fā)支出占其總營業(yè)收入的比例，以判c）考察企業(yè)研發(fā)人員的流動(dòng)率，以判斷企業(yè)78a）針對計(jì)算機(jī)視覺類人工智能產(chǎn)品，需要考察視頻精vii）任務(wù)完成能力包括任務(wù)完成率、任務(wù)c）針對生物識別類人工智能產(chǎn)品，需要考察其易用性、穩(wěn)定性以及企業(yè)擁有完善的管理與高效的運(yùn)營，擁有領(lǐng)先技術(shù)，人工智能技企業(yè)管理體系良好，可跟進(jìn)行業(yè)創(chuàng)新趨勢，產(chǎn)品技術(shù)先進(jìn)，人工企