| | Evaluate プロシージャー | |
カスタムモデルの動作 (新しい予測がどの程度的確か) を評価します。
次の表に、この AI タスクを使用する際に設定する必要があるプロパティ (アクセスに必要な資格情報) を示します。
| |
PropertyKey |
| ProviderType |
キー |
| Alibaba |
- |
| Amazon |
- |
| Baidu |
- |
| Google |
Service Account JSON |
| IBM |
Visual Recognition キー |
| Microsoft |
Custom Vision Training キー |
| SAP |
- |
| Tencent |
- |
Mamaev の Flowers Recognition データセットでモデルのトレーニングを行った後、プロバイダーごとに行われた評価と、その処理にかかった時間を次の表に示します。
| プロバイダー |
出力 |
ベンチマーク |
| Alibaba |
GXAI6001 - タスク 'GeneXusAI.Custom.Evaluate' は使用できません (...) |
N/A |
| Amazon |
GXAI6001 - タスク 'GeneXusAI.Custom.Evaluate' は使用できません (...) |
N/A |
| Baidu |
GXAI6001 - タスク 'GeneXusAI.Custom.Evaluate' は使用できません (...) |
N/A |
| Google |
{
"Score": 1,
"Additional": [
{
"Key": "auPrc",
"Value": 1
},
{
"Key": "auRoc",
"Value": 0
},
{
"Key": "F1Score@000",
"Value": 0.922
},
{
"Key": "Precision@000",
"Value": 0.915
},
{
"Key": "Recall@000",
"Value": 0.918
},
...
{
"Key": "ConfusionMatrix [ DAISY,DAISY ] ",
"Value": 1
},
...
{
"Key": "ConfusionMatrix [ ROSE,ROSE ] ",
"Value": 1
}
] ,
"Local": false
}
|
1299ms |
| IBM |
{
"Score": 0.823,
"Additional": [
{
"Key": "ConfusionMatrix [ TULIP,TULIP ] ",
"Value": 10
},
...
{
"Key": "ConfusionMatrix [ ROSE,TULIP ] ",
"Value": 2
},
...
{
"Key": "Precision@000",
"Value": 0.922
},
{
"Key": "Recall@000",
"Value": 0.915
},
{
"Key": "FScore@000",
"Value": 0.918
},
...
{
"Key": "Precision@100",
"Value": 0.4
},
{
"Key": "Recall@100",
"Value": 0.4
},
{
"Key": "Precision@100",
"Value": 0.4
}
] ,
"Local": True
}
|
156ms |
| Microsoft |
{
"Score": 0.999,
"Additional": [
{
"Key": "Precision",
"Value": 1.000
},
{
"Key": "PrecisionSdtDeviation",
"Value": 0.000
},
{
"Key": "Recall",
"Value": 0.998
},
{
"Key": "RecallSdtDeviation",
"Value": 0.000
},
{
"Key": "AveragePrecision",
"Value": 1.000
},
{
"Key": "AverageRecall",
"Value": 0,998
}
] ,
"Local": False
}
|
215ms |
| SAP |
GXAI6001 - タスク 'GeneXusAI.Custom.Evaluate' は使用できません (...) |
N/A |
| Tencent |
GXAI6001 - タスク 'GeneXusAI.Custom.Evaluate' は使用できません (...) |
N/A |
| プラットフォーム |
Web (.NET、.NET Core、Java)、スマートデバイス (Android、iOS) |
| 接続 |
オンライン |
このプロシージャーは、GeneXus 16 Upgrade 6 以降で利用できます。
|
|
|
|
|