Training Dataset Analytics

Event Candidate Labeling Tool の件数・修正率を見て、次に改善すべきExtractorを判断します。

この画面は `training_event_candidates` を集計しています。旧 Candidate Review の `event_candidate_reviews` ではありません。

Total

Pending

Ground Truth Saved

Rejected

Ready

ground truth saved

Session Linked

Unlinked

Single

Multi

legacy source_type別

互換用のSession-level source_typeです。分類器評価は Images 側を見てください。

processing_route別

contributor別

reviewer別

review time

{}

route別品質

{}

model別品質

{}

Source Type Review / Images

画像ごとの predicted_source_type と ground_truth_json.correct_item_source_types を比較します。multi画像の分類器評価に使います。

Reviewed

Correct

Accuracy

Predicted Counts

Correct Counts

Confusion Matrix

行が predicted、列が correct です。

predicted \ correct
correct_item_source_types が保存されたレビューはまだありません。

mode別

Extraction Review

ground_truth_saved を母数にして、prediction_json と ground_truth_json が異なる項目を「修正あり」として集計します。

event_name

edited 0 / reviewed 0

event_date

edited 0 / reviewed 0

venue_name

edited 0 / reviewed 0

open_time

edited 0 / reviewed 0

start_time

edited 0 / reviewed 0

group_candidates

edited 0 / reviewed 0

sessions

edited 0 / reviewed 0

Training Candidates

候補を開くと、別画面でGround Truthを編集できます。

Training Candidateはまだありません。