Choice
正解率
91.7%
高いほど良い
有効 36 / 予定 36 回JEV / BUSINESS JUDGMENT BENCHMARK
総合得点 実測結果
97.6 / 100点単独の重み1・複合の重み1.5。各問の3回の合格率から換算。40ケースを各3回評価。全試行合格は39ケース、不合格があるものは1ケース、未完了・未実行は0ケースです。
実測完了免責事項:本レポートを実務導入の判断材料として使用しないでください。 限定された架空の設問に対する検証結果であり、実際の業務での性能・安全性・適合性を保証するものではありません。
Choice
91.7%
高いほど良い
有効 36 / 予定 36 回Score
0.0033
小さいほど良い・理想値0
有効 36 / 予定 36 回Noul
0.0019
小さいほど良い・理想値0
有効 36 / 予定 36 回複合
100.0%
高いほど良い
有効 12 / 予定 12 回各カードは単独Choice・Score・Noulと複合ケースを分けて集計。分母は有効回答で、未実行・APIエラー・回答不正は下表に別記しています。総合点は各問の合否を重み付けした値で、MAEやBrierなど異なる単位の指標を直接平均した値ではありません。
有効 120 / 予定 120 リクエスト
| 型 | 予定 | 有効 | 合格 | APIエラー | 回答不正 | 未実行 | 補助指標 |
|---|---|---|---|---|---|---|---|
| Choice | 36 | 36 | 33 | 0 | 0 | 0 | NLL 0.1084 |
| Score | 36 | 36 | 36 | 0 | 0 | 0 | 許容差内 36 回 |
| Noul | 36 | 36 | 36 | 0 | 0 | 0 | 分類正解率 100.0% |
| 複合 | 12 | 12 | 12 | 0 | 0 | 0 | 個別判断一致 12・最終対応一致 12 回 |
1ケースを1リクエストで評価
時間は成功HTTP応答 120 件の、送信開始から受信完了まで。通信・接続確立・再試行待機を含み、モデル内部の推論時間ではありません。HTTP試行 121 回、リトライ 0 回。再現性は全反復が有効な質問だけを対象にし、Scoreは最寄りの整数段階(0.5は切上げ)で比較しています。
不合格・未完了を含むケース
数値整合性の注記は 8 回の判断にあります。返却Scoreと表示確率の平均がずれる場合などを、該当設問に記録しています。
問題文・想定解・実測値・確率分布
全40ケースを表示
案件記録に社内購買規程を適用し、注文書を発行する前の次の処理を1つ選ぶ。 仕入先や関係者の希望で規程を変更しない。
想定解 obtain_approval — 注文書の発行を保留し、本部長のシステム承認を取得する。
作問者の採点根拠:根回しや本部長の了解と、規程上必要な承認手続の完了を区別する。見積書の不備ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | obtain_approval | 合格 | 1.0000 |
| 2 | obtain_approval | 合格 | 1.0000 |
| 3 | obtain_approval | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:36.418+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5047616250230931
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"next_action": {
"type": "choice",
"choice": "obtain_approval",
"confidence": 1.0,
"probabilities": {
"issue_order": 0.0,
"return_quote": 0.0,
"obtain_approval": 1.0,
"clarify": 0.0
}
}
},
"usage": {
"input_tokens": 784,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.5048087500035763,
"finished_at": "2026-09-21T02:32:36.923+00:00",
"case_id": "C01",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:52.275+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5049156250315718
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"next_action": {
"type": "choice",
"choice": "obtain_approval",
"confidence": 1.0,
"probabilities": {
"obtain_approval": 1.0,
"issue_order": 0.0,
"return_quote": 0.0,
"clarify": 0.0
}
}
},
"usage": {
"input_tokens": 784,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.5049705419805832,
"finished_at": "2026-09-21T02:32:52.780+00:00",
"case_id": "C01",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:22.008+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5663945410051383
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"next_action": {
"type": "choice",
"choice": "obtain_approval",
"confidence": 1.0,
"probabilities": {
"issue_order": 0.0,
"return_quote": 0.0,
"obtain_approval": 1.0,
"clarify": 0.0
}
}
},
"usage": {
"input_tokens": 784,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.5664697919855826,
"finished_at": "2026-09-21T02:33:22.574+00:00",
"case_id": "C01",
"repeat": 3
}営業管理ルールと顧客メールに基づき、今期の商談の更新先を1つ選ぶ。
想定解 declined — 今期の導入は見送り。
作問者の採点根拠:今期の見送りが示されている。過去の前向きな検討や次年度の可能性は、今期の継続検討を意味しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | declined | 合格 | 1.0000 |
| 2 | declined | 合格 | 1.0000 |
| 3 | declined | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:27.441+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5429140419582836
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deal_status": {
"type": "choice",
"choice": "declined",
"confidence": 1.0,
"probabilities": {
"considering": 0.0,
"won": 0.0,
"requote": 0.0,
"declined": 1.0,
"unclear": 0.0
}
}
},
"usage": {
"input_tokens": 781,
"output_tokens": 59
}
},
"error": null,
"elapsed_seconds": 0.5429689160082489,
"finished_at": "2026-09-21T02:32:27.984+00:00",
"case_id": "C02",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:59.542+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.561818707967177
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deal_status": {
"type": "choice",
"choice": "declined",
"confidence": 1.0,
"probabilities": {
"unclear": 0.0,
"won": 0.0,
"considering": 0.0,
"requote": 0.0,
"declined": 1.0
}
}
},
"usage": {
"input_tokens": 781,
"output_tokens": 59
}
},
"error": null,
"elapsed_seconds": 0.5618732500006445,
"finished_at": "2026-09-21T02:33:00.104+00:00",
"case_id": "C02",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:13.122+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5484352500061505
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deal_status": {
"type": "choice",
"choice": "declined",
"confidence": 1.0,
"probabilities": {
"declined": 1.0,
"unclear": 0.0,
"considering": 0.0,
"requote": 0.0,
"won": 0.0
}
}
},
"usage": {
"input_tokens": 781,
"output_tokens": 59
}
},
"error": null,
"elapsed_seconds": 0.5485111669986509,
"finished_at": "2026-09-21T02:33:13.671+00:00",
"case_id": "C02",
"repeat": 3
}社内設備管理台帳のルールに従い、この案件の台帳上の所属年度を選ぶ。
想定解 fiscal_2025 — 2025年度の台帳に登録する。
作問者の採点根拠:和暦を対応づけ、年度境界を適用する。4月の請求日と支払日はこの台帳の判断を変えない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | fiscal_2025 | 合格 | 0.7000 |
| 2 | fiscal_2025 | 合格 | 0.7200 |
| 3 | fiscal_2025 | 合格 | 0.7700 |
{
"started_at": "2026-09-21T02:32:46.407+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5330946249887347
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"ledger_year": {
"type": "choice",
"choice": "fiscal_2025",
"confidence": 0.7,
"probabilities": {
"review": 0.11,
"fiscal_2025": 0.8,
"fiscal_2026": 0.09
}
}
},
"usage": {
"input_tokens": 655,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.5331522499909624,
"finished_at": "2026-09-21T02:32:46.940+00:00",
"case_id": "C03",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:52.782+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5108896659803577
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"ledger_year": {
"type": "choice",
"choice": "fiscal_2025",
"confidence": 0.72,
"probabilities": {
"review": 0.11,
"fiscal_2026": 0.08,
"fiscal_2025": 0.8099999999999999
}
}
},
"usage": {
"input_tokens": 655,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.5109824580140412,
"finished_at": "2026-09-21T02:32:53.293+00:00",
"case_id": "C03",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:08.540+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49612120795063674
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"ledger_year": {
"type": "choice",
"choice": "fiscal_2025",
"confidence": 0.77,
"probabilities": {
"fiscal_2025": 0.85,
"fiscal_2026": 0.06,
"review": 0.09
}
}
},
"usage": {
"input_tokens": 655,
"output_tokens": 57
}
},
"error": null,
"elapsed_seconds": 0.49618504202226177,
"finished_at": "2026-09-21T02:33:09.036+00:00",
"case_id": "C03",
"repeat": 3
}記録時点から9月10日の残りの納入に向けて、合計何個を出荷手配するか選ぶ。
想定解 ship_70 — 残り70個を出荷手配する。
作問者の採点根拠:改訂を追加発注として足さず、指示番号ごとに有効な数量と消込みを対応させる。70個は両指示の社内出荷承認範囲内である。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | ship_90 | 不合格 | 0.4000 |
| 2 | ship_90 | 不合格 | 0.3800 |
| 3 | ship_90 | 不合格 | 0.4600 |
{
"started_at": "2026-09-21T02:32:28.492+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5624491670168936
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"shipment_quantity": {
"type": "choice",
"choice": "ship_90",
"confidence": 0.4,
"probabilities": {
"wait_for_paper": 0.0,
"ship_150": 0.01,
"ship_70": 0.44,
"ship_40": 0.03,
"ship_90": 0.52
}
}
},
"usage": {
"input_tokens": 913,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.5625190829741769,
"finished_at": "2026-09-21T02:32:29.054+00:00",
"case_id": "C04",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:03.772+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5205525840283372
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"shipment_quantity": {
"type": "choice",
"choice": "ship_90",
"confidence": 0.38,
"probabilities": {
"ship_40": 0.01,
"ship_150": 0.01,
"wait_for_paper": 0.0,
"ship_70": 0.47,
"ship_90": 0.51
}
}
},
"usage": {
"input_tokens": 913,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.5205892499652691,
"finished_at": "2026-09-21T02:33:04.292+00:00",
"case_id": "C04",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:17.311+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5344521660008468
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"shipment_quantity": {
"type": "choice",
"choice": "ship_90",
"confidence": 0.46,
"probabilities": {
"ship_40": 0.02,
"wait_for_paper": 0.0,
"ship_90": 0.57,
"ship_150": 0.01,
"ship_70": 0.4
}
}
},
"usage": {
"input_tokens": 913,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.5345215830020607,
"finished_at": "2026-09-21T02:33:17.845+00:00",
"case_id": "C04",
"repeat": 3
}変更受付ルールに照らし、この依頼を実装前に最初に回す窓口を選ぶ。
想定解 change_control — 新しい仕様要求として、変更管理窓口へ登録し影響審査に回す。
作問者の採点根拠:既存仕様の不履行ではなく新しい仕様要求なので、実装前に変更管理窓口で影響と検証範囲を審査する。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | change_control | 合格 | 1.0000 |
| 2 | change_control | 合格 | 1.0000 |
| 3 | change_control | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:45.355+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4978760409867391
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"intake_route": {
"type": "choice",
"choice": "change_control",
"confidence": 1.0,
"probabilities": {
"document_desk": 0.0,
"defect_desk": 0.0,
"implementation_team": 0.0,
"change_control": 1.0,
"clarification": 0.0
}
}
},
"usage": {
"input_tokens": 841,
"output_tokens": 64
}
},
"error": null,
"elapsed_seconds": 0.49792437499854714,
"finished_at": "2026-09-21T02:32:45.853+00:00",
"case_id": "C05",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:02.723+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5304669589968398
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"intake_route": {
"type": "choice",
"choice": "change_control",
"confidence": 1.0,
"probabilities": {
"document_desk": 0.0,
"defect_desk": 0.0,
"change_control": 1.0,
"clarification": 0.0,
"implementation_team": 0.0
}
}
},
"usage": {
"input_tokens": 841,
"output_tokens": 64
}
},
"error": null,
"elapsed_seconds": 0.530528208008036,
"finished_at": "2026-09-21T02:33:03.254+00:00",
"case_id": "C05",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:23.096+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5374039159505628
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"intake_route": {
"type": "choice",
"choice": "change_control",
"confidence": 1.0,
"probabilities": {
"clarification": 0.0,
"implementation_team": 0.0,
"defect_desk": 0.0,
"document_desk": 0.0,
"change_control": 1.0
}
}
},
"usage": {
"input_tokens": 841,
"output_tokens": 64
}
},
"error": null,
"elapsed_seconds": 0.5374777080141939,
"finished_at": "2026-09-21T02:33:23.634+00:00",
"case_id": "C05",
"repeat": 3
}この承認票と出荷ルールを適用し、今回の30個の処置を選ぶ。
想定解 ship_with_record — 承認範囲内として、承認番号S-18を記録して30個を出荷する。
作問者の採点根拠:提示された例外の全条件を満たすため、今回の30個は承認番号を残して出荷できる。例外を他ロットへ一般化はしない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | ship_with_record | 合格 | 1.0000 |
| 2 | ship_with_record | 合格 | 1.0000 |
| 3 | ship_with_record | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:26.938+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5007613750058226
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"disposition": {
"type": "choice",
"choice": "ship_with_record",
"confidence": 1.0,
"probabilities": {
"clarify": 0.0,
"always_scrap": 0.0,
"expand_approval": 0.0,
"inspect_first": 0.0,
"ship_with_record": 1.0
}
}
},
"usage": {
"input_tokens": 862,
"output_tokens": 66
}
},
"error": null,
"elapsed_seconds": 0.5008324169903062,
"finished_at": "2026-09-21T02:32:27.439+00:00",
"case_id": "C06",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:51.254+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5012464169994928
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"disposition": {
"type": "choice",
"choice": "ship_with_record",
"confidence": 1.0,
"probabilities": {
"ship_with_record": 1.0,
"expand_approval": 0.0,
"inspect_first": 0.0,
"clarify": 0.0,
"always_scrap": 0.0
}
}
},
"usage": {
"input_tokens": 862,
"output_tokens": 66
}
},
"error": null,
"elapsed_seconds": 0.5012770419707522,
"finished_at": "2026-09-21T02:32:51.755+00:00",
"case_id": "C06",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:20.956+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5547818750492297
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"disposition": {
"type": "choice",
"choice": "ship_with_record",
"confidence": 1.0,
"probabilities": {
"inspect_first": 0.0,
"always_scrap": 0.0,
"expand_approval": 0.0,
"clarify": 0.0,
"ship_with_record": 1.0
}
}
},
"usage": {
"input_tokens": 862,
"output_tokens": 66
}
},
"error": null,
"elapsed_seconds": 0.5548544580233283,
"finished_at": "2026-09-21T02:33:21.511+00:00",
"case_id": "C06",
"repeat": 3
}初動ルールと現在の証拠から、次に行う調査上の処理を選ぶ。原因の推測を確定事実にしない。
想定解 collect_evidence — 原因未確定として、現地個体・版・電源条件・操作・ログを収集する。
作問者の採点根拠:原因を特定する証拠が不足しているため、初動ルールに従って現地情報を収集する。報告期限は断定の根拠にならない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | collect_evidence | 合格 | 1.0000 |
| 2 | collect_evidence | 合格 | 1.0000 |
| 3 | collect_evidence | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:36.927+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4893230419838801
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"investigation_action": {
"type": "choice",
"choice": "collect_evidence",
"confidence": 1.0,
"probabilities": {
"close_report": 0.0,
"collect_evidence": 1.0,
"hardware_fault": 0.0,
"software_fault": 0.0
}
}
},
"usage": {
"input_tokens": 770,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.4893755419761874,
"finished_at": "2026-09-21T02:32:37.416+00:00",
"case_id": "C07",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:58.990+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5506392499664798
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"investigation_action": {
"type": "choice",
"choice": "collect_evidence",
"confidence": 1.0,
"probabilities": {
"collect_evidence": 1.0,
"close_report": 0.0,
"software_fault": 0.0,
"hardware_fault": 0.0
}
}
},
"usage": {
"input_tokens": 770,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.5506832919782028,
"finished_at": "2026-09-21T02:32:59.540+00:00",
"case_id": "C07",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:10.042+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5232979999855161
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"investigation_action": {
"type": "choice",
"choice": "collect_evidence",
"confidence": 1.0,
"probabilities": {
"software_fault": 0.0,
"hardware_fault": 0.0,
"collect_evidence": 1.0,
"close_report": 0.0
}
}
},
"usage": {
"input_tokens": 770,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.5234337500296533,
"finished_at": "2026-09-21T02:33:10.566+00:00",
"case_id": "C07",
"repeat": 3
}先頭ゼロの保持と原価部門コードの追加について、それぞれの受付区分を選ぶ。
想定解 defect_and_change — 先頭ゼロの保持は不具合修正、原価部門コードの追加は変更要求。
作問者の採点根拠:先頭ゼロの欠落は合意済みCSV仕様からの逸脱。原価部門コードは未合意の追加であり、同じ会議の依頼でも受付区分を分ける。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | defect_and_change | 合格 | 1.0000 |
| 2 | defect_and_change | 合格 | 1.0000 |
| 3 | defect_and_change | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:32.707+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5285308330203407
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_class": {
"type": "choice",
"choice": "defect_and_change",
"confidence": 1.0,
"probabilities": {
"change_and_defect": 0.0,
"await_scope_confirmation": 0.0,
"defect_and_change": 1.0,
"both_defects": 0.0,
"both_changes": 0.0
}
}
},
"usage": {
"input_tokens": 1001,
"output_tokens": 67
}
},
"error": null,
"elapsed_seconds": 0.5285739169921726,
"finished_at": "2026-09-21T02:32:33.236+00:00",
"case_id": "C08",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:49.664+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5199114999850281
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_class": {
"type": "choice",
"choice": "defect_and_change",
"confidence": 1.0,
"probabilities": {
"change_and_defect": 0.0,
"both_defects": 0.0,
"defect_and_change": 1.0,
"both_changes": 0.0,
"await_scope_confirmation": 0.0
}
}
},
"usage": {
"input_tokens": 1001,
"output_tokens": 67
}
},
"error": null,
"elapsed_seconds": 0.5199464159668423,
"finished_at": "2026-09-21T02:32:50.183+00:00",
"case_id": "C08",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:26.716+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5730338750290684
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_class": {
"type": "choice",
"choice": "defect_and_change",
"confidence": 1.0,
"probabilities": {
"defect_and_change": 1.0,
"both_defects": 0.0,
"both_changes": 0.0,
"change_and_defect": 0.0,
"await_scope_confirmation": 0.0
}
}
},
"usage": {
"input_tokens": 1001,
"output_tokens": 67
}
},
"error": null,
"elapsed_seconds": 0.5730775420088321,
"finished_at": "2026-09-21T02:33:27.289+00:00",
"case_id": "C08",
"repeat": 3
}変更受付ルールに従い、協力会社担当者が取るべき最初の対応を選ぶ。
想定解 share_with_prime — 受領を伝え、時期・費用を確約せず元請の変更窓口へ共有する。
作問者の採点根拠:通常の変更受付に該当する。協力会社だけで日程を約束せず、受領連絡と共有を行う。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | share_with_prime | 合格 | 1.0000 |
| 2 | share_with_prime | 合格 | 1.0000 |
| 3 | share_with_prime | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:32.165+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5406687500071712
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"response_route": {
"type": "choice",
"choice": "share_with_prime",
"confidence": 1.0,
"probabilities": {
"commit_directly": 0.0,
"ignore_request": 0.0,
"share_with_prime": 1.0,
"emergency_route": 0.0
}
}
},
"usage": {
"input_tokens": 744,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.5407642500358634,
"finished_at": "2026-09-21T02:32:32.705+00:00",
"case_id": "C09",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:47.488+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5488332500099204
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"response_route": {
"type": "choice",
"choice": "share_with_prime",
"confidence": 1.0,
"probabilities": {
"emergency_route": 0.0,
"share_with_prime": 1.0,
"commit_directly": 0.0,
"ignore_request": 0.0
}
}
},
"usage": {
"input_tokens": 744,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.5488713749800809,
"finished_at": "2026-09-21T02:32:48.037+00:00",
"case_id": "C09",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:27.839+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5746414169552736
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"response_route": {
"type": "choice",
"choice": "share_with_prime",
"confidence": 1.0,
"probabilities": {
"share_with_prime": 1.0,
"commit_directly": 0.0,
"emergency_route": 0.0,
"ignore_request": 0.0
}
}
},
"usage": {
"input_tokens": 744,
"output_tokens": 58
}
},
"error": null,
"elapsed_seconds": 0.5746873749885708,
"finished_at": "2026-09-21T02:33:28.414+00:00",
"case_id": "C09",
"repeat": 3
}提示された工場カレンダーと計算ルールだけを使い、今回の提出締切を選ぶ。
想定解 april_28 — 2026年4月28日15:00。
作問者の採点根拠:4月29日から5月6日をすべて除外した工場カレンダーで数えるため、締切は4月28日15:00。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | april_28 | 合格 | 0.6800 |
| 2 | april_28 | 合格 | 0.7000 |
| 3 | april_28 | 合格 | 0.7600 |
{
"started_at": "2026-09-21T02:32:39.471+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5072369159897789
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"submission_deadline": {
"type": "choice",
"choice": "april_28",
"confidence": 0.68,
"probabilities": {
"may_07": 0.15,
"unclear": 0.05,
"may_01": 0.03,
"april_28": 0.75,
"may_06": 0.02
}
}
},
"usage": {
"input_tokens": 723,
"output_tokens": 73
}
},
"error": null,
"elapsed_seconds": 0.5072687919600867,
"finished_at": "2026-09-21T02:32:39.979+00:00",
"case_id": "C10",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:50.184+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5319102079956792
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"submission_deadline": {
"type": "choice",
"choice": "april_28",
"confidence": 0.7,
"probabilities": {
"may_07": 0.14,
"april_28": 0.76,
"may_01": 0.03,
"may_06": 0.02,
"unclear": 0.05
}
}
},
"usage": {
"input_tokens": 723,
"output_tokens": 73
}
},
"error": null,
"elapsed_seconds": 0.5319260420510545,
"finished_at": "2026-09-21T02:32:50.716+00:00",
"case_id": "C10",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:14.757+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5128826249856502
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"submission_deadline": {
"type": "choice",
"choice": "april_28",
"confidence": 0.76,
"probabilities": {
"unclear": 0.04,
"may_07": 0.11,
"may_01": 0.03,
"april_28": 0.8,
"may_06": 0.02
}
}
},
"usage": {
"input_tokens": 723,
"output_tokens": 73
}
},
"error": null,
"elapsed_seconds": 0.5129260829999112,
"finished_at": "2026-09-21T02:33:15.270+00:00",
"case_id": "C10",
"repeat": 3
}工程移行ルールと審査台帳に基づき、明日の次工程開始についての判断を選ぶ。
想定解 proceed_with_tracking — 次工程を開始し、残る改善2件は登録された担当・期限で追跡する。
作問者の採点根拠:この工程移行の条件は満たしている。残件を隠したり完了扱いにせず、追跡を続けながら次工程へ進める。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | proceed_with_tracking | 合格 | 1.0000 |
| 2 | proceed_with_tracking | 合格 | 1.0000 |
| 3 | proceed_with_tracking | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:44.372+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.481413584027905
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"gate_decision": {
"type": "choice",
"choice": "proceed_with_tracking",
"confidence": 1.0,
"probabilities": {
"reclassify_items": 0.0,
"seek_missing_approval": 0.0,
"clarify": 0.0,
"wait_for_every_item": 0.0,
"proceed_with_tracking": 1.0
}
}
},
"usage": {
"input_tokens": 805,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.4814667080063373,
"finished_at": "2026-09-21T02:32:44.854+00:00",
"case_id": "C11",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:04.295+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5178308330359869
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"gate_decision": {
"type": "choice",
"choice": "proceed_with_tracking",
"confidence": 1.0,
"probabilities": {
"wait_for_every_item": 0.0,
"reclassify_items": 0.0,
"proceed_with_tracking": 1.0,
"seek_missing_approval": 0.0,
"clarify": 0.0
}
}
},
"usage": {
"input_tokens": 805,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.5179035419714637,
"finished_at": "2026-09-21T02:33:04.812+00:00",
"case_id": "C11",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:28.924+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.517538207990583
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"gate_decision": {
"type": "choice",
"choice": "proceed_with_tracking",
"confidence": 1.0,
"probabilities": {
"clarify": 0.0,
"proceed_with_tracking": 1.0,
"seek_missing_approval": 0.0,
"reclassify_items": 0.0,
"wait_for_every_item": 0.0
}
}
},
"usage": {
"input_tokens": 805,
"output_tokens": 72
}
},
"error": null,
"elapsed_seconds": 0.5175874159904197,
"finished_at": "2026-09-21T02:33:29.441+00:00",
"case_id": "C11",
"repeat": 3
}購買窓口はこの一式見積を発注決裁へ回す前にどう扱うか、次の処理を選ぶ。
想定解 complete_service_procurement — 基板の一社購買は維持し、現地交換の適合候補比較または例外承認を整える。
作問者の採点根拠:基板の一社購買は有効なまま、役務の調達方法を整えてから一式の決裁へ進める。安いが間に合わない見積は今回の適合候補ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | complete_service_procurement | 合格 | 0.9900 |
| 2 | complete_service_procurement | 合格 | 0.9900 |
| 3 | complete_service_procurement | 合格 | 0.9800 |
{
"started_at": "2026-09-21T02:32:39.980+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.6849694999982603
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"purchasing_action": {
"type": "choice",
"choice": "complete_service_procurement",
"confidence": 0.99,
"probabilities": {
"choose_lower_service_quote": 0.0,
"approve_entire_quote": 0.0,
"complete_service_procurement": 1.0,
"compare_entire_quote": 0.0
}
}
},
"usage": {
"input_tokens": 972,
"output_tokens": 65
}
},
"error": null,
"elapsed_seconds": 0.685021165991202,
"finished_at": "2026-09-21T02:32:40.665+00:00",
"case_id": "C12",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:04.814+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.589265916030854
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"purchasing_action": {
"type": "choice",
"choice": "complete_service_procurement",
"confidence": 0.99,
"probabilities": {
"choose_lower_service_quote": 0.0,
"approve_entire_quote": 0.0,
"compare_entire_quote": 0.01,
"complete_service_procurement": 0.99
}
}
},
"usage": {
"input_tokens": 972,
"output_tokens": 65
}
},
"error": null,
"elapsed_seconds": 0.5893239169963636,
"finished_at": "2026-09-21T02:33:05.404+00:00",
"case_id": "C12",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:27.290+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5481218749773689
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"purchasing_action": {
"type": "choice",
"choice": "complete_service_procurement",
"confidence": 0.98,
"probabilities": {
"compare_entire_quote": 0.01,
"approve_entire_quote": 0.01,
"choose_lower_service_quote": 0.0,
"complete_service_procurement": 0.98
}
}
},
"usage": {
"input_tokens": 972,
"output_tokens": 65
}
},
"error": null,
"elapsed_seconds": 0.548155291005969,
"finished_at": "2026-09-21T02:33:27.838+00:00",
"case_id": "C12",
"repeat": 3
}顛末書に記載された再発防止策の具体性だけを評価する。 謝罪の丁寧さ、文章の長さ、反省の強さを加点しない。 具体的な実施方法とは、何をどう変更・確認するかが分かる手順や仕組みを指す。
想定解 段階 1 — 注意や努力を表明しているが、変更する手順や仕組みが示されていない。
作問者の採点根拠:注意と努力の表明はあるが、実行する手順や仕組みは示されていない。再発防止策への言及自体はあるため段階0でもない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:45.855+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.549942625046242
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"prevention_specificity": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "再発防止策への言及がなく、謝罪や経緯説明にとどまる。",
"1": "注意や努力を表明しているが、変更する手順や仕組みが示されていない。",
"2": "変更する手順や仕組みはあるが、実行担当または開始時期が明記されていない。",
"3": "変更する手順や仕組み、実行担当、開始時期が明記されているが、効果の検証方法はない。",
"4": "変更する手順や仕組み、実行担当、開始時期、効果の検証方法がすべて明記されている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 760,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5499955830164254,
"finished_at": "2026-09-21T02:32:46.405+00:00",
"case_id": "S01",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:01.144+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5429604999953881
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"prevention_specificity": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "再発防止策への言及がなく、謝罪や経緯説明にとどまる。",
"1": "注意や努力を表明しているが、変更する手順や仕組みが示されていない。",
"2": "変更する手順や仕組みはあるが、実行担当または開始時期が明記されていない。",
"3": "変更する手順や仕組み、実行担当、開始時期が明記されているが、効果の検証方法はない。",
"4": "変更する手順や仕組み、実行担当、開始時期、効果の検証方法がすべて明記されている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 760,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5430089170113206,
"finished_at": "2026-09-21T02:33:01.687+00:00",
"case_id": "S01",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:24.114+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5435853750095703
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"prevention_specificity": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "再発防止策への言及がなく、謝罪や経緯説明にとどまる。",
"1": "注意や努力を表明しているが、変更する手順や仕組みが示されていない。",
"2": "変更する手順や仕組みはあるが、実行担当または開始時期が明記されていない。",
"3": "変更する手順や仕組み、実行担当、開始時期が明記されているが、効果の検証方法はない。",
"4": "変更する手順や仕組み、実行担当、開始時期、効果の検証方法がすべて明記されている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 760,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5436526669654995,
"finished_at": "2026-09-21T02:33:24.658+00:00",
"case_id": "S01",
"repeat": 3
}現時点での正式な受注登録業務の支障を評価する。 評価対象は正式登録の完了可否と影響範囲であり、依頼文の強さや担当者の遠慮ではない。 紙の仮受付と、正式登録を完了できる代替手段を区別する。
想定解 段階 4 — 代替手段を含め、すべての営業所ですべての新規注文の正式登録が完了できない。
作問者の採点根拠:対象の正式登録業務は全件停止している。閲覧画面の稼働や控えめな文面は、正式登録の完了可否を変えない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:34.257+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5153734170016833
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"operational_impact": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "正式登録は通常どおり完了でき、表示や表記以外に業務上の支障はない。",
"1": "正式登録は全件通常の方法で完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法では正式登録できない注文があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても正式登録できない注文があるが、完了できる注文もある。",
"4": "代替手段を含め、すべての営業所ですべての新規注文の正式登録が完了できない。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
}
},
"usage": {
"input_tokens": 815,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5154325840412639,
"finished_at": "2026-09-21T02:32:34.773+00:00",
"case_id": "S02",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:05.406+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5113679160131142
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"operational_impact": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "正式登録は通常どおり完了でき、表示や表記以外に業務上の支障はない。",
"1": "正式登録は全件通常の方法で完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法では正式登録できない注文があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても正式登録できない注文があるが、完了できる注文もある。",
"4": "代替手段を含め、すべての営業所ですべての新規注文の正式登録が完了できない。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
}
},
"usage": {
"input_tokens": 815,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5114159579970874,
"finished_at": "2026-09-21T02:33:05.917+00:00",
"case_id": "S02",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:09.532+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.507429666002281
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"operational_impact": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "正式登録は通常どおり完了でき、表示や表記以外に業務上の支障はない。",
"1": "正式登録は全件通常の方法で完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法では正式登録できない注文があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても正式登録できない注文があるが、完了できる注文もある。",
"4": "代替手段を含め、すべての営業所ですべての新規注文の正式登録が完了できない。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
}
},
"usage": {
"input_tokens": 815,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5075076670036651,
"finished_at": "2026-09-21T02:33:10.040+00:00",
"case_id": "S02",
"repeat": 3
}引継ぎメモの確認基準に照らし、必要4項目の情報充足度を評価する。 各項目は基準をすべて満たしたときに1項目として数える。 押印や「完了」という記載だけで、本文の不足を補わない。
想定解 段階 2 — 次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、2項目だけが具体的に記載されている。
作問者の採点根拠:必要4項目のうち2項目が充足している。前任者の押印では不足情報を補えない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 2.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 2.0000(誤差 0.0000) | 合格 | 0.9900 |
| 3 | 2.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:29.057+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49600608297623694
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"handover_completeness": {
"type": "score",
"score": 2.0,
"confidence": 1.0,
"legend": {
"0": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、具体的に記載された項目がない。",
"1": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、1項目だけが具体的に記載されている。",
"2": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、2項目だけが具体的に記載されている。",
"3": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、3項目だけが具体的に記載されている。",
"4": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目すべてが具体的に記載されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 986,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.4960676669725217,
"finished_at": "2026-09-21T02:32:29.553+00:00",
"case_id": "S03",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:57.473+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4945494999992661
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"handover_completeness": {
"type": "score",
"score": 2.0,
"confidence": 0.99,
"legend": {
"0": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、具体的に記載された項目がない。",
"1": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、1項目だけが具体的に記載されている。",
"2": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、2項目だけが具体的に記載されている。",
"3": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、3項目だけが具体的に記載されている。",
"4": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目すべてが具体的に記載されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 986,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.49459112499607727,
"finished_at": "2026-09-21T02:32:57.968+00:00",
"case_id": "S03",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:15.271+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49293050001142547
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"handover_completeness": {
"type": "score",
"score": 2.0,
"confidence": 1.0,
"legend": {
"0": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、具体的に記載された項目がない。",
"1": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、1項目だけが具体的に記載されている。",
"2": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、2項目だけが具体的に記載されている。",
"3": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目のうち、3項目だけが具体的に記載されている。",
"4": "次回対応、顧客固有対応、未了案件、資料保存場所の4項目すべてが具体的に記載されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 986,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.49297149997437373,
"finished_at": "2026-09-21T02:33:15.764+00:00",
"case_id": "S03",
"repeat": 3
}横展開確認の実際の到達段階を評価する。週報の表題ではなく、手順と実施記録に基づく。
想定解 段階 3 — 全対象の差分調査と必要な検証が完了し証跡もそろっているが、品質保証部門の証跡レビューは完了していない。
作問者の採点根拠:検証と証跡は全対象分そろうが、最後の証跡レビューが未完了なので段階3。依頼の提出はレビュー完了ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:46.942+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5454003339982592
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"rollout_verification_maturity": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象となる車種・仕向けの一覧が確定していない。",
"1": "対象一覧は確定しているが、全対象の適用差分の調査が完了していない。",
"2": "対象一覧と全対象の差分調査は完了しているが、必要な検証の実施または証跡が全対象分そろっていない。",
"3": "全対象の差分調査と必要な検証が完了し証跡もそろっているが、品質保証部門の証跡レビューは完了していない。",
"4": "全対象の差分調査、必要な検証、証跡保存、品質保証部門の証跡レビューがすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 808,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5454661659896374,
"finished_at": "2026-09-21T02:32:47.487+00:00",
"case_id": "S04",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:56.424+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5490229160059243
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"rollout_verification_maturity": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象となる車種・仕向けの一覧が確定していない。",
"1": "対象一覧は確定しているが、全対象の適用差分の調査が完了していない。",
"2": "対象一覧と全対象の差分調査は完了しているが、必要な検証の実施または証跡が全対象分そろっていない。",
"3": "全対象の差分調査と必要な検証が完了し証跡もそろっているが、品質保証部門の証跡レビューは完了していない。",
"4": "全対象の差分調査、必要な検証、証跡保存、品質保証部門の証跡レビューがすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 808,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5491132909664884,
"finished_at": "2026-09-21T02:32:56.973+00:00",
"case_id": "S04",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:14.267+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4883571250247769
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"rollout_verification_maturity": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象となる車種・仕向けの一覧が確定していない。",
"1": "対象一覧は確定しているが、全対象の適用差分の調査が完了していない。",
"2": "対象一覧と全対象の差分調査は完了しているが、必要な検証の実施または証跡が全対象分そろっていない。",
"3": "全対象の差分調査と必要な検証が完了し証跡もそろっているが、品質保証部門の証跡レビューは完了していない。",
"4": "全対象の差分調査、必要な検証、証跡保存、品質保証部門の証跡レビューがすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 808,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.488405917014461,
"finished_at": "2026-09-21T02:33:14.755+00:00",
"case_id": "S04",
"repeat": 3
}不具合の再現性を裏付ける記録の強さを評価する。原因が確定していないことを、再現記録の不足と混同しない。
想定解 段階 4 — 現品の構成と条件が特定されて試験で症状が再現し、複数回の試行、条件をそろえた比較対象、各試行に対応する結果とログがそろっている。
作問者の採点根拠:複数回の管理された試行と比較対象の証拠までそろっている。原因未確定でも、再現性の証拠の評価は段階4に該当する。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
| 2 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
| 3 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
試行1・数値整合性の注記:返却Score=3.9800、表示確率の加重平均=3.9900。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
試行3・数値整合性の注記:返却Score=3.9800、表示確率の加重平均=3.9900。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
{
"started_at": "2026-09-21T02:32:35.380+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5369137920206413
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"reproduction_evidence": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "具体的な症状を特定できる記述がない。",
"1": "具体的な症状は記述されているが、現品の構成や発生条件が特定されていない。",
"2": "現品の構成と発生条件は特定されているが、条件を管理した試験での再現記録がない。",
"3": "条件を管理した試験で再現しログもあるが、複数回の試行と条件をそろえた比較対象の記録はそろっていない。",
"4": "現品の構成と条件が特定されて試験で症状が再現し、複数回の試行、条件をそろえた比較対象、各試行に対応する結果とログがそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.01,
"4": 0.99
}
}
},
"usage": {
"input_tokens": 826,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5369635419920087,
"finished_at": "2026-09-21T02:32:35.917+00:00",
"case_id": "S05",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:02.207+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5142436659662053
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"reproduction_evidence": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "具体的な症状を特定できる記述がない。",
"1": "具体的な症状は記述されているが、現品の構成や発生条件が特定されていない。",
"2": "現品の構成と発生条件は特定されているが、条件を管理した試験での再現記録がない。",
"3": "条件を管理した試験で再現しログもあるが、複数回の試行と条件をそろえた比較対象の記録はそろっていない。",
"4": "現品の構成と条件が特定されて試験で症状が再現し、複数回の試行、条件をそろえた比較対象、各試行に対応する結果とログがそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.02,
"4": 0.98
}
}
},
"usage": {
"input_tokens": 826,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5143070830381475,
"finished_at": "2026-09-21T02:33:02.721+00:00",
"case_id": "S05",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:24.661+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.518116542021744
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"reproduction_evidence": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "具体的な症状を特定できる記述がない。",
"1": "具体的な症状は記述されているが、現品の構成や発生条件が特定されていない。",
"2": "現品の構成と発生条件は特定されているが、条件を管理した試験での再現記録がない。",
"3": "条件を管理した試験で再現しログもあるが、複数回の試行と条件をそろえた比較対象の記録はそろっていない。",
"4": "現品の構成と条件が特定されて試験で症状が再現し、複数回の試行、条件をそろえた比較対象、各試行に対応する結果とログがそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.01,
"4": 0.99
}
}
},
"usage": {
"input_tokens": 826,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5182011249708012,
"finished_at": "2026-09-21T02:33:25.179+00:00",
"case_id": "S05",
"repeat": 3
}当該装置について、保全当番が使える復旧手順の整備状況だけを評価する。熟練者個人の能力は加点しない。
想定解 段階 0 — 実行する操作手順の記録がなく、口頭の知識や特定の人への問い合わせに依存している。
作問者の採点根拠:夜勤の保全当番が実行できる手順の記録がないため段階0。過去に熟練者が直した実績は手順の整備状況を補わない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 0.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 0.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 0.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:35.919+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4961766669875942
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"recovery_procedure_readiness": {
"type": "score",
"score": 0.0,
"confidence": 1.0,
"legend": {
"0": "実行する操作手順の記録がなく、口頭の知識や特定の人への問い合わせに依存している。",
"1": "操作のメモはあるが、適用条件・注意点・成功の確認方法のいずれかが欠けている。",
"2": "適用条件・操作順序・注意点・成功の確認方法は記載されているが、その手順による復旧検証が行われていない。",
"3": "必要事項を備えた手順で作成者が復旧を検証したが、作成者以外の保全当番による検証は行われていない。",
"4": "必要事項を備えた手順を作成者以外の保全当番が実行し、復旧と成功確認を完了した記録がある。"
},
"probabilities": {
"0": 1.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 789,
"output_tokens": 25
}
},
"error": null,
"elapsed_seconds": 0.4962566249887459,
"finished_at": "2026-09-21T02:32:36.416+00:00",
"case_id": "S06",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:55.424+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.47991470800479874
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"recovery_procedure_readiness": {
"type": "score",
"score": 0.0,
"confidence": 1.0,
"legend": {
"0": "実行する操作手順の記録がなく、口頭の知識や特定の人への問い合わせに依存している。",
"1": "操作のメモはあるが、適用条件・注意点・成功の確認方法のいずれかが欠けている。",
"2": "適用条件・操作順序・注意点・成功の確認方法は記載されているが、その手順による復旧検証が行われていない。",
"3": "必要事項を備えた手順で作成者が復旧を検証したが、作成者以外の保全当番による検証は行われていない。",
"4": "必要事項を備えた手順を作成者以外の保全当番が実行し、復旧と成功確認を完了した記録がある。"
},
"probabilities": {
"0": 1.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 789,
"output_tokens": 25
}
},
"error": null,
"elapsed_seconds": 0.4799503749818541,
"finished_at": "2026-09-21T02:32:55.904+00:00",
"case_id": "S06",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:12.619+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5011917920201086
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"recovery_procedure_readiness": {
"type": "score",
"score": 0.0,
"confidence": 1.0,
"legend": {
"0": "実行する操作手順の記録がなく、口頭の知識や特定の人への問い合わせに依存している。",
"1": "操作のメモはあるが、適用条件・注意点・成功の確認方法のいずれかが欠けている。",
"2": "適用条件・操作順序・注意点・成功の確認方法は記載されているが、その手順による復旧検証が行われていない。",
"3": "必要事項を備えた手順で作成者が復旧を検証したが、作成者以外の保全当番による検証は行われていない。",
"4": "必要事項を備えた手順を作成者以外の保全当番が実行し、復旧と成功確認を完了した記録がある。"
},
"probabilities": {
"0": 1.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 789,
"output_tokens": 25
}
},
"error": null,
"elapsed_seconds": 0.5012739999801852,
"finished_at": "2026-09-21T02:33:13.120+00:00",
"case_id": "S06",
"repeat": 3
}本案件の最悪値の必達条件に対する超過程度を、提示された段階で評価する。平均値を代用しない。
想定解 段階 2 — 最悪値が11.0ミリ秒を超え、12.0ミリ秒以下である。
作問者の採点根拠:上限を含む段階2の条件に一致する。平均5.0ミリ秒はこの評価には使わない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 2.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 2.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 2.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:37.418+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4902180830249563
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deadline_overrun": {
"type": "score",
"score": 2.0,
"confidence": 1.0,
"legend": {
"0": "最悪値が10.0ミリ秒以下で、必達条件を満たす。",
"1": "最悪値が10.0ミリ秒を超え、11.0ミリ秒以下である。",
"2": "最悪値が11.0ミリ秒を超え、12.0ミリ秒以下である。",
"3": "最悪値が12.0ミリ秒を超え、15.0ミリ秒以下である。",
"4": "最悪値が15.0ミリ秒を超えている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 683,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.49026449996745214,
"finished_at": "2026-09-21T02:32:37.908+00:00",
"case_id": "S07",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:53.816+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5235214159474708
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deadline_overrun": {
"type": "score",
"score": 2.0,
"confidence": 1.0,
"legend": {
"0": "最悪値が10.0ミリ秒以下で、必達条件を満たす。",
"1": "最悪値が10.0ミリ秒を超え、11.0ミリ秒以下である。",
"2": "最悪値が11.0ミリ秒を超え、12.0ミリ秒以下である。",
"3": "最悪値が12.0ミリ秒を超え、15.0ミリ秒以下である。",
"4": "最悪値が15.0ミリ秒を超えている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 683,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.523572875012178,
"finished_at": "2026-09-21T02:32:54.340+00:00",
"case_id": "S07",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:18.913+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5044507500133477
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"deadline_overrun": {
"type": "score",
"score": 2.0,
"confidence": 1.0,
"legend": {
"0": "最悪値が10.0ミリ秒以下で、必達条件を満たす。",
"1": "最悪値が10.0ミリ秒を超え、11.0ミリ秒以下である。",
"2": "最悪値が11.0ミリ秒を超え、12.0ミリ秒以下である。",
"3": "最悪値が12.0ミリ秒を超え、15.0ミリ秒以下である。",
"4": "最悪値が15.0ミリ秒を超えている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 1.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 683,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5045071669737808,
"finished_at": "2026-09-21T02:33:19.418+00:00",
"case_id": "S07",
"repeat": 3
}対象部門の日常業務における新システムの利用段階を評価する。研修満足度や展開という表題から実利用を推測しない。
想定解 段階 1 — 操作研修や操作体験は行われたが、日常業務での利用はまだない。
作問者の採点根拠:操作体験は済んでいるが日常業務への利用は未開始なので段階1。翌週の計画を実績に含めない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 1.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:30.049+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5654767910018563
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"adoption_stage": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "操作研修や操作体験も、日常業務での利用もまだ行われていない。",
"1": "操作研修や操作体験は行われたが、日常業務での利用はまだない。",
"2": "対象部門の日常業務の一部で利用しているが、対象の日常業務すべてには広がっていない。",
"3": "対象の日常業務すべてで利用しているが、外部支援者の操作支援が日常的に必要である。",
"4": "対象の日常業務すべてで利用し、現場担当者だけで通常の業務を完了できている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 763,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5655151670216583,
"finished_at": "2026-09-21T02:32:30.615+00:00",
"case_id": "S08",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:48.039+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5525665419991128
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"adoption_stage": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "操作研修や操作体験も、日常業務での利用もまだ行われていない。",
"1": "操作研修や操作体験は行われたが、日常業務での利用はまだない。",
"2": "対象部門の日常業務の一部で利用しているが、対象の日常業務すべてには広がっていない。",
"3": "対象の日常業務すべてで利用しているが、外部支援者の操作支援が日常的に必要である。",
"4": "対象の日常業務すべてで利用し、現場担当者だけで通常の業務を完了できている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 763,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5526111670187674,
"finished_at": "2026-09-21T02:32:48.591+00:00",
"case_id": "S08",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:13.673+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5919213750166818
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"adoption_stage": {
"type": "score",
"score": 1.0,
"confidence": 1.0,
"legend": {
"0": "操作研修や操作体験も、日常業務での利用もまだ行われていない。",
"1": "操作研修や操作体験は行われたが、日常業務での利用はまだない。",
"2": "対象部門の日常業務の一部で利用しているが、対象の日常業務すべてには広がっていない。",
"3": "対象の日常業務すべてで利用しているが、外部支援者の操作支援が日常的に必要である。",
"4": "対象の日常業務すべてで利用し、現場担当者だけで通常の業務を完了できている。"
},
"probabilities": {
"0": 0.0,
"1": 1.0,
"2": 0.0,
"3": 0.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 763,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5919811670319177,
"finished_at": "2026-09-21T02:33:14.265+00:00",
"case_id": "S08",
"repeat": 3
}記録時点で、当期対象の利用部門受入試験がどの段階にあるか評価する。
想定解 段階 3 — 当期対象の試験は全項目合格しているが、受入責任者による当期全項目の結果確認がそろっていない。
作問者の採点根拠:対象範囲の変更と再試験を反映すると全件合格だが、その全結果を覆う責任者確認はまだそろわないため段階3。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.0000(誤差 0.0000) | 合格 | 0.9900 |
| 2 | 3.0000(誤差 0.0000) | 合格 | 0.9900 |
| 3 | 3.0000(誤差 0.0000) | 合格 | 0.9900 |
試行1・数値整合性の注記:返却Score=3.0000、表示確率の加重平均=2.9900。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
試行2・数値整合性の注記:返却Score=3.0000、表示確率の加重平均=2.9900。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
{
"started_at": "2026-09-21T02:32:34.775+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.6022872499888763
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_test_stage": {
"type": "score",
"score": 3.0,
"confidence": 0.99,
"legend": {
"0": "当期対象の受入試験項目が用意されておらず、実行記録もない。",
"1": "当期対象の受入試験項目は用意されているが、実行記録はない。",
"2": "当期対象の試験を実行した記録はあるが、未実行項目または未解決の不合格が残っている。",
"3": "当期対象の試験は全項目合格しているが、受入責任者による当期全項目の結果確認がそろっていない。",
"4": "当期対象の試験は全項目合格し、受入責任者による当期全項目の結果確認もそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.01,
"3": 0.99,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 975,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.6023446669569239,
"finished_at": "2026-09-21T02:32:35.378+00:00",
"case_id": "S09",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:55.905+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5173125000437722
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_test_stage": {
"type": "score",
"score": 3.0,
"confidence": 0.99,
"legend": {
"0": "当期対象の受入試験項目が用意されておらず、実行記録もない。",
"1": "当期対象の受入試験項目は用意されているが、実行記録はない。",
"2": "当期対象の試験を実行した記録はあるが、未実行項目または未解決の不合格が残っている。",
"3": "当期対象の試験は全項目合格しているが、受入責任者による当期全項目の結果確認がそろっていない。",
"4": "当期対象の試験は全項目合格し、受入責任者による当期全項目の結果確認もそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.01,
"3": 0.99,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 975,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5173575420049019,
"finished_at": "2026-09-21T02:32:56.422+00:00",
"case_id": "S09",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:11.582+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5146780840004794
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_test_stage": {
"type": "score",
"score": 3.0,
"confidence": 0.99,
"legend": {
"0": "当期対象の受入試験項目が用意されておらず、実行記録もない。",
"1": "当期対象の受入試験項目は用意されているが、実行記録はない。",
"2": "当期対象の試験を実行した記録はあるが、未実行項目または未解決の不合格が残っている。",
"3": "当期対象の試験は全項目合格しているが、受入責任者による当期全項目の結果確認がそろっていない。",
"4": "当期対象の試験は全項目合格し、受入責任者による当期全項目の結果確認もそろっている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 975,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5147324159624986,
"finished_at": "2026-09-21T02:33:12.096+00:00",
"case_id": "S09",
"repeat": 3
}今回の封じ込め手順に対する実際の到達段階を評価する。返事の有無だけで最終照合の完了を推測しない。
想定解 段階 3 — 自社と販売会社の全対象在庫について隔離等の必要処置は報告されているが、品質保証担当の全製番照合は未完了である。
作問者の採点根拠:全対象の処置報告まで進んでいるが、最終照合が残っているため段階3。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:29.555+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49293620901880786
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"containment_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象製番の一覧が確定していない。",
"1": "対象製番は確定しているが、自社の対象在庫の隔離が完了していない。",
"2": "対象製番の確定と自社在庫の隔離は完了しているが、販売会社の全対象在庫の引当停止・現品隔離は確認できていない。",
"3": "自社と販売会社の全対象在庫について隔離等の必要処置は報告されているが、品質保証担当の全製番照合は未完了である。",
"4": "自社と販売会社の全対象在庫で必要処置が済み、品質保証担当による全製番と隔離記録の照合も完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 844,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.4930000829626806,
"finished_at": "2026-09-21T02:32:30.048+00:00",
"case_id": "S10",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:03.255+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5158014590269886
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"containment_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象製番の一覧が確定していない。",
"1": "対象製番は確定しているが、自社の対象在庫の隔離が完了していない。",
"2": "対象製番の確定と自社在庫の隔離は完了しているが、販売会社の全対象在庫の引当停止・現品隔離は確認できていない。",
"3": "自社と販売会社の全対象在庫について隔離等の必要処置は報告されているが、品質保証担当の全製番照合は未完了である。",
"4": "自社と販売会社の全対象在庫で必要処置が済み、品質保証担当による全製番と隔離記録の照合も完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 844,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5158351249992847,
"finished_at": "2026-09-21T02:33:03.771+00:00",
"case_id": "S10",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:19.419+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5272637499729171
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"containment_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対象製番の一覧が確定していない。",
"1": "対象製番は確定しているが、自社の対象在庫の隔離が完了していない。",
"2": "対象製番の確定と自社在庫の隔離は完了しているが、販売会社の全対象在庫の引当停止・現品隔離は確認できていない。",
"3": "自社と販売会社の全対象在庫について隔離等の必要処置は報告されているが、品質保証担当の全製番照合は未完了である。",
"4": "自社と販売会社の全対象在庫で必要処置が済み、品質保証担当による全製番と隔離記録の照合も完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 844,
"output_tokens": 20
}
},
"error": null,
"elapsed_seconds": 0.5272942500305362,
"finished_at": "2026-09-21T02:33:19.947+00:00",
"case_id": "S10",
"repeat": 3
}指摘DR-17について、実際の修正・検証・承認の到達段階を評価する。
想定解 段階 3 — 修正反映と再試験合格の記録はあるが、設計責任者による証跡確認とクローズ承認は完了していない。
作問者の採点根拠:修正と再試験は終わっているが最終承認前なので段階3。赤札や備考の状態から正式完了を推測しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 3.0000(誤差 0.0000) | 合格 | 1.0000 |
{
"started_at": "2026-09-21T02:32:43.283+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5536803749855608
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"finding_closure_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対策案が決まっていない。",
"1": "対策案は決まっているが、対象への修正反映は完了していない。",
"2": "修正反映は完了しているが、所定の再試験の合格記録がない。",
"3": "修正反映と再試験合格の記録はあるが、設計責任者による証跡確認とクローズ承認は完了していない。",
"4": "修正反映、再試験合格、設計責任者の証跡確認とクローズ承認がすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5537377499858849,
"finished_at": "2026-09-21T02:32:43.837+00:00",
"case_id": "S11",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:00.623+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5199776660301723
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"finding_closure_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対策案が決まっていない。",
"1": "対策案は決まっているが、対象への修正反映は完了していない。",
"2": "修正反映は完了しているが、所定の再試験の合格記録がない。",
"3": "修正反映と再試験合格の記録はあるが、設計責任者による証跡確認とクローズ承認は完了していない。",
"4": "修正反映、再試験合格、設計責任者の証跡確認とクローズ承認がすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5200153749901801,
"finished_at": "2026-09-21T02:33:01.143+00:00",
"case_id": "S11",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:26.183+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5304003750206903
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"finding_closure_stage": {
"type": "score",
"score": 3.0,
"confidence": 1.0,
"legend": {
"0": "対策案が決まっていない。",
"1": "対策案は決まっているが、対象への修正反映は完了していない。",
"2": "修正反映は完了しているが、所定の再試験の合格記録がない。",
"3": "修正反映と再試験合格の記録はあるが、設計責任者による証跡確認とクローズ承認は完了していない。",
"4": "修正反映、再試験合格、設計責任者の証跡確認とクローズ承認がすべて完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 1.0,
"4": 0.0
}
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5304581660311669,
"finished_at": "2026-09-21T02:33:26.714+00:00",
"case_id": "S11",
"repeat": 3
}追加見積Q-32に対する両社の合意が、記録時点でどこまで成立しているか評価する。
想定解 段階 4 — 作業範囲・費用負担・納期の両社承認がそろい、付された条件があればその充足も両社で確認されている。
作問者の採点根拠:同じ改訂版の範囲・費用・納期について有効な両社承認があり、条件の充足も確認済みなので段階4。更新前の一覧は新しい合意を取り消さない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
| 2 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
| 3 | 3.9800(誤差 0.0200) | 合格 | 0.9800 |
{
"started_at": "2026-09-21T02:32:42.268+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5102852499694563
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_work_agreement": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "追加作業について、顧客の要望自体がまだ示されていない。",
"1": "追加作業の要望はあるが、具体的な作業範囲が両社で確認されていない。",
"2": "具体的な作業範囲は両社で確認されているが、費用負担または納期の案がまだ整っていない。",
"3": "作業範囲・費用負担・納期の案が両社で確認されているが、有効な両社承認がそろっていない。",
"4": "作業範囲・費用負担・納期の両社承認がそろい、付された条件があればその充足も両社で確認されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.02,
"4": 0.98
}
}
},
"usage": {
"input_tokens": 1076,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5103475830401294,
"finished_at": "2026-09-21T02:32:42.779+00:00",
"case_id": "S12",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:57.969+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49134733399841934
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_work_agreement": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "追加作業について、顧客の要望自体がまだ示されていない。",
"1": "追加作業の要望はあるが、具体的な作業範囲が両社で確認されていない。",
"2": "具体的な作業範囲は両社で確認されているが、費用負担または納期の案がまだ整っていない。",
"3": "作業範囲・費用負担・納期の案が両社で確認されているが、有効な両社承認がそろっていない。",
"4": "作業範囲・費用負担・納期の両社承認がそろい、付された条件があればその充足も両社で確認されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.02,
"4": 0.98
}
}
},
"usage": {
"input_tokens": 1076,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.49140766699565575,
"finished_at": "2026-09-21T02:32:58.461+00:00",
"case_id": "S12",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:15.765+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5383408750058152
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_work_agreement": {
"type": "score",
"score": 3.98,
"confidence": 0.98,
"legend": {
"0": "追加作業について、顧客の要望自体がまだ示されていない。",
"1": "追加作業の要望はあるが、具体的な作業範囲が両社で確認されていない。",
"2": "具体的な作業範囲は両社で確認されているが、費用負担または納期の案がまだ整っていない。",
"3": "作業範囲・費用負担・納期の案が両社で確認されているが、有効な両社承認がそろっていない。",
"4": "作業範囲・費用負担・納期の両社承認がそろい、付された条件があればその充足も両社で確認されている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.02,
"4": 0.98
}
}
},
"usage": {
"input_tokens": 1076,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5384126250282861,
"finished_at": "2026-09-21T02:33:16.304+00:00",
"case_id": "S12",
"repeat": 3
}顧客は、今回の発注分について色仕様の変更を依頼しているか。
想定解 true
作問者の採点根拠:色仕様の変更依頼がある。価格・数量を変更しないという記載は、色仕様の変更を否定していない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9800 → true | 合格 | — |
| 2 | P(true)=0.9800 → true | 合格 | — |
| 3 | P(true)=0.9900 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:43.839+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5314003330422565
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"specification_change_requested": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 518,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5314630419597961,
"finished_at": "2026-09-21T02:32:44.370+00:00",
"case_id": "N01",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:50.717+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5365842499886639
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"specification_change_requested": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 518,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.536598667036742,
"finished_at": "2026-09-21T02:32:51.254+00:00",
"case_id": "N01",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:28.416+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5055047089699656
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"specification_change_requested": {
"type": "noul",
"noul": 0.99
}
},
"usage": {
"input_tokens": 518,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5055517919827253,
"finished_at": "2026-09-21T02:33:28.922+00:00",
"case_id": "N01",
"repeat": 3
}提示された社内申請の受理規程に照らし、この申請には受理条件の不備があるか。
想定解 false
作問者の採点根拠:提示された受理条件をすべて満たしている。旧書式の押印欄が空欄でも、規程上の不備にはならない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.1000 → false | 合格 | — |
| 2 | P(true)=0.1000 → false | 合格 | — |
| 3 | P(true)=0.0800 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:31.644+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.518677459040191
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_defect": {
"type": "noul",
"noul": 0.1
}
},
"usage": {
"input_tokens": 619,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5187339579570107,
"finished_at": "2026-09-21T02:32:32.163+00:00",
"case_id": "N02",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:58.463+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5248064590268768
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_defect": {
"type": "noul",
"noul": 0.1
}
},
"usage": {
"input_tokens": 619,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5248632919974625,
"finished_at": "2026-09-21T02:32:58.988+00:00",
"case_id": "N02",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:11.055+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5252397920121439
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_defect": {
"type": "noul",
"noul": 0.08
}
},
"usage": {
"input_tokens": 619,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.525285542011261,
"finished_at": "2026-09-21T02:33:11.580+00:00",
"case_id": "N02",
"repeat": 3
}提示された同一注文の判定ルールに照らし、後から届いたFAXはメール注文の重複到着か。
想定解 true
作問者の採点根拠:同一注文の再送という明示と識別情報が一致している。FAXとメールの経路の違いは別注文の証拠ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9600 → true | 合格 | — |
| 2 | P(true)=0.9600 → true | 合格 | — |
| 3 | P(true)=0.9600 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:31.123+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5185621250420809
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"duplicate_order": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5186056669917889,
"finished_at": "2026-09-21T02:32:31.642+00:00",
"case_id": "N03",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:00.106+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5154248750186525
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"duplicate_order": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.515471416991204,
"finished_at": "2026-09-21T02:33:00.622+00:00",
"case_id": "N03",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:19.948+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5182328330120072
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"duplicate_order": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 734,
"output_tokens": 21
}
},
"error": null,
"elapsed_seconds": 0.5182696250267327,
"finished_at": "2026-09-21T02:33:20.466+00:00",
"case_id": "N03",
"repeat": 3
}今回の横展開調査ルールに照らし、輸出向けB車は影響調査の対象に含まれるか。
想定解 true
作問者の採点根拠:調査対象は共通部品と版で決まり、仕向けや市場報告件数では除外できない。これは不具合発生の断定とは別の命題である。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9700 → true | 合格 | — |
| 2 | P(true)=0.9700 → true | 合格 | — |
| 3 | P(true)=0.9700 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:38.455+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.48334533302113414
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"impact_review_required": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 638,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.4833903340040706,
"finished_at": "2026-09-21T02:32:38.938+00:00",
"case_id": "N04",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:07.498+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5089093330316246
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"impact_review_required": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 638,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5089337910176255,
"finished_at": "2026-09-21T02:33:08.007+00:00",
"case_id": "N04",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:22.577+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.515312040981371
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"impact_review_required": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 638,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5154314999817871,
"finished_at": "2026-09-21T02:33:23.093+00:00",
"case_id": "N04",
"repeat": 3
}本案件の完了条件に照らし、実車評価は完了しているか。
想定解 false
作問者の採点根拠:実車評価の完了条件を満たさない。社内確認印付きの成績書は台上試験に対するもの。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0300 → false | 合格 | — |
| 2 | P(true)=0.0300 → false | 合格 | — |
| 3 | P(true)=0.0300 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:26.398+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5356543340021744
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"vehicle_test_complete": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 589,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5357004170073196,
"finished_at": "2026-09-21T02:32:26.933+00:00",
"case_id": "N05",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:49.143+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5191153750056401
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"vehicle_test_complete": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 589,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5191925839753821,
"finished_at": "2026-09-21T02:32:49.662+00:00",
"case_id": "N05",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:18.396+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5146094999508932
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"vehicle_test_complete": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 589,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5148127910215408,
"finished_at": "2026-09-21T02:33:18.911+00:00",
"case_id": "N05",
"repeat": 3
}現在書込み機に設定されたデータは、提示された照合ルール上、承認済みイメージと同一か。
想定解 false
作問者の採点根拠:識別値が異なるため、提示ルール上の同一性は成立しない。ソース変更なしという説明では置き換えられない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0300 → false | 合格 | — |
| 2 | P(true)=0.0300 → false | 合格 | — |
| 3 | P(true)=0.0300 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:41.250+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5210812499863096
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"approved_image_match": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 639,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5211468749912456,
"finished_at": "2026-09-21T02:32:41.771+00:00",
"case_id": "N06",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:54.905+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.517618665995542
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"approved_image_match": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 639,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5176616669632494,
"finished_at": "2026-09-21T02:32:55.422+00:00",
"case_id": "N06",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:16.306+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.48496166698168963
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"approved_image_match": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 639,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.48500666703330353,
"finished_at": "2026-09-21T02:33:16.791+00:00",
"case_id": "N06",
"repeat": 3
}提示された変更評価ルールに照らし、今回の基板変更は起動・電源変動の追加評価の対象か。
想定解 true
作問者の採点根拠:電源部品の代替変更が追加評価の条件に該当する。購買担当の同等品という説明は評価免除の承認ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9800 → true | 合格 | — |
| 2 | P(true)=0.9800 → true | 合格 | — |
| 3 | P(true)=0.9700 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:30.617+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.504576042003464
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_power_test_required": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 603,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.504623958026059,
"finished_at": "2026-09-21T02:32:31.121+00:00",
"case_id": "N07",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:53.296+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5179745830246247
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_power_test_required": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 603,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5180506249889731,
"finished_at": "2026-09-21T02:32:53.814+00:00",
"case_id": "N07",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:12.099+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5170626670005731
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"additional_power_test_required": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 603,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5171299580251798,
"finished_at": "2026-09-21T02:33:12.616+00:00",
"case_id": "N07",
"repeat": 3
}提示された障害管理ルールに照らし、この障害の恒久対策は完了しているか。
想定解 false
作問者の採点根拠:サービス復旧と連絡状態のクローズは、恒久対策の完了条件を満たすものではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0400 → false | 合格 | — |
| 2 | P(true)=0.0400 → false | 合格 | — |
| 3 | P(true)=0.0400 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:37.912+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.542065666988492
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"permanent_fix_verified": {
"type": "noul",
"noul": 0.04
}
},
"usage": {
"input_tokens": 574,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5421332080150023,
"finished_at": "2026-09-21T02:32:38.454+00:00",
"case_id": "N08",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:05.920+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5264112500008196
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"permanent_fix_verified": {
"type": "noul",
"noul": 0.04
}
},
"usage": {
"input_tokens": 574,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5264798339921981,
"finished_at": "2026-09-21T02:33:06.446+00:00",
"case_id": "N08",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:10.568+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4844969580299221
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"permanent_fix_verified": {
"type": "noul",
"noul": 0.04
}
},
"usage": {
"input_tokens": 574,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.4845632500364445,
"finished_at": "2026-09-21T02:33:11.053+00:00",
"case_id": "N08",
"repeat": 3
}本プロジェクトの受入ルールと正式議事録に照らし、今回の納入の受入合意は成立しているか。
想定解 true
作問者の採点根拠:所定の受入条件が成立し、残件も後日対応の条件を満たしている。修正依頼の存在だけで受入を否定しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9700 → true | 合格 | — |
| 2 | P(true)=0.9700 → true | 合格 | — |
| 3 | P(true)=0.9700 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:38.940+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5296300830086693
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_agreed": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 656,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5296959170373157,
"finished_at": "2026-09-21T02:32:39.470+00:00",
"case_id": "N09",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:01.689+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5151201669941656
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_agreed": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 656,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5151734580285847,
"finished_at": "2026-09-21T02:33:02.205+00:00",
"case_id": "N09",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:21.514+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49213295796653256
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_agreed": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 656,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.4921860829927027,
"finished_at": "2026-09-21T02:33:22.006+00:00",
"case_id": "N09",
"repeat": 3
}提示された完了条件に照らし、量産工程の評価は完了しているか。
想定解 false
作問者の採点根拠:試作品の性能確認は、指定された量産工程の評価を代替しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0300 → false | 合格 | — |
| 2 | P(true)=0.0200 → false | 合格 | — |
| 3 | P(true)=0.0300 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:27.987+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5026563329738565
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"production_process_evaluated": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 633,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.502713915950153,
"finished_at": "2026-09-21T02:32:28.490+00:00",
"case_id": "N10",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:48.595+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5455657920101658
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"production_process_evaluated": {
"type": "noul",
"noul": 0.02
}
},
"usage": {
"input_tokens": 633,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5456420840346254,
"finished_at": "2026-09-21T02:32:49.140+00:00",
"case_id": "N10",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:16.795+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5136291249655187
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"production_process_evaluated": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 633,
"output_tokens": 24
}
},
"error": null,
"elapsed_seconds": 0.5138724999851547,
"finished_at": "2026-09-21T02:33:17.309+00:00",
"case_id": "N10",
"repeat": 3
}受付票H-28の依頼全体を、追加の変更合意なしで定額保守の範囲内として受け付けられるか。
想定解 false
作問者の採点根拠:一部が保守内でも全体を保守内とはできないためfalse。①の保守対応を拒む意味ではなく、②を別途の変更要求に分ける。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0600 → false | 合格 | — |
| 2 | P(true)=0.0600 → false | 合格 | — |
| 3 | P(true)=0.0600 → false | 合格 | — |
{
"started_at": "2026-09-21T02:32:41.773+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49298362497938797
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"maintenance_in_scope": {
"type": "noul",
"noul": 0.06
}
},
"usage": {
"input_tokens": 745,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.49304466700414196,
"finished_at": "2026-09-21T02:32:42.266+00:00",
"case_id": "N11",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:51.757+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5167075829813257
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"maintenance_in_scope": {
"type": "noul",
"noul": 0.06
}
},
"usage": {
"input_tokens": 745,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.5167622499866411,
"finished_at": "2026-09-21T02:32:52.273+00:00",
"case_id": "N11",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:09.038+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49201983300736174
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"maintenance_in_scope": {
"type": "noul",
"noul": 0.06
}
},
"usage": {
"input_tokens": 745,
"output_tokens": 22
}
},
"error": null,
"elapsed_seconds": 0.49207420798484236,
"finished_at": "2026-09-21T02:33:09.530+00:00",
"case_id": "N11",
"repeat": 3
}このやり取りで、判定対象である今期の本導入を顧客は見送ると表明しているか。
想定解 true
作問者の採点根拠:本導入の対象と開始時期について今期に行わない方針が示されているためtrue。取引関係の継続や試行支援の受注とは両立する。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9600 → true | 合格 | — |
| 2 | P(true)=0.9600 → true | 合格 | — |
| 3 | P(true)=0.9600 → true | 合格 | — |
{
"started_at": "2026-09-21T02:32:40.667+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5809873749967664
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"current_period_declined": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 794,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5810477909981273,
"finished_at": "2026-09-21T02:32:41.248+00:00",
"case_id": "N12",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:06.942+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5544039580272511
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"current_period_declined": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 794,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.5544494159985334,
"finished_at": "2026-09-21T02:33:07.497+00:00",
"case_id": "N12",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:20.468+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.48611437500221655
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"current_period_declined": {
"type": "noul",
"noul": 0.96
}
},
"usage": {
"input_tokens": 794,
"output_tokens": 23
}
},
"error": null,
"elapsed_seconds": 0.48617337498581037,
"finished_at": "2026-09-21T02:33:20.955+00:00",
"case_id": "N12",
"repeat": 3
}仕入先メールの主たる依頼を1つ選ぶ。 受入検査の予定と照らして、求められている手続を分類する。
想定解 acceptance_date_advance — 受入検査の完了前の日付で、検収済みとして扱うことを求めている。
作問者の採点根拠:到着予定の変更ではなく、受入検査前の日付で検収済みと扱う依頼である。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | acceptance_date_advance | 合格 | 1.0000 |
| 2 | acceptance_date_advance | 合格 | 1.0000 |
| 3 | acceptance_date_advance | 合格 | 1.0000 |
現在時刻から、メールで明記された回答期限までの残り時間に基づく返信の緊急度を評価する。 依頼を受け入れるかどうかや、検査の実施予定日はこの評価に含めない。 時間は営業時間ではなく、連続した経過時間で比較する。
想定解 段階 3 — 明示された回答期限がまだ到来しておらず、残り時間は4時間以下である。
作問者の採点根拠:残りは1時間30分。期限前かつ4時間以下の段階に該当する。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 2.9900(誤差 0.0100) | 合格 | 0.9900 |
| 2 | 2.9700(誤差 0.0300) | 合格 | 0.9700 |
| 3 | 2.9700(誤差 0.0300) | 合格 | 0.9700 |
提示された記録から、現時点で受入検査が完了していると確認できるか。
想定解 false
作問者の採点根拠:入荷をもって受入検査が完了したとみなしてはいけない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0300 → false | 合格 | — |
| 2 | P(true)=0.0300 → false | 合格 | — |
| 3 | P(true)=0.0300 → false | 合格 | — |
想定:hold_acceptance_and_reply_by_deadline
3月31日付の検収済み返信と記録変更を保留する。 実際の受入検査の完了後に検収する旨を、本日16:00までに回答する。
{
"started_at": "2026-09-21T02:32:33.238+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.499907583987806
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_kind": {
"type": "choice",
"choice": "acceptance_date_advance",
"confidence": 1.0,
"probabilities": {
"other_or_unclear": 0.0,
"acceptance_date_advance": 1.0,
"delivery_change": 0.0,
"invoice_copy": 0.0
}
},
"response_urgency": {
"type": "score",
"score": 2.99,
"confidence": 0.99,
"legend": {
"0": "明示された回答期限まで72時間を超える余裕がある、または回答期限が明示されていない。",
"1": "明示された回答期限まで24時間を超え、72時間以下の余裕がある。",
"2": "明示された回答期限まで4時間を超え、24時間以下の余裕がある。",
"3": "明示された回答期限がまだ到来しておらず、残り時間は4時間以下である。",
"4": "明示された回答期限に到達している、または回答期限を過ぎている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.01,
"3": 0.99,
"4": 0.0
}
},
"inspection_completed": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 1265,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.49997687502764165,
"finished_at": "2026-09-21T02:32:33.738+00:00",
"case_id": "X01",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:06.448+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49132437497610226
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_kind": {
"type": "choice",
"choice": "acceptance_date_advance",
"confidence": 1.0,
"probabilities": {
"other_or_unclear": 0.0,
"invoice_copy": 0.0,
"acceptance_date_advance": 1.0,
"delivery_change": 0.0
}
},
"response_urgency": {
"type": "score",
"score": 2.97,
"confidence": 0.97,
"legend": {
"0": "明示された回答期限まで72時間を超える余裕がある、または回答期限が明示されていない。",
"1": "明示された回答期限まで24時間を超え、72時間以下の余裕がある。",
"2": "明示された回答期限まで4時間を超え、24時間以下の余裕がある。",
"3": "明示された回答期限がまだ到来しておらず、残り時間は4時間以下である。",
"4": "明示された回答期限に到達している、または回答期限を過ぎている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.03,
"3": 0.97,
"4": 0.0
}
},
"inspection_completed": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 1265,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.4913991669891402,
"finished_at": "2026-09-21T02:33:06.940+00:00",
"case_id": "X01",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:17.847+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5466486250516027
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"request_kind": {
"type": "choice",
"choice": "acceptance_date_advance",
"confidence": 1.0,
"probabilities": {
"other_or_unclear": 0.0,
"delivery_change": 0.0,
"acceptance_date_advance": 1.0,
"invoice_copy": 0.0
}
},
"response_urgency": {
"type": "score",
"score": 2.97,
"confidence": 0.97,
"legend": {
"0": "明示された回答期限まで72時間を超える余裕がある、または回答期限が明示されていない。",
"1": "明示された回答期限まで24時間を超え、72時間以下の余裕がある。",
"2": "明示された回答期限まで4時間を超え、24時間以下の余裕がある。",
"3": "明示された回答期限がまだ到来しておらず、残り時間は4時間以下である。",
"4": "明示された回答期限に到達している、または回答期限を過ぎている。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.03,
"3": 0.97,
"4": 0.0
}
},
"inspection_completed": {
"type": "noul",
"noul": 0.03
}
},
"usage": {
"input_tokens": 1265,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.5468725829850882,
"finished_at": "2026-09-21T02:33:18.394+00:00",
"case_id": "X01",
"repeat": 3
}本案件の分類ルールに照らし、E-24で実際に変更する対象を分類する。
想定解 inspection_process — 製品のソフトやデータは変えない、検査治具側の設定変更。
作問者の採点根拠:提示された分類では検査工程変更に該当する。設定という語だけで製品ソフト変更とはしない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | inspection_process | 合格 | 1.0000 |
| 2 | inspection_process | 合格 | 1.0000 |
| 3 | inspection_process | 合格 | 1.0000 |
E-24の対象条件に対する検証証跡の到達段階を評価する。量産反映の承認の有無とは別に、検証の実績を判定する。
想定解 段階 4 — 全対象条件の試験が合格し設定版との対応が記録され、独立した確認担当の証跡レビューも完了している。
作問者の採点根拠:この検証尺度の最上位条件まで記録がそろっているため段階4。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
| 2 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
| 3 | 4.0000(誤差 0.0000) | 合格 | 1.0000 |
E-24の設定版F12について、顧客と工場品質部門による所定の量産反映承認は台帳で確認できるか。
想定解 true
作問者の採点根拠:必要な正式承認が対象変更と設定版に一致しているためtrue。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9700 → true | 合格 | — |
| 2 | P(true)=0.9800 → true | 合格 | — |
| 3 | P(true)=0.9700 → true | 合格 | — |
想定:apply_approved_fixture_setting
E-24で承認された適用範囲に限って設定版F12を量産工程へ反映し、変更記録を残す。 製品ソフトや承認されていない別の設定版まで変更対象に広げない。
{
"started_at": "2026-09-21T02:32:42.781+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49995370802935213
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"change_class": {
"type": "choice",
"choice": "inspection_process",
"confidence": 1.0,
"probabilities": {
"product_software": 0.0,
"product_hardware": 0.0,
"unknown": 0.0,
"inspection_process": 1.0
}
},
"verification_stage": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "対象条件と試験項目が確定していない。",
"1": "対象条件と試験項目は確定しているが、試験は実行されていない。",
"2": "試験を実行した記録はあるが、未実行条件または未解決の不合格がある。",
"3": "全対象条件の試験が合格し設定版との対応も記録されているが、独立した確認担当の証跡レビューは未完了である。",
"4": "全対象条件の試験が合格し設定版との対応が記録され、独立した確認担当の証跡レビューも完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
},
"production_approval_recorded": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 1297,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.500015750003513,
"finished_at": "2026-09-21T02:32:43.281+00:00",
"case_id": "X02",
"repeat": 1
}{
"started_at": "2026-09-21T02:33:08.008+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5294401659630239
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"change_class": {
"type": "choice",
"choice": "inspection_process",
"confidence": 1.0,
"probabilities": {
"product_software": 0.0,
"inspection_process": 1.0,
"unknown": 0.0,
"product_hardware": 0.0
}
},
"verification_stage": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "対象条件と試験項目が確定していない。",
"1": "対象条件と試験項目は確定しているが、試験は実行されていない。",
"2": "試験を実行した記録はあるが、未実行条件または未解決の不合格がある。",
"3": "全対象条件の試験が合格し設定版との対応も記録されているが、独立した確認担当の証跡レビューは未完了である。",
"4": "全対象条件の試験が合格し設定版との対応が記録され、独立した確認担当の証跡レビューも完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
},
"production_approval_recorded": {
"type": "noul",
"noul": 0.98
}
},
"usage": {
"input_tokens": 1297,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.529489292006474,
"finished_at": "2026-09-21T02:33:08.538+00:00",
"case_id": "X02",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:23.635+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.47598520800238475
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"change_class": {
"type": "choice",
"choice": "inspection_process",
"confidence": 1.0,
"probabilities": {
"product_hardware": 0.0,
"unknown": 0.0,
"product_software": 0.0,
"inspection_process": 1.0
}
},
"verification_stage": {
"type": "score",
"score": 4.0,
"confidence": 1.0,
"legend": {
"0": "対象条件と試験項目が確定していない。",
"1": "対象条件と試験項目は確定しているが、試験は実行されていない。",
"2": "試験を実行した記録はあるが、未実行条件または未解決の不合格がある。",
"3": "全対象条件の試験が合格し設定版との対応も記録されているが、独立した確認担当の証跡レビューは未完了である。",
"4": "全対象条件の試験が合格し設定版との対応が記録され、独立した確認担当の証跡レビューも完了している。"
},
"probabilities": {
"0": 0.0,
"1": 0.0,
"2": 0.0,
"3": 0.0,
"4": 1.0
}
},
"production_approval_recorded": {
"type": "noul",
"noul": 0.97
}
},
"usage": {
"input_tokens": 1297,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.47606154199456796,
"finished_at": "2026-09-21T02:33:24.111+00:00",
"case_id": "X02",
"repeat": 3
}今回持ち込まれた作業依頼の内容を、記載された変更対象に基づいて分類する。
想定解 firmware_update — 端末のファームウェアを書き換える作業。
作問者の採点根拠:記載された依頼はファームウェアの書換えであり、部品交換や操作教育ではない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | firmware_update | 合格 | 1.0000 |
| 2 | firmware_update | 合格 | 1.0000 |
| 3 | firmware_update | 合格 | 1.0000 |
現在の検査・正式登録業務の支障を評価する。承認された代替手段を含めた完了可否で判定し、催促の強さから停止を推測しない。
想定解 段階 2 — 通常の方法で完了できない製品があるが、承認された代替手段で全製品の検査と正式登録を完了できる。
作問者の採点根拠:通常の方法では一部に支障があるが、承認済みの代替手段で全件完了できる段階2。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 1.9700(誤差 0.0300) | 合格 | 0.9700 |
| 2 | 1.9700(誤差 0.0300) | 合格 | 0.9700 |
| 3 | 1.9600(誤差 0.0400) | 合格 | 0.9700 |
試行2・数値整合性の注記:返却Score=1.9700、表示確率の加重平均=1.9600。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
試行3・数値整合性の注記:返却Score=1.9600、表示確率の加重平均=1.9700。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
現地保守の運用ルールに照らし、T08へのF3.2投入に適用できる変更承認は確認できるか。
想定解 false
作問者の採点根拠:ファイルの受領と変更承認は別。対象設備と投入版に適用する承認が存在しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.0500 → false | 合格 | — |
| 2 | P(true)=0.0500 → false | 合格 | — |
| 3 | P(true)=0.0500 → false | 合格 | — |
想定:hold_update_continue_workaround_and_seek_approval
未承認のF3.2への書換えは保留する。 承認済みの代替検査と手動登録を継続し、T08へのF3.2投入について正式な変更審査を依頼する。 全件の業務が完了できる現状を共有し、全停止という報告に置き換えない。
{
"started_at": "2026-09-21T02:32:44.856+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.498061541991774
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"work_type": {
"type": "choice",
"choice": "firmware_update",
"confidence": 1.0,
"probabilities": {
"unclear": 0.0,
"hardware_replacement": 0.0,
"firmware_update": 1.0,
"user_training": 0.0
}
},
"current_impact": {
"type": "score",
"score": 1.97,
"confidence": 0.97,
"legend": {
"0": "すべての製品で、検査と正式登録を通常どおり支障なく完了できる。",
"1": "すべての製品で通常の方法により完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法で完了できない製品があるが、承認された代替手段で全製品の検査と正式登録を完了できる。",
"3": "承認された代替手段を含めても完了できない製品があるが、完了できる製品もある。",
"4": "承認された代替手段を含め、全製品の検査と正式登録が完了できない。"
},
"probabilities": {
"0": 0.0,
"1": 0.03,
"2": 0.97,
"3": 0.0,
"4": 0.0
}
},
"update_authorized": {
"type": "noul",
"noul": 0.05
}
},
"usage": {
"input_tokens": 1309,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.49810675001936033,
"finished_at": "2026-09-21T02:32:45.354+00:00",
"case_id": "X03",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:54.342+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.560160040971823
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"work_type": {
"type": "choice",
"choice": "firmware_update",
"confidence": 1.0,
"probabilities": {
"user_training": 0.0,
"firmware_update": 1.0,
"hardware_replacement": 0.0,
"unclear": 0.0
}
},
"current_impact": {
"type": "score",
"score": 1.97,
"confidence": 0.97,
"legend": {
"0": "すべての製品で、検査と正式登録を通常どおり支障なく完了できる。",
"1": "すべての製品で通常の方法により完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法で完了できない製品があるが、承認された代替手段で全製品の検査と正式登録を完了できる。",
"3": "承認された代替手段を含めても完了できない製品があるが、完了できる製品もある。",
"4": "承認された代替手段を含め、全製品の検査と正式登録が完了できない。"
},
"probabilities": {
"0": 0.01,
"1": 0.02,
"2": 0.97,
"3": 0.0,
"4": 0.0
}
},
"update_authorized": {
"type": "noul",
"noul": 0.05
}
},
"usage": {
"input_tokens": 1309,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.5602210410288535,
"finished_at": "2026-09-21T02:32:54.903+00:00",
"case_id": "X03",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:25.181+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4988733750069514
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"work_type": {
"type": "choice",
"choice": "firmware_update",
"confidence": 1.0,
"probabilities": {
"user_training": 0.0,
"unclear": 0.0,
"firmware_update": 1.0,
"hardware_replacement": 0.0
}
},
"current_impact": {
"type": "score",
"score": 1.96,
"confidence": 0.97,
"legend": {
"0": "すべての製品で、検査と正式登録を通常どおり支障なく完了できる。",
"1": "すべての製品で通常の方法により完了できるが、遅延や追加操作が生じている。",
"2": "通常の方法で完了できない製品があるが、承認された代替手段で全製品の検査と正式登録を完了できる。",
"3": "承認された代替手段を含めても完了できない製品があるが、完了できる製品もある。",
"4": "承認された代替手段を含め、全製品の検査と正式登録が完了できない。"
},
"probabilities": {
"0": 0.0,
"1": 0.03,
"2": 0.97,
"3": 0.0,
"4": 0.0
}
},
"update_authorized": {
"type": "noul",
"noul": 0.05
}
},
"usage": {
"input_tokens": 1309,
"output_tokens": 91
}
},
"error": null,
"elapsed_seconds": 0.4989337499719113,
"finished_at": "2026-09-21T02:33:25.680+00:00",
"case_id": "X03",
"repeat": 3
}記録時点で確定している受入の範囲を選ぶ。
想定解 original_order_only — 本体P-40は受入済みで、追加CH-18の受入はまだ。
作問者の採点根拠:本体だけの受入が成立している。営業週報や現場議事録の「一式」から追加作業の受入完了までは導けない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | original_order_only | 合格 | 1.0000 |
| 2 | original_order_only | 合格 | 1.0000 |
| 3 | original_order_only | 合格 | 1.0000 |
記録時点の受注登録・月次の部門別集計に残る業務上の支障を評価する。
想定解 段階 2 — 通常の方法で完了できない処理があるが、代替手段を使えば全件完了できる。
作問者の採点根拠:対象業務の一部に代替手段が必要だが、全件完了できているため段階2。受入の成立と業務の通常化は別の判断である。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | 1.9800(誤差 0.0200) | 合格 | 0.9600 |
| 2 | 1.9800(誤差 0.0200) | 合格 | 0.9600 |
| 3 | 1.9700(誤差 0.0300) | 合格 | 0.9600 |
試行2・数値整合性の注記:返却Score=1.9800、表示確率の加重平均=1.9900。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
試行3・数値整合性の注記:返却Score=1.9700、表示確率の加重平均=1.9600。差は丸めを仮定した整合範囲内です。採点には返却Scoreを使用しました。
この案件で合意した条件に照らし、日勤運用への引継ぎは完了しているか。
想定解 true
作問者の採点根拠:この案件の引継ぎは残件の消滅ではなく必要情報と受領確認で判定するためtrue。追加作業そのものの完了は意味しない。
| 試行 | 実測値 | 判定 | confidence |
|---|---|---|---|
| 1 | P(true)=0.9500 → true | 合格 | — |
| 2 | P(true)=0.9400 → true | 合格 | — |
| 3 | P(true)=0.9400 → true | 合格 | — |
想定:record_base_acceptance_and_track_workaround
P-40だけの受入を管理台帳へ反映し、CH-18は未受入の別単位として追跡する。 月次集計の代替運用を継続し、残件を含めた日勤への引継ぎが完了していることを記録する。 本体の受入を止めたり、追加作業を含む案件全体を完了扱いにしたりしない。
{
"started_at": "2026-09-21T02:32:33.740+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.5158699169987813
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_scope": {
"type": "choice",
"choice": "original_order_only",
"confidence": 1.0,
"probabilities": {
"neither_accepted": 0.0,
"change_only": 0.0,
"entire_project": 0.0,
"original_order_only": 1.0
}
},
"remaining_impact": {
"type": "score",
"score": 1.98,
"confidence": 0.96,
"legend": {
"0": "対象業務は全対象部門で通常どおり完了し、遅延・追加操作・代替手段の利用もない。",
"1": "対象業務は通常の方法で全件完了するが、遅延または追加操作がある。",
"2": "通常の方法で完了できない処理があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても完了できない処理が一部残っている。",
"4": "代替手段を含め、対象業務のすべての処理が完了できない。"
},
"probabilities": {
"0": 0.01,
"1": 0.01,
"2": 0.97,
"3": 0.01,
"4": 0.0
}
},
"operations_handover_complete": {
"type": "noul",
"noul": 0.95
}
},
"usage": {
"input_tokens": 1520,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.5159830409684218,
"finished_at": "2026-09-21T02:32:34.256+00:00",
"case_id": "X04",
"repeat": 1
}{
"started_at": "2026-09-21T02:32:56.977+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.4944566659978591
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_scope": {
"type": "choice",
"choice": "original_order_only",
"confidence": 1.0,
"probabilities": {
"original_order_only": 1.0,
"change_only": 0.0,
"neither_accepted": 0.0,
"entire_project": 0.0
}
},
"remaining_impact": {
"type": "score",
"score": 1.98,
"confidence": 0.96,
"legend": {
"0": "対象業務は全対象部門で通常どおり完了し、遅延・追加操作・代替手段の利用もない。",
"1": "対象業務は通常の方法で全件完了するが、遅延または追加操作がある。",
"2": "通常の方法で完了できない処理があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても完了できない処理が一部残っている。",
"4": "代替手段を含め、対象業務のすべての処理が完了できない。"
},
"probabilities": {
"0": 0.01,
"1": 0.01,
"2": 0.96,
"3": 0.02,
"4": 0.0
}
},
"operations_handover_complete": {
"type": "noul",
"noul": 0.94
}
},
"usage": {
"input_tokens": 1520,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.4945203330134973,
"finished_at": "2026-09-21T02:32:57.471+00:00",
"case_id": "X04",
"repeat": 2
}{
"started_at": "2026-09-21T02:33:25.683+00:00",
"attempts": [
{
"status": 200,
"elapsed_seconds": 0.49807662499370053
}
],
"response": {
"model": "jev-1.13.0",
"answers": {
"acceptance_scope": {
"type": "choice",
"choice": "original_order_only",
"confidence": 1.0,
"probabilities": {
"original_order_only": 1.0,
"change_only": 0.0,
"entire_project": 0.0,
"neither_accepted": 0.0
}
},
"remaining_impact": {
"type": "score",
"score": 1.97,
"confidence": 0.96,
"legend": {
"0": "対象業務は全対象部門で通常どおり完了し、遅延・追加操作・代替手段の利用もない。",
"1": "対象業務は通常の方法で全件完了するが、遅延または追加操作がある。",
"2": "通常の方法で完了できない処理があるが、代替手段を使えば全件完了できる。",
"3": "代替手段を含めても完了できない処理が一部残っている。",
"4": "代替手段を含め、対象業務のすべての処理が完了できない。"
},
"probabilities": {
"0": 0.02,
"1": 0.01,
"2": 0.96,
"3": 0.01,
"4": 0.0
}
},
"operations_handover_complete": {
"type": "noul",
"noul": 0.94
}
},
"usage": {
"input_tokens": 1520,
"output_tokens": 95
}
},
"error": null,
"elapsed_seconds": 0.49813279102090746,
"finished_at": "2026-09-21T02:33:26.181+00:00",
"case_id": "X04",
"repeat": 3
}同じ入力・固定した想定解で比較
総合点 = 100 × Σ(設問の重み × 3回の合格率)÷ 42。単独36問は重み1、複合4問は重み1.5です。各設問が全試行合格なら、単独は約2.38点、複合は約3.57点。未実行・エラー・回答不正を含む場合は未加点として暫定点を表示します。
繰り返し測定は同じ設問への反復であり、独立した新しい設問を増やしたものではありません。欠落・型不正・範囲外は回答不正として表示します。数値の整合性は表示精度による四捨五入を仮定して検証し、合計1の確率分布とScoreが取り得る範囲を確認します。小数2桁より粗い精度には広げません。公式に丸め方式が保証されているという意味ではありません。
料金は取得できた使用量と、入力100万トークンあたり$0.042・出力無料の単価(2026-09-21確認)から算出した概算です。使用量を返さなかった失敗リクエスト等の課金は把握できず、請求額とは一致しない可能性があります。単価の出典
事例と社内規程は架空で、想定解は作問者のラベルです。「採点根拠」はJevが生成した理由ではありません。confidenceは確率分布の集中度を表す補助値で、正しさの保証ではありません。
この40問に対する結果として読み、特定業界全体の性能や実務での自動実行可否には一般化しません。APIエラーと判断の誤りを区別して確認してください。API仕様 / confidenceの仕様
設問:3f5ba0416c69be77858b4014ac7eda1a03da93a671e64cc84c4fff3789ab08fa
想定解:0b6687b9846e40e3e26370000989e2cf25cc95cb8f82f52b9eaeeb039acd200c
API取得時コード:bb6b7cd840501c9985271de4503bf0bc0a61546efc755767d61a427c8a46c8af
集計時コード:bb6b7cd840501c9985271de4503bf0bc0a61546efc755767d61a427c8a46c8af