記事「判定だけのAI、Jevを試した|出番が少ない理由」で使った実測データです。 日報100件はすべて架空で、現場名・日付・出来事は当方が作ったものです。 実在の現場の記録ではありません。
1. 何を測ったか
仮の建設日報100件の備考だけを3つのAIに渡し、人が先に付けた正解と突き合わせました。 正解はAIの答えを見る前に、現場を知る担当者が付けています。
○×の色は、人の正解と合っていれば緑、違っていれば赤です。 黄色の行は、正解を付けた担当者が「迷った」と記録した21件です。
2. 「あり」と見なす確率を変えると
Jevは確率を返すので、いくつ以上を「あり」とするかは使う側が決められます。 3つの項目の合計で、正解の「あり」は50件です。
| 「あり」と見なす確率 | 取りこぼし | 拾いすぎ | |
|---|---|---|---|
| 0.1 以上 | 2 | 133 | |
| 0.2 以上 | 8 | 81 | |
| 0.3 以上 | 11 | 52 | |
| 0.4 以上 | 16 | 44 | |
| 0.5 以上 | 19 | 38 | |
| 0.6 以上 | 21 | 33 | |
| 0.7 以上 | 28 | 29 | |
| 0.8 以上 | 31 | 16 | |
| 0.9 以上 | 34 | 6 | (記事の表はこの設定) |
低くすればほとんど落としませんが、拾いすぎが増えて仕分けの意味がなくなります。
3. Jevが落とした行
記事で「落とした」と書いた行の本文です。確率0.9以上を「あり」とした場合です。 拾えたのは「バールで手を切った」「足を滑らせた」「パイプを落としてもうた」のように、事故そのものが書かれた文でした(関西弁のものも含めて正しく拾っています)。 落としたのはその逆で、足場の傾き・足場板の割れ・安全帯の未着用者がいたことなど、事故になりかけた状態でした。
安全に関わる記述:正解「あり」10件のうち、Jevが落とした6件
| No | 備考(仮) | Jev | Haiku | Opus |
|---|---|---|---|---|
| 5 | 足場の一部が少し傾いていたので、その場で直した。作業は予定どおり。 | 落とした | 拾えた | 拾えた |
| 14 | 下地補修。えらい暑さで午後は休憩を多めに取った。作業量は予定の8割。 | 落とした | 落とした | 落とした |
| 33 | アンカー打ち。既存の配管に当たりそうな箇所が1か所あり、位置をずらした。 | 落とした | 拾えた | 拾えた |
| 36 | 足場の組み替え。安全帯の未着用者がいたので、その場で指導した。 | 落とした | 拾えた | 拾えた |
| 59 | 3階の型枠。足場板が1枚割れていたので交換した。 | 落とした | 拾えた | 拾えた |
| 99 | 土間コン打設。暑さで職人が1人、気分が悪いと言って休憩した。水分を取って回復し、午後は通常どおり。 | 落とした | 拾えた | 拾えた |
遅れ・手戻り:正解「あり」19件のうち、Jevが落とした14件
| No | 備考(仮) | Jev | Haiku | Opus |
|---|---|---|---|---|
| 4 | 型枠の建て込み。搬入待ちで午前中30分ほど手待ちが出た。 | 落とした | 拾えた | 拾えた |
| 8 | コンクリート打設。午後から雨が強くなり、15時で打ち切り。 | 落とした | 拾えた | 拾えた |
| 14 | 下地補修。えらい暑さで午後は休憩を多めに取った。作業量は予定の8割。 | 落とした | 拾えた | 拾えた |
| 20 | 大雨警報が出たため、10時で作業を中止して撤収した。 | 落とした | 拾えた | 拾えた |
| 24 | 2階の型枠。午前中に資材が届かず、開始が1時間遅れた。 | 落とした | 拾えた | 拾えた |
| 28 | 天井高の件、まだ回答をもらえていない。このままだと来週の仕上げに間に合わない。 | 落とした | 拾えた | 拾えた |
| 34 | 回答待ちのため、別の系統の作業に振り替えた。 | 落とした | 落とした | 落とした |
| 43 | バルコニーの防水。下地が想定より傷んでおり、補修範囲が広がりそう。 | 落とした | 拾えた | 拾えた |
| 46 | 変更分の材料を手配。届くのは明後日。 | 落とした | 拾えた | 落とした |
| 52 | 材料待ち。他の作業を先行。 | 落とした | 拾えた | 拾えた |
| 57 | 手直しの依頼が入った。据付の高さが図面と3ミリ違うとのこと。 | 落とした | 拾えた | 拾えた |
| 58 | 材料が届いたので吊りボルトを変更。予定の半分まで進んだ。 | 落とした | 落とした | 落とした |
| 88 | 検査。指摘3件。いずれも軽微で、明日中に直す。 | 落とした | 拾えた | 拾えた |
| 96 | ブロック積み。セパの手配漏れがあり、半日待った。 | 落とした | 拾えた | 拾えた |
客先への連絡:正解「あり」21件のうち、Jevが落とした14件
| No | 備考(仮) | Jev | Haiku | Opus |
|---|---|---|---|---|
| 28 | 天井高の件、まだ回答をもらえていない。このままだと来週の仕上げに間に合わない。 | 落とした | 拾えた | 拾えた |
| 33 | アンカー打ち。既存の配管に当たりそうな箇所が1か所あり、位置をずらした。 | 落とした | 拾えた | 拾えた |
| 34 | 回答待ちのため、別の系統の作業に振り替えた。 | 落とした | 落とした | 落とした |
| 38 | 苦情の件、朝に現場代理人が訪問して説明した。了解をいただいた。 | 落とした | 落とした | 拾えた |
| 50 | 完了検査。指摘なし。 | 落とした | 落とした | 落とした |
| 51 | 引き渡し。立会いで問題なし。 | 落とした | 落とした | 落とした |
| 61 | 手直しの件、現地で確認した。図面の寸法が途中で変わっていたらしい。どちらの責任か整理が要る。 | 落とした | 拾えた | 拾えた |
| 68 | 寸法の件、こちらの控えと先方の図面を突き合わせた。改訂版が届いていなかった。 | 落とした | 拾えた | 拾えた |
| 73 | 絶縁の件、ケーブルの被覆に傷があった。引き直しが要る。工程に影響が出る。 | 落とした | 拾えた | 拾えた |
| 74 | 改訂版の図面をもらった。手直しの費用負担について、先方と話をしないといけない。 | 落とした | 拾えた | 拾えた |
| 82 | 費用の件、先方から連絡待ち。 | 落とした | 落とした | 落とした |
| 90 | 試験完了。引き渡しの日程を調整する。 | 落とした | 拾えた | 落とした |
| 92 | 指摘の是正完了。 | 落とした | 拾えた | 落とした |
| 94 | 外構を継続。近隣から、朝が早すぎると言われた。8時前の搬入は控える。 | 落とした | 拾えた | 拾えた |
4. 100件の全データ
備考の全文、人の正解、3つのAIの判定です。横に長いので、表は左右に動かせます。この表は、直す前(1〜4節と同じ設定)の判定です。
| No | 備考(仮) | 人の正解 | 緊急度 (正解) | 安全 | 遅れ手戻り | 客先連絡 | 緊急度 | 迷ったときのメモ | ||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 安全 | 遅れ | 連絡 | Jev | Haiku | Opus | Jev | Haiku | Opus | Jev | Haiku | Opus | Jev | Haiku | Opus | ||||
| 1 | 基礎の配筋を継続。午後から墨出し。特記事項なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 2 | クロス貼り3部屋完了。明日は建具の調整から入る。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 3 | 分電盤の結線を進めた。ヒヤリハットはなし。 | なし | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 4 | 型枠の建て込み。搬入待ちで午前中30分ほど手待ちが出た。 | なし | あり | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 5 | 足場の一部が少し傾いていたので、その場で直した。作業は予定どおり。 | あり | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | ○ | ○ | 記録だけ | 今日中 | 今日中 | |
| 6 | 施主が現場を見に来られた。特に指摘はなし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 7 | ケーブルラックの取付。脚立から工具を落としたが、下に人はおらず被害なし。 | あり | なし | 不要 | 記録だけ | ○ | ○ | ○ | × | × | × | × | ○ | ○ | 今日中 | 今日中 | 今日中 | |
| 8 | コンクリート打設。午後から雨が強くなり、15時で打ち切り。 | なし | あり | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | ○ | ○ | 今日中 | 今日中 | 今日中 | 予定に対して問題があるのかが不明 |
| 9 | 高圧洗浄。隣の家の洗濯物に水が飛んでしまい、その場で謝罪して取り込んでもらった。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | ○ | ○ | 今週中 | 今日中 | 今日中 | その場で解決しているなら連絡は不要と判断して記録のみにした(判定そのものは変えていない) |
| 10 | 舗装の切削を継続。特になし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 11 | 建具の調整が終わらず、明日に持ち越し。木工事の残りは半日程度。 | なし | あり | 不要 | 今日中 | × | × | × | ○ | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 12 | 照明器具の取付。図面と現場の天井高が違っていて、吊りボルトの長さを変える必要がある。 | なし | なし | 不要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今日中 | 状況によって緊急度が異なる |
| 13 | 養生期間。現場は動かしていない。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 14 | 下地補修。えらい暑さで午後は休憩を多めに取った。作業量は予定の8割。 | あり | あり | 不要 | 今週中 | × | × | × | × | ○ | ○ | × | ○ | × | 今週中 | 今週中 | 今週中 | |
| 15 | 路盤の転圧。ユンボのオペレーターが変わったが問題なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 16 | 施主から、リビングのクロスの色が打合せと違うと言われた。現物を確認してもらう必要あり。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 17 | 幹線の敷設。特記なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 18 | 型枠の解体。バールで手を切った。傷は浅く、絆創膏で処置して作業を続けた。 | あり | なし | 不要 | 今日中 | ○ | ○ | ○ | × | × | × | × | ○ | ○ | 今日中 | 今日中 | 今日中 | 「傷は浅く」その判断が適切かどうか |
| 19 | シーリングの打ち替え。順調。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 20 | 大雨警報が出たため、10時で作業を中止して撤収した。 | なし | あり | 不要 | 今日中 | ○ | ○ | ○ | × | ○ | ○ | × | ○ | ○ | 今日中 | 今日中 | 今日中 | 予定に対して問題があるのかが不明 |
| 21 | アンカーの位置出し。図面どおり。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 22 | クロスの件、施主と打合せ。発注書を確認したところ、こちらの発注ミスだった。貼り替えが必要。 | なし | なし | 不要 | 今日中 | × | × | × | ○ | ○ | ○ | × | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 23 | 盤内の結線を継続。3人で作業、延べ12時間。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 24 | 2階の型枠。午前中に資材が届かず、開始が1時間遅れた。 | なし | あり | 不要 | 今日中 | × | × | × | × | ○ | ○ | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 25 | 塗装の下塗り。風が強く、養生をやり直した。 | なし | あり | 不要 | 今日中 | × | × | × | ○ | ○ | ○ | × | × | × | 記録だけ | 記録だけ | 記録だけ | 予定に対して問題があるのかが不明 |
| 26 | 舗装。昼飯の弁当屋が休みで、みんなコンビニまで歩いた。作業は予定どおり終了。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 27 | レッカーで架台を吊り込み。周囲を立入禁止にして実施。問題なし。 | なし | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 28 | 天井高の件、まだ回答をもらえていない。このままだと来週の仕上げに間に合わない。 | なし | あり | 要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今日中 | |
| 29 | 貼り替え分のクロスを発注。納期は3日後。 | なし | なし | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今週中 | 予定に対して問題があるのかが不明 |
| 30 | 配筋検査。指摘2件、その場で是正した。 | なし | なし | 不要 | 記録だけ | × | × | × | × | ○ | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 31 | 中塗り。特になし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 32 | 区画線の設置。通行止めの時間が予定より延びて、近所の方から苦情を受けた。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | ○ | ○ | ○ | 今日中 | 今日中 | 今日中 | 遅れに繋がる度合いが不明 |
| 33 | アンカー打ち。既存の配管に当たりそうな箇所が1か所あり、位置をずらした。 | あり | なし | 要 | 記録だけ | × | ○ | ○ | × | × | × | × | ○ | ○ | 記録だけ | 今日中 | 今週中 | |
| 34 | 回答待ちのため、別の系統の作業に振り替えた。 | なし | あり | 要 | 今日中 | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | 振り替えたことによる予定に対する影響が不明 |
| 35 | 設備の取付。水漏れはなし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 36 | 足場の組み替え。安全帯の未着用者がいたので、その場で指導した。 | あり | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 記録だけ | 記録だけ | 今日中 | |
| 37 | 上塗り。順調に進んでいる。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 38 | 苦情の件、朝に現場代理人が訪問して説明した。了解をいただいた。 | なし | なし | 要 | 記録だけ | × | × | × | × | × | × | × | × | ○ | 今週中 | 記録だけ | 今日中 | 客先に連絡する程度の内容なのかが不明 |
| 39 | 機械の据付。水平出しに時間がかかり、1日ずれ込む見込み。 | なし | あり | 要 | 今日中 | × | × | × | ○ | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 40 | 天井高の回答が来た。吊りボルトを変更して対応する。追加費用が出る。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | × | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 41 | クロス貼り替え完了。施主に確認いただき、了解を得た。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 42 | 2階の打設。問題なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 43 | バルコニーの防水。下地が想定より傷んでおり、補修範囲が広がりそう。 | なし | あり | 要 | 今日中 | × | × | × | × | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | 予定に対して問題があるのかが不明 |
| 44 | 仕上げ。特記なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 45 | 配線と試運転。異常なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 46 | 変更分の材料を手配。届くのは明後日。 | なし | あり | 不要 | 記録だけ | × | × | × | × | ○ | × | × | ○ | × | 今週中 | 今週中 | 記録だけ | 予定に対して問題があるのかが不明 |
| 47 | クリーニング。明日引き渡し。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 48 | 養生。現場は休み。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 49 | 防水の件、補修範囲を確認した。当初の倍ほどになる。見積を出し直す必要がある。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 50 | 完了検査。指摘なし。 | なし | なし | 要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 51 | 引き渡し。立会いで問題なし。 | なし | なし | 要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 52 | 材料待ち。他の作業を先行。 | なし | あり | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | ○ | × | 記録だけ | 今週中 | 今週中 | 振り替えたことによる予定に対する影響が不明 |
| 53 | 引き渡し完了。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 54 | 3階の配筋。午後から雨、16時で切り上げ。 | なし | なし | 不要 | 記録だけ | × | ○ | × | × | × | × | × | ○ | × | 今週中 | 今日中 | 記録だけ | 予定に対して問題があるのかが不明 |
| 55 | 防水の下地補修に着手。 | なし | なし | 不要 | 記録だけ | × | × | × | × | ○ | × | × | ○ | × | 今週中 | 今週中 | 記録だけ | |
| 56 | 片付けと撤収。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 57 | 手直しの依頼が入った。据付の高さが図面と3ミリ違うとのこと。 | なし | あり | 不要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今日中 | 今日中 | 今日中 | |
| 58 | 材料が届いたので吊りボルトを変更。予定の半分まで進んだ。 | なし | あり | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 59 | 3階の型枠。足場板が1枚割れていたので交換した。 | あり | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 60 | 下地補修を継続。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 61 | 手直しの件、現地で確認した。図面の寸法が途中で変わっていたらしい。どちらの責任か整理が要る。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今日中 | |
| 62 | 打設の段取り。ポンプ車の手配が取れず、明日に延期。 | なし | あり | 不要 | 今日中 | × | × | × | ○ | ○ | ○ | × | ○ | ○ | 今日中 | 今日中 | 今日中 | |
| 63 | 補修完了。明日から防水を再開。 | なし | なし | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 64 | 結線を継続。特になし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 65 | 引き渡し後の手直し依頼。建具の建て付けが悪いとのこと。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | ○ | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 66 | 打設完了。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 67 | 防水の再開。作業中に職人が足を滑らせたが、安全帯で止まった。けがはない。 | あり | なし | 不要 | 記録だけ | ○ | ○ | ○ | × | × | × | × | ○ | ○ | 今日中 | 今日中 | 今日中 | |
| 68 | 寸法の件、こちらの控えと先方の図面を突き合わせた。改訂版が届いていなかった。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今日中 | |
| 69 | 盤の試験。1系統で絶縁抵抗の値が低く、原因を調べている。 | なし | なし | 不要 | 今日中 | × | × | × | × | ○ | × | × | ○ | × | 今週中 | 今日中 | 今日中 | 予定に対して問題があるのかが不明 |
| 70 | 建具の調整に行った。30分ほどで直り、施主にも見てもらった。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 71 | 養生。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 72 | 防水を継続。順調。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 73 | 絶縁の件、ケーブルの被覆に傷があった。引き直しが要る。工程に影響が出る。 | なし | あり | 要 | 今日中 | × | × | × | ○ | ○ | ○ | × | ○ | ○ | 今日中 | 今週中 | 今日中 | |
| 74 | 改訂版の図面をもらった。手直しの費用負担について、先方と話をしないといけない。 | なし | なし | 要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今日中 | |
| 75 | 3階の解体。特になし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 76 | 仕上げに入った。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 77 | ケーブルの引き直し。人手を増やして対応している。 | なし | なし | 不要 | 記録だけ | × | × | × | ○ | ○ | ○ | × | ○ | × | 記録だけ | 今週中 | 今週中 | 予定に対して問題があるのかが不明 |
| 78 | 別件で現場の前を通ったら、区画線が一部消えかけていた。施工は先月分。 | なし | なし | 不要 | 今週中 | × | × | × | × | ○ | ○ | × | ○ | ○ | 今週中 | 今週中 | 今週中 | |
| 79 | 足場の解体を開始。通行人の誘導に人を1人付けた。 | なし | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 80 | 仕上げを継続。あと2日で終わる見込み。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | 予定に対して問題があるのかが不明 |
| 81 | 引き直し完了。再試験で正常値。 | なし | なし | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 82 | 費用の件、先方から連絡待ち。 | なし | なし | 要 | 今日中 | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 83 | 足場の解体中、パイプを落としてもうた。下は立入禁止にしてたから誰もおらんかったけど、あぶないとこやった。 | あり | なし | 不要 | 記録だけ | ○ | ○ | ○ | × | × | × | × | ○ | ○ | 今日中 | 今日中 | 今日中 | |
| 84 | 仕上げ完了。明日検査。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 85 | 残りの結線。特になし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 86 | 区画線の件、施主に報告した。手直しの方向で調整中。 | なし | なし | 不要 | 今週中 | × | × | × | ○ | ○ | ○ | × | × | × | 今週中 | 記録だけ | 今週中 | 手直しの重要性によって対応が変ってくる |
| 87 | 足場の解体完了。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 88 | 検査。指摘3件。いずれも軽微で、明日中に直す。 | なし | あり | 不要 | 記録だけ | × | × | × | × | ○ | ○ | × | × | × | 今週中 | 今日中 | 今週中 | 予定に対して問題があるのかが不明 |
| 89 | 費用は折半で合意。書面を交わす。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | ○ | × | 今週中 | 今週中 | 記録だけ | |
| 90 | 試験完了。引き渡しの日程を調整する。 | なし | なし | 要 | 今週中 | × | × | × | × | × | × | × | ○ | × | 今週中 | 今週中 | 今週中 | |
| 91 | 外構に着手。ブロックの基礎を掘削。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 92 | 指摘の是正完了。 | なし | なし | 要 | 記録だけ | ○ | ○ | × | × | ○ | × | × | ○ | × | 記録だけ | 今週中 | 記録だけ | |
| 93 | 引き渡し。立会いで異常なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 94 | 外構を継続。近隣から、朝が早すぎると言われた。8時前の搬入は控える。 | なし | なし | 要 | 記録だけ | × | × | × | × | × | × | × | ○ | ○ | 今週中 | 今週中 | 今日中 | 8時前の搬入を控えることによって予定に影響するのかが不明 |
| 95 | 足場の解体。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 96 | ブロック積み。セパの手配漏れがあり、半日待った。 | なし | あり | 不要 | 今日中 | × | × | × | × | ○ | ○ | × | ○ | × | 今週中 | 今週中 | 今週中 | |
| 97 | 撤収完了。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | |
| 98 | ブロック積みを継続。連絡しないわけにはいかないので、朝の搬入時間の件は所長に伝えた。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 今週中 | 記録だけ | 記録だけ | 「連絡しないわけにはいかない」の理由が不明 |
| 99 | 土間コン打設。暑さで職人が1人、気分が悪いと言って休憩した。水分を取って回復し、午後は通常どおり。 | あり | なし | 不要 | 記録だけ | × | ○ | ○ | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
| 100 | 外構の仕上げ。特記事項なし。 | なし | なし | 不要 | 記録だけ | × | × | × | × | × | × | × | × | × | 記録だけ | 記録だけ | 記録だけ | |
5. 渡し方を直すとどう変わったか
記事「落とした理由と、直したときの代償」で書いた、渡し方の直しの中身です。 安全の質問に、客先連絡のためだけの条件文を混ぜていたと気づき、外して測り直しました。
直したことで新しく拾えるようになったのは、安全帯の未着用・足場板の割れ・暑さで気分が悪くなった行でした。関係のない文を外しただけで、確率が0.37から0.87まで上がった行もあります。 まだ落ちているのは、足場が傾いたがその場で直した、配管に当たりそうな箇所があったが位置をずらした、暑さで休憩を多めに取ったの3件です。どれも対処済みで、実害が出ていない記述でした。
一方で、Jevのほうが人に近い場面もありました。「その場で解決した」と書かれた5件で、当方の担当者は全部「連絡は不要」と判断しています。Jevも5件とも「不要」で一致しました。生成AIは4件で「連絡が要る」と答えています。
安全・遅れ手戻りの質問にも、客先連絡のためだけの条件文(6項目)を渡していました。客先連絡の質問にだけ渡す形に直し、同じ100件をもう一度判定しました。しきい値は、直す前が0.9以上、直した後が0.8以上です(どちらも、その設定での誤りがいちばん少ない値)。緊急度は段階評価なのでしきい値はありません。
| 項目 | モデル | 直す前・拾えた数/正解のあり | 直した後・拾えた数/正解のあり |
|---|---|---|---|
| 安全 | Jev | 4/10 | 7/10 |
| 安全 | Haiku | 9/10 | 8/10 |
| 安全 | Opus | 9/10 | 9/10 |
| 遅れ手戻り | Jev | 5/19 | 7/19 |
| 遅れ手戻り | Haiku | 17/19 | 15/19 |
| 遅れ手戻り | Opus | 16/19 | 18/19 |
| 客先連絡 | Jev | 7/21 | 6/21 |
| 客先連絡 | Haiku | 16/21 | 17/21 |
| 客先連絡 | Opus | 15/21 | 12/21 |
緊急度への影響
| モデル | 直す前・一致/今日中を拾えた | 直した後・一致/今日中を拾えた |
|---|---|---|
| Jev | 69/100・14/25 | 46/100・4/25 |
| Haiku | 63/100・6/25 | 66/100・2/25 |
| Opus | 81/100・20/25 | 74/100・15/25 |
直した後、新しく拾えるようになった安全の記述(3件)
| No | 備考(仮) | 直す前の確率 | 直した後の確率 |
|---|---|---|---|
| 36 | 足場の組み替え。安全帯の未着用者がいたので、その場で指導した。 | 0.66 | 0.84 |
| 59 | 3階の型枠。足場板が1枚割れていたので交換した。 | 0.37 | 0.81 |
| 99 | 土間コン打設。暑さで職人が1人、気分が悪いと言って休憩した。水分を取って回復し、午後は通常どおり。 | 0.67 | 0.86 |
直した後、拾えなくなった「今日中」の記述(11件)
| No | 備考(仮) | 直す前のスコア | 直した後のスコア |
|---|---|---|---|
| 11 | 建具の調整が終わらず、明日に持ち越し。木工事の残りは半日程度。 | 1.87 | 1.36 |
| 18 | 型枠の解体。バールで手を切った。傷は浅く、絆創膏で処置して作業を続けた。 | 1.80 | 0.99 |
| 20 | 大雨警報が出たため、10時で作業を中止して撤収した。 | 1.90 | 1.12 |
| 22 | クロスの件、施主と打合せ。発注書を確認したところ、こちらの発注ミスだった。貼り替えが必要。 | 1.53 | 1.09 |
| 32 | 区画線の設置。通行止めの時間が予定より延びて、近所の方から苦情を受けた。 | 1.95 | 1.43 |
| 39 | 機械の据付。水平出しに時間がかかり、1日ずれ込む見込み。 | 1.98 | 1.36 |
| 40 | 天井高の回答が来た。吊りボルトを変更して対応する。追加費用が出る。 | 1.79 | 0.92 |
| 43 | バルコニーの防水。下地が想定より傷んでおり、補修範囲が広がりそう。 | 1.77 | 0.94 |
| 49 | 防水の件、補修範囲を確認した。当初の倍ほどになる。見積を出し直す必要がある。 | 1.66 | 1.22 |
| 57 | 手直しの依頼が入った。据付の高さが図面と3ミリ違うとのこと。 | 1.56 | 1.31 |
| 65 | 引き渡し後の手直し依頼。建具の建て付けが悪いとのこと。 | 1.56 | 0.89 |
緊急度の悪化は日をまたいだせいではありません。同じ日に、渡し方だけを変えて確かめました。客先連絡の6条件を含めて緊急度を測ると69件、外すと46件です。何度測り直しても同じでした。
作成=保存済みの判定結果から生成(AIは呼んでいません)。 数え方は記事の採点と同じです。
