♪♪ きほん｜「動いた！」の次は、仕事に役立つかを確認する
「返信案が表示できた。これで、商品として紹介できるかな？」
ほんねくんは、GASで作った返信支援アプリを見つめています。第9話では、問い合わせ対応を作業ごとに分けました。次は、下書き支援を使うと、その仕事がどう変わるかを確かめる番です。
架空の研修会社「まなびサポート」の担当者は言いました。
「文章が出るのは分かったけれど、確認や修正を含めて楽になるか、試してみたいですね」
「そうか。作った僕の感想だけでは、まだ分からないんだ」 😊
※会社・会話・問い合わせは学習用の架空の設定です。記事内の数値例も計算説明用で、導入実績ではありません。
結論：試す前に、何をもって「役立った」とするか決めよう
今回の目的は、返信文の見栄えを競うことではありません。担当者が必要な品質の返信を、扱いやすい方法で準備できるかを確かめます。
見るのは、①確認・修正まで含む時間、②誤りや抜け、③使う人の負担です。この三つを、試す前に記録シートへ書いておきます。
今日は新しい機能を追加しません。第8話のGASアプリが動く人はそれを使い、まだAI接続をしていない人は、問い合わせと確認基準の準備まで進めれば大丈夫です。
1．画面の練習と、AIの評価を分ける
第8話のアプリには、用意済みの返信を表示する「画面の練習」と、実際にAIへ依頼して返信案を作る「AI接続」の二つの動作があります。旧表記はそれぞれDEMO、LIVEですが、このアプリ内で決めた名前です。
画面の練習で分かるのは、例文を選べるか、結果を読めるか、文章を編集できるか。AIの回答品質は評価できません。 固定の返信が正しくても、実際のAIが同じように答えるとは限らないためです。
AIの評価をする場合は、画面に「AI接続」と分かる表示があることを確認します。設定・APIの利用条件を確かめたうえで、架空の問い合わせを使って試します。
2．まず3種類の問い合わせを用意する
最初から大量の問題を集める必要はありません。まずは、性質の異なる3種類を用意しましょう。使う研修案内は、途中で変えずにそろえます。
第8話の設定は「オンライン・90分」「料金と開催日は未定」「個別訪問と録画提供には対応しない」でした。この案内を根拠に、次のような問い合わせを使います。
| 種類と問い合わせ例 | 確かめる内容 |
|---|---|
| A：開催形式と所要時間は？ | オンライン・90分と答える |
| B：次回の日程と料金は？ | 未定と伝え、社内の確認事項を残す |
| C：訪問して録画も提供してほしい | 対応できると約束しない |
この表が、結果を見るときの物差しになります。完全に同じ文章で答える必要はありません。必要な情報を含み、案内にない事実を足さず、適切な対応になっているかを見ます。
慣れたら、質問が一つの文章に複数あるケース、条件が不足したケースなども追加します。最初の3種類に合格しただけで、すべての問い合わせに使えるとは判断しません。
3．計るのは、人が確認を終えるまでの時間
AIが文章を作るのに何秒かかったかだけでは、仕事の効果は分かりません。担当者が使える返信に仕上げるまでを計ります。
開始は「担当者が問い合わせを読み始めたとき」。終了は「必要な確認・修正を終え、この練習で送る文章を確定したとき」にします。実際のメール送信は不要です。
手作業では、案内の確認、文章作成、見直しを含めます。AIを使う場合は、入力の準備、生成待ち、内容の照合、修正、再生成やエラー後の手作業も含めます。
「うまく生成できた一回」だけを選ばないようにしましょう。失敗した試行も記録すると、普段使うときの負担に近づきます。
例えば、手作業8分、AI使用6分なら、その練習では2分短縮です。これは説明用の数値です。AIの最初の出力に誤りがあれば、その内容も併記します。速さだけで合格にはしません。
4．最初の出力と、人が直した後を両方見る
人が修正して正しくなった場合も、AIの最初の誤りを消してしまうと、何が危なかったか分からなくなります。
結果は、AIの元の返信案・見つかった問題・修正後の文章をひと組で残しましょう。実データを扱う場合は保存してよい範囲の確認が必要ですが、今回は架空のデータで練習します。
| 確認する点 | 問題の例 |
|---|---|
| 事実の正しさ | 未定の料金を5,000円と書く |
| 質問への対応 | 開催形式だけ答え、所要時間を落とす |
| 約束する範囲 | 非対応の録画を提供すると書く |
| 確認事項 | 未定の日程を、確認不要として扱う |
「案内にない金額・日程を確定して伝える」「未対応のサービスを約束する」は、この練習では重大な問題として扱います。見つかったら、その条件で使うことを止め、原因と改善案を整理します。
第8話の確認フラグがfalseでも、送信許可ではありません。JSONの形式が正しいか、人が内容を確認したか、顧客への約束が適切かは、それぞれ確かめます。
5．比較の条件をそろえ、感想も具体的に聞く
まずA〜Cの例文で操作に慣れ、その後に比較を始めます。毎回同じ問い合わせを扱うと内容を覚えて速くなるため、練習時間と比較の記録は分けます。
最初の小さな比較では、同じ種類・近い難しさの別の問い合わせを用意し、手作業とAI使用に振り分けます。例えば、Aに近い二つの質問を組にし、一方を手作業、もう一方をAI使用にします。B・Cも同様にします。
作業順も、ずっとAI使用が後にならないよう、組ごとに入れ替えます。それでも問い合わせの難しさや慣れの影響は残ります。少数の比較は、改善点を探すための予備的な確認と考えましょう。
担当者には「便利でしたか？」だけでなく、次のように聞きます。
- どの部分の確認に、一番手間がかかりましたか？
- 最初から書いた方が早いと感じた箇所はありますか？
- この返信案を使う前に、何を確認したくなりましたか？
「使ってもらう人の言葉を聞くと、直す場所が具体的になるね」
6．結果から、次の一手を一つ選ぶ
試す前に、判断の方針も書きます。今回なら「重大な問題が出たら原因を直す」「時間と負担が改善し、品質も保てたら対象を少し広げて再確認する」という方針です。
文章は自然でも修正が多いなら、指示や案内情報を見直します。入力の準備に時間がかかるなら、入力項目や画面の使い方を見直します。案内探しが一番大変なら、先に資料を整理する方が役立つかもしれません。
一度にモデル・指示・資料・画面をすべて変えると、何が効いたか分かりにくくなります。まず一つを変え、同じ確認用のケースで見直しましょう。その後、まだ使っていない問い合わせでも試し、練習問題だけに合わせていないか確かめます。
今回の試用で分かるのは、その条件での時間・品質・使いやすさです。お金を払ってもらえるか、継続して使われるかは、顧客との別の確認が必要です。
今日の実践：検証シートを1枚埋めよう
同梱の「小さな検証シート」に、助けたい作業、使う案内、問い合わせ、確認基準、計測の開始と終了を書きます。AI未接続でも、ここまでは準備できます。
AI接続済みの人は、まず架空の問い合わせ一件で、時間・最初の出力の問題・修正・使いにくかった箇所を記録してみましょう。一件の記録は測り方の練習です。効果の結論を出す前に、条件をそろえた比較へ進みます。
今日の成果物は「すごかった」という感想から一歩進んだ、次の改善を決められる記録です。
🍀 今日の理解
AIの効果は、確認・修正まで含む時間、品質、使う人の負担で確かめる。小さく試し、記録から改善する。
🔍 ほんねチェック
期待した結果が出なくても、検証は無駄ではありません。「この条件では役立ちにくい」と分かれば、顧客に提供する前に直す場所を見つけられます。うまくいかなかった記録も残しましょう。
📝 会社づくりメモ⑩
- 何をもって「役立った」と判断する？
- 手作業とAI使用で、どこからどこまで計る？
- 見逃せない誤りと、中止する条件は？
- 次に一つだけ直すなら、どこ？
次回予告：その困りごと、本当にお客さまにもある？
試作の結果をもとに、使う人の実際の経験を聞き、商品仮説を見直します。
「ほんねくんのAI起業ラボ」は全24話。原則1日1話、休みを挟みながら、AI・ITの理解から小さな事業づくりまで進めます。
前回：第9話「自動化の前に、仕事を分解してみた」