Helpy AI Chatを導入したものの、いざユーザーが質問すると「あれ、この回答微妙だな…」と思ったことはありませんか。たとえば料金を聞いたらページ全体のテキストをべた書きしたような返答が来たり、もっと具体的に聞きたいのに「お問い合わせください」で終わらせられたり。
これはAIチャットボット自体の不具合ではありません。AIチャットボットの回答精度は、どう設定するかでほぼすべてが決まります。同じヘルピーでも、正しく設定したサイトとそうでないサイトでは、回答の質が異なることがあります。
この記事では、Helpy AI Chatの実際の機能をひとつずつ見ながら、回答精度を確実に上げる方法を具体的に解説します。ヘルピーのダッシュボード画面をイメージしながら読んでいただけると、読み終わったあとすぐに設定に取りかかれます。
1. FAQを賢く使う：自動生成と手動追加の組み合わせ
Helpyにはスクレイピング時にFAQを自動生成する機能があります。サイトのコンテンツを読み込ませると、AIが5〜10個のよくある質問と回答を勝手に作ってくれる仕組みです。初期設定の時点できちんと動いていれば、最初からそれなりの精度が出ます。
ただし、自動生成されたFAQをそのまま放置するのはもったいないです。実際のユーザーの声を反映させないと、自動生成だけでは網羅できない質問が必ず出てきます。
具体的にやるべきことは、Helpyのダッシュボードで「ナレッジ」ページを開き、FAQセクションに手動で追加することです。特に優先すべきは「問い合わせが一番多い質問」です。過去のメール問い合わせや電話ログを確認して、上位5件をヘルピーのFAQに入れてみましょう。これだけで回答精度は劇的に変わります。
もう一点、FAQの回答は簡潔すぎず詳細すぎずが理想です。「はい、できます」としか書かないとユーザーがもう一步踏み込めないので、「はい、〇〇のプランであれば可能です。設定方法は〇〇の手順で行えます」という程度の情報量がちょうどいいラインです。
2. カスタムインストラクションでキャラを決める
Helpyの「ナレッジ」ページには「カスタムインストラクション」という free-text の入力欄があります。これはチャットボットの性格やルールを直接指示するためのもので、実は回答精度にめちゃくちゃ効く機能です。
なぜこれが重要かというと、Helpyのプロンプトシステムではカスタムインストラクションが最も高い優先度で適用されるからです。スクレイピングされた情報やFAQよりも先に、このインストラクションが参照されます。つまり「どんな回答をしてほしいか」をここに書けば、それが最優先で反映されるのです。
具体的に何を書くべきか。以下のような指示を書くと効果的です。「当社のサービスについて質問がある場合は、必ずStarterプランとProプランの両方を比較して説明してください」「料金に関する質問には必ず具体的な金額を含めて回答してください」「わからない回答がある場合は『お問い合わせください』ではなく、まず当社のサイト内の該当ページへのリンクを案内してください」
このカスタムインストラクションを一度しっかり書けば、その後は基本的に触る必要がありません。サイトの情報が変わったときだけ更新すればOKです。
3. ウィジェットの提案質問でユーザーの意図を絞り込む
Helpyのチャットボットには「提案チップ」という機能があります。チャットを開いたときに回答の下に表示される、クリックできる質問ボタンのことです。ここに適切な質問を設定すると、ユーザーが曖昧な質問をする前に明確な質問を投げさせることができ、回答精度が自然と上がります。
なぜこれが効くのか。AIチャットボットが最も苦手なのは、ユーザーが「えーと…なんかよくわからないけど…」のようにボケた質問をしたときです。曖昧な入力に対してRAGが適切な情報を見つけられず、的外れな回答になる原因はそこにあります。
提案チップには、サイトを訪れたユーザーが最も知りたいであろう具体的な質問を3〜5個入れましょう。「Helpyの料金はいくらですか」「導入にかかる時間は？」「無料トライアルはありますか」など、具体的で明確な質問がベストです。Helpyのダッシュボードの「カスタマイズ」ページから、ドラッグ＆ドロップで順番も変更できます。
4. 分析ダッシュボードで答えられない質問を捕まえる
Helpyのダッシュボードには充実した分析機能があります。質問数の推移だけでなく、よくある質問ランキング、類似度の分布、フィードバックの集計まで、ユーザーが実際に何を知りたがっているかが見えるようになっています。
ここで特に注目すべきは「類似度分布」のチャートです。Helpyは各回答に対して検索精度のスコアを出し、低い回答は明確に分かります。スコアが低い質問が頻繁に来ているということは、その質問に対する情報がサイトに足りないということです。
具体的な改善サイクルとしては、まず週に一度ダッシュボードを開き、フィードバックタブの「低評価」を確認します。ユーザーが👎を付けた質問と回答を確認し、なぜ不満がったのかを考えます。回答が間違っていた場合はFAQを修正し、回答すべき情報がそもそもサイトになかった場合は、サイトにページを追加するかFAQに直接回答を書き足します。
このサイクルを回すだけで、1ヶ月後にはほぼすべての質問に対して適切な回答ができるようになります。Helpyは分析データを蓄積してくれるので、設定は一度きりではなく動的に改善していくことが可能なのです。
5. ガードレールで「回答してはいけないこと」を定義する
精度を上げるためのもう一つの重要な視点は、「何を答えないか」を明確にすることです。Helpyにはガードレール機能があり、ダッシュボードの「カスタマイズ」ページから自由にテキストで指示を追加できます。
これはカスタムインストラクションとは別のフィールドで、チャットボットの回答ルールを定義するためのものです。たとえば「競合他社について言及しない」「価格の割引や交渉についての質問には回答しない」「医療や法的なアドバイスは一切行わない」といったルールを書きます。
ガードレールを設定しないと、ユーザーが意図しない範囲の質問にも答えてしまい、不適切な内容が返るリスクがあります。特にBtoBサービスや専門性の高いサイトでは、これは必須の設定です。「回答してはいけないトピック」を具体的に書き出すことで、チャットボットの回答範囲が明確になり、結果的に回答精度も上がります。
6. テストチャットで本番前に品質チェックする
Helpyにはダッシュボード内の「テストチャット」機能があります。これは本番のチャットボットと同じAIが動き、同じナレッジを参照しますが、解析データには一切カウントされないテスト用のチャットです。設定変更のたびにこのテストチャットで実際に質問して挙動を確認することが、回答精度を維持する上で非常に重要です。
やるべきチェックはシンプルです。まず自分のサイトについて「〇〇はいくらですか？」のように具体的な質問を投げて、正確な金額が返ってくるか確認します。次にサイトに書いていないような質問を投げて、「お問い合わせください」と正しく案内されるか確認します。最後に、ガードレールで禁止したトピックについて質問して、適切に断られているか確認します。
テストチャットは1分間に5回までというレートリミットが設定されていますが、設定変更ごとに数回試す分には十分です。本番にデプロイする前に必ずここを通るようにすれば、ユーザーに変な回答を送ってしまう事故を防げます。
7. スクレイピングの範囲を正しく設定する
Helpyはサイトを自動でスクレイピングして情報を学習しますが、対象ページの選定はユーザー自身が行う必要があります。デフォルトでは同一ドメイン内のページが最大30ページ、Starterプランなら300ページまで対象になりますが、全てのページが等しく重要というわけではありません。
回答精度を上げたいなら、スクレイピング対象のページを選ぶのが一番コスパがいいアプローチです。Helpyのダッシュボードでサイト設定を開き、実際にユーザーから質問がくるようなページを優先的に追加しましょう。具体的には、商品やサービスの説明ページ、料金ページ、FAQページ、お問い合わせページ、導入ガイドのページ。これらが網羅されていれば、ほとんどの質問に対応できるようになります。
逆に、ブログのトップページや会社概要の短いページなど、具体的な情報が少ないページは優先度が低いです。Helpyは1ページにつき最大8,000文字のテキストを学習し、2,000文字単位でチャンクに分割してベクトル検索にかけます。つまり、情報の密度が高いページを多くの入れることが、回答精度の鍵になります。
まとめ：設定は一度きりじゃない
AIチャットボットの回答精度は、設定したその瞬間で決まるものではありません。Helpyのダッシュボードで分析を確認し、ユーザーの声を反映させ、FAQやカスタムインストラクションを少しずつブラッシュアップしていく。そのサイクルを回すことが、最も効果的な精度アップの方法です。
Helpyはこのサイクルを回しやすい設計になっています。FAQの自動生成、テストチャット、分析ダッシュボード、フィードバック機能、すべてが同じダッシュボードの中に揃っているからです。まずはこの記事で紹介した7つのポイントを、今日ダッシュボードを開いて試してみてください。最初の1週間で劇的な違いを実感できるはずです。