ThousandEyesでAIアシスタントが利用可能に

2025/06/10時点のAnnouncing the AI Assistant Limited Previewで限定プレビューとして公開されていたAIアシスタント機能ですが、2025/07/28のThe Cisco AI Assistant Is Now Integrated into ThousandEyesというアナウンスと共に一般公開されました。

チェンジログの記載¶

チェンジログには以下のように記載されていました。

原文¶

The Cisco AI Assistant Is Now Integrated into ThousandEyes¶

The Cisco AI assistant is now available within the ThousandEyes platform for all customers. This release enhances user troubleshooting and provides context through AI-driven insights.

Key features included in the general availability include:

Troubleshooting Application Experience¶

The assistant can help troubleshoot the performance and experience of specific applications by using events, alerts, and Internet Insights outage data (if purchased). It provides clear summaries of the issue type, start time, duration (if applicable), and the number of affected agents and tests in your account group. This will help you quickly pinpoint and better understand the root cause of performance issues, leading to faster resolution and reduced downtime.

You can ask the AI Assistant questions like:

"Were there any alerts triggered for [application name] today?"

"How many agents are affected by the latest issue with [application name]?"

"What locations are experiencing problems with [application name]?"

Documentation Analysis Skill¶

The assistant allows users to ask natural-language questions about the ThousandEyes product documentation and API documentation, as well as public blogs. It streamlines access to technical information, providing quick answers to product questions along with references and hyperlinks to supporting documentation for deeper exploration.

You can ask the AI Assistant questions like:

"What are the supported metrics for Cloud Agent tests?"

"How can I create a new test using the ThousandEyes API?"

"What is the default interval for HTTP server tests?"

Querying the API for Network and Application Synthetics Tests¶

The AI Assistant can query the APIs for network and application synthetics tests.

You can ask the AI Assistant questions like:

"What tests have I set up for Salesforce?"

"Which locations am I monitoring Microsoft Teams from?"

For more information, including the opt-out process, see the Cisco AI Assistant section of the documentation.

日本語訳¶

Cisco AI AssistantがThousandEyesに統合されました¶

Cisco AI AssistantがThousandEyesプラットフォームですべてのお客様にご利用いただけるようになりました。このリリースでは、ユーザーのトラブルシューティングを強化し、AIによるインサイトを通じてコンテキストを提供します。

一般提供に含まれる主な機能は次のとおりです。

アプリケーションエクスペリエンスのトラブルシューティング¶

アシスタントは、イベント、アラート、Internet Insightsの障害データ（ご購入いただいた場合）を活用して、特定のアプリケーションのパフォーマンスとエクスペリエンスのトラブルシューティングを支援します。問題の種類、開始時刻、期間（該当する場合）、アカウントグループ内で影響を受けたエージェントとテストの数など、明確な概要を提供します。これにより、パフォーマンスの問題の根本原因を迅速に特定し、より深く理解できるため、迅速な解決とダウンタイムの削減につながります。

AI アシスタントに次のような質問をすることができます。

「今日、[アプリケーション名] に対してアラートはトリガーされましたか？」

「[アプリケーション名] の最新の問題の影響を受けるエージェントは何人ですか？」

「[アプリケーション名] で問題が発生している場所はどこですか？」

ドキュメント分析スキル¶

このアシスタントを使用すると、ThousandEyesの製品ドキュメント、APIドキュメント、公開ブログについて自然言語で質問できます。技術情報へのアクセスを効率化し、製品に関する質問への迅速な回答に加え、より詳細な情報を得るための参考資料やハイパーリンクも提供します。

AI アシスタントに次のような質問をすることができます。

「Cloud Agent テストでサポートされているメトリックは何ですか?」

「ThousandEyes API を使用して新しいテストを作成するにはどうすればよいですか？」

「HTTP サーバーテストのデフォルトの間隔はどれくらいですか?」

ネットワークおよびアプリケーションの合成テストの API クエリ¶

AI アシスタントは、ネットワークおよびアプリケーションの合成テストの API をクエリできます。

AI アシスタントに次のような質問をすることができます。

「Salesforce にどのようなテストを設定しましたか?」

「Microsoft Teams をどの場所から監視していますか?」

オプトアウトのプロセスを含む詳細については、ドキュメントのCisco AI Assistantセクションを参照してください。

ログイン時に表示されるメッセージ¶

TEのWeb管理画面へログインすると画面上部にAIアシスタントの呼び出しボタンが表示されます。AIアシスタントが一般リリースされてからはじめてログインした場合のみ、メッセージも表示されます。

メッセージ中の「Learn more」をクリックすると以下のように表示されました。

AIアシスタント初回起動時に表示されるメッセージ¶

画面上部の青いAIアシスタントボタンをクリックすると初回起動時のみ、以下のように表示されました。

AIアシスタントの表示方法¶

AIアシスタントの表示方法は以下の4種類あります。

Docked
Floating Window
Full screen
New browser tab

各々、以下のような表示になります。

Docked¶

画面の右側に結合されて表示されます。

Floating Window¶

ブラウザの表示画面内で、更に小さなウインドウとして表示されます。

Full screen¶

ブラウザの表示画面内で、最大化されます。

New browser tab¶

AIアシスタントがブラウザの別タブとして表示されました。

AIアシスタントに質問してみる¶

実際にAIアシスタントへ質問してみました。敢えて日本語で質問しています。ただ、「macOS+Chrome」環境ではWebブラウザ上で日本語入力を行った際、なぜかAIアシスタントの場合だけ、漢字変換を確定する為にEnterを押した際にそのままメッセージがAIアシスタントへ送信されることがありました。その為、「テキストエディタ上でAIアシスタントへ質問したいメッセージを作文し、それをChrome上に貼り付ける」方式としました。

ドキュメントに関する質問¶

おそらくドキュメント検索になるであろう「デフォルトのHTTPサーバテスト実行間隔を教えてください。」という質問をしてみました。

実際のテスト設定に関する質問¶

実際に「sample_http_test」というテストが設定された環境で、このテスト設定の内容について「sample_http_testの実行間隔を教えてください。」と質問してみました。結果、正しい回答が返ってきました。

ThousandEyesと関係の無い質問¶

ThousandEyesと関係の無い「日本の総理大臣は？」という質問をしてみました。すると「この内容はCisco ThousandEyesの範囲外となります。」と回答を断られてしまいました。

後述しますがCisco ThousandEyes Approach to GenAIのP.4の5番目には生成AIがデータ処理した後工程として以下の記載があります。生成された回答がThousandEyesの関係しない場合、この辺りの工程で除外されているのかもしれません。

Postprocessing: The response from the GenAI model undergoes postprocessing to confirm adherence to Cisco’s Framework. This may include responsible GenAI checks and content filtering (e.g., using services like Amazon Guardrails, etc.).

設定変更を依頼すると…？¶

「sample_http_testの実行間隔を5分に設定してください。」のように設定変更を依頼してみます。すると設定手順を案内されるものの、設定変更は実施してくれませんでした。

AIアシスタントとユニット消費は関係があるのか？¶

AIアシスタントを利用した際、ライセンスユニットを消費するのか？に関しては記載されたドキュメントを見つけることが出来ませんでした。AIアシスタントに質問してみても適切な回答は得られませんでした。

AIアシスタントを無効化する¶

Opting Out of the Cisco AI Assistantに記載されていますが、AIアシスタントを無効化することも出来ます。Manage → Account Settings → Organization Settings → AI Featuresがデフォルトではチェックされています。

このチェックを外すと「Your browser will reload on save to apply changes.」と表示されます。Save Changesをクリックします。

すると画面上部からAIアシスタントのボタンが表示されなくなりました。この変更を行うには組織の管理者権限(Organization Administrators)を持っている必要があります。

「ThousandEyesの生成AIに対するアプローチ」ドキュメント¶

Manage → Account Settings → Organization Settings → AI Featuresから「iマーク」にマウスカーソルをあわせるとCisco ThousandEyes Approach to GenAIへのリンクが表示されます。このドキュメントにはThousandEyesの生成AIに対するアプローチについて記載されています。

以下はポイントをDeepLで翻訳したものです。

P.3 生成AIの機能と性能(GenAI Capabilities and Functionality)¶

本日、ThousandEyesでは、GenAI技術を組み込むことで、当社の核心的なミッションである包括的なデジタル体験監視とインターネットインテリジェンスの提供を強化しています。現在のGenAI機能とその用途は以下に説明されています：

イベント要約¶

自然言語による説明と要約：ユーザーは、複雑なイベント、アラート、またはパフォーマンスデータについて、平易な言語で明確かつ簡潔な要約をリクエストできます。

Cisco AI AssistantのThousandEyesへの統合¶

トラブルシューティング支援：ユーザーは、(i) ネットワークとアプリケーションのパフォーマンス問題の根本原因を特定し、(ii) ThousandEyesデータ分析に基づく診断ワークフローのガイダンスを受け、または(iii) さまざまなデータポイント（アラート、イベント、テスト結果など）を関連付けて問題を特定できます。

強化された洞察：ユーザーは、複雑なネットワークとアプリケーションのパフォーマンスデータをより効率的に理解するための支援をリクエストできます。

質問の回答：ユーザーは、ThousandEyesの製品機能、ベストプラクティス、または特定のデータインサイトに関する質問に対し、プラットフォームデータとドキュメントを参照して回答を受けることができます。

ThousandEyes内で提供されるGenAIの機能と機能は、具体的な実装に応じて異なり、該当するドキュメントで詳細に説明されています。ThousandEyesのGenAI機能は、人間の専門知識を補完し、実行可能な洞察を提供するように設計されています。

P.4 生成AIが情報を処理する方法(How Our GenAI Processes Information)¶

プロンプト/入力: GenAI機能はプロンプトを受け取ります。これは、インターフェースに入力された質問、イベントの要約を依頼するリクエスト、またはGenAI駆動の分析ツールとのインタラクションなどです。

前処理とグラウンドング: 次に、システムはプロンプトを前処理します。ここでの重要なステップはグラウンディングで、GenAIは認証されたユーザーがアクセス権限を持つThousandEyesアカウントから関連する文脈情報を取得し、プロンプトの特定性を向上させます（「グラウンディングデータ」）。グラウンディングデータは一般的に以下の種類のデータ/コンテンツから構成されます：(1) ThousandEyesアカウントからの特定データ（アラート、イベント、ビュー、テストデータ、メタデータなど）、 (2) ThousandEyes/Ciscoの知識リソース（例：公開ドキュメント、技術ブログ、APIドキュメント）、および/または(3) ThousandEyesプラットフォームと組み合わせて他のCisco製品/サービスを使用している場合、プロンプト時に文脈に応じた応答を提供するために、あなたのCiscoアカウントからの特定のデータ。Grounding Dataは、GenAI機能があなたの特定のタスクとThousandEyesに適切で実行可能な応答を生成できるようにします。

GenAIモデルへの送信：処理されたプロンプトと取得したGrounding Dataは、基盤となるGenAIモデル（例：Anthropic、Meta、Azure OpenAIからライセンスされたモデル、またはCiscoの独自AI技術）に送信されます。

GenAIモデル処理：GenAIモデルは、処理済みのプロンプトとGrounding Dataを処理して応答を生成します。

後処理：GenAIモデルからの応答は、Ciscoのフレームワークへの準拠を確認するために後処理されます。これには、責任あるGenAIチェックやコンテンツフィルタリング（例：Amazon Guardrailsなどのサービスを使用）が含まれる場合があります。

応答の返却：GenAI機能はユーザーに応答を返却します（例：自然言語の説明、要約、トラブルシューティング手順、またはデータインサイト）。

ユーザーフィードバックの収集（オプション）：ユーザーは、GenAIが生成した応答に対してフィードバックを提供できる場合があります（例：いいね/悪いね、テキストコメント）。これらは、Cisco ThousandEyes機能や他のCisco製品の改善に活用される可能性があります。

ユーザーレビュー：ユーザーは常にGenAIが生成した出力を確認する必要があります。GenAIは正確性を追求していますが、応答には誤りが含まれる可能性があります。

P.5 基盤となるモデルとサービス(Underlying Models and Services)¶

ThousandEyesのGenAI機能では、Anthropic（例：Claudeシリーズ）、Meta（例：Llamaシリーズ）、Azure OpenAI（例：GPTシリーズ）などのプロバイダーからライセンスを取得したモデル、またはCiscoの自社開発GenAI技術が使用される場合があります。使用される具体的なモデルは機能によって異なり、機能の改善や拡張に伴い、時間経過とともに変更される場合があります。

「Cisco ThousandEyes Approach to GenAI」の全文¶

以下はCisco ThousandEyes Approach to GenAIの内容をMarkItDownでMarkdownへ変換したものです。

Page 2 of 7¶

Feature Overview _____________ 3

GenAI Capabilities and Functionality _________ 3

Event Summarization ______________ 3

Contents

Cisco AI Assistant integration into ThousandEyes ___________ 3

How Our GenAI Works _______________ 4

How Our GenAI Processes Information _____________ 4

Underlying Models and Services ____________ 4

GenAI Limitations and Your Responsibilities __________ 5

How We Continuously Monitor Our GenAI Capabilities _______ 5

Customer Transparency and Control __________ 6

Updates, Versioning and Governance _________ 6

Contact Information and Further Resources _________ 7

Page 3 of 7¶

At Cisco, we believe that generative artificial intelligence (“GenAI”) can be leveraged to power an inclusive future for all. We also recognize that by applying this technology, we have a responsibility to mitigate potential harm. That is why Cisco adheres to our Responsible AI Framework (the “Frame- work”), which is based on six principles of Transparency, Fairness, Accountability, Privacy, Security and Reliability. Cisco translates these principles into product development requirements, which ultimately form part of the product development lifecycle alongside our Security by Design, Privacy by Design and Human Rights by Design processes.

Accordingly, Cisco ThousandEyes’ GenAI features are built with transparency, fairness, accountability, privacy, security and reliability at their core. To ensure we are meeting these principles, each GenAI feature undergoes an AI Impact Assessment to measure the technical underpinnings of the functionality against the Framework principles.

This technical note describes more information about ThousandEyes’ GenAI-based features and how we responsibly leverage GenAI to innovate and unlock new possibilities. Note, ThousandEyes leverages machine learning to provide many features (e.g. such our alerting, proactive recommendations, etc.); those machine learning-based features are beyond the scope of this technical note.

GenAI Capabilities and Functionality

Today, at ThousandEyes, we incorporate GenAI technologies to enhance our core mission of providing comprehensive digital experience monitoring and internet intelligence. Our current GenAI features and their intended uses are described below:

Event Summarization

● Natural Language Explanations and Summarization: Users can request clear, concise

summaries of complex events, alerts or performance data in plain language.

Cisco AI Assistant integration into ThousandEyes

● Troubleshooting Assistance: Users can: (i) identify root causes of network and application performance issues, (ii) receive guidance through diagnostic workflows by analyzing relevant ThousandEyes data and/or (iii) correlate various data points (e.g., alerts, events and test results) to pinpoint problems.

● Augmented Insights: Users can request assistance in understanding complex network

and application performance data more efficiently.

Ask Questions: Users can receive answers to questions about ThousandEyes product functionality, best practices or specific data insights by referencing platform data and documentation

The specific GenAI capabilities and functionalities offered within ThousandEyes vary based upon the particular implementation and are described in more detail in the applicable documentation. Each of the ThousandEyes GenAI features are designed to supplement human expertise and provide actionable intelligence.

Page 4 of 7¶

How Our GenAI Works

GenAI features within ThousandEyes, particularly those involving natural language interaction or complex data interpretation, are generally designed to generate responses or other content based on inputs you provide (e.g., your questions, selected events for summarization or feedback on responses) and certain grounding data that the feature has access to within your ThousandEyes account and relevant Cisco knowledge bases. Grounding data is described in more detail below.

How Our GenAI Processes Information:

In general, our GenAI-based features work in the following manner:

Prompt/Input: The GenAI feature receives a prompt. This could be a question typed

into an interface, a request to summarize an event, or an interaction with a GenAI-driven analytical tool.

Preprocessing and Grounding: Next, the system preprocesses the prompt. A crucial

step here is grounding, where the GenAI retrieves relevant contextual information from your ThousandEyes account that the authenticated user has permission to access which improves the specificity of the prompt (“Grounding Data”). Grounding Data generally consists of the following types of data/content: (1) specific data from your ThousandEyes account (including Alerts, Events, Views, test data or metadata), (2) ThousandEyes/Cisco knowledge resources ( e.g. public documentation, technical blogs and API documentation), and/or (3) specific data from your Cisco accounts, to the extent you use other Cisco products/services in conjunction with the ThousandEyes platform, at the time of the prompt to provide contextual responses. Grounding Data enables the GenAI feature to generate responses that are relevant and actionable to your specific task and ThousandEyes.

Sending to GenAI Model: The processed prompt, along with the retrieved Grounding

Data, is sent to the underlying GenAI model (e.g., models licensed from Anthropic, Meta, Azure OpenAI or Cisco’s proprietary AI technology).

GenAI Model Processing: The GenAI model processes the processed prompt and the

Grounding Data to generate a response.

Postprocessing: The response from the GenAI model undergoes postprocessing to

confirm adherence to Cisco’s Framework. This may include responsible GenAI checks and content filtering (e.g., using services like Amazon Guardrails, etc.).

Returning Response: The GenAI feature returns a response to the user (e.g., a natural

language explanation, a summary, troubleshooting steps, or data insights).

User Feedback Collection (Optional): Users may have the option to provide feedback on GenAI-generated responses (e.g., thumbs up/down, textual comments), which we may use to improve Cisco ThousandEyes features or other Cisco products.
User Review: Users should always review GenAI-generated outputs. While GenAI aims for accuracy, responses can sometimes be incomplete or contain errors. Expert human judgment remains essential.

Page 5 of 7¶

Underlying Models and Services:

● GenAI features in ThousandEyes may utilize models which have been licensed from

providers like Anthropic (e.g., Claude series), Meta (e.g., Llama series), Azure OpenAI (e.g. GPT series) or Cisco’s own GenAI technologies. The specific model used varies by the feature and may change over time as we continue to improve/expand our functionality.

GenAI Limitations and Your Responsibilities

All GenAI systems have inherent limitations. To mitigate those limitations, your use of our GenAI includes the following responsibilities:

● Recognize the Limitations: While GenAI can provide powerful insights, outputs may not always be perfectly accurate or complete. Outputs also may not be unique – GenAI may generate the same or similar content for multiple parties, in each case independent of the inputs. GenAI-generated information should be considered an aid, not a sole basis for critical decisions and should be reviewed in context.

● Use Within Intended Scope of Operation and the Documentation: GenAI systems

perform best within their designed operational parameters and based on the Grounding Data they can access. Unexpected inputs or novel scenarios might lead to suboptimal performance. Users are advised to use the GenAI-based features within the ThousandEyes platform in accordance with their documentation, as may be updated from time to time, and for their intended purpose/scope. Users should remain mindful that GenAI outputs are supplementary to human expertise.

● Avoid Using Sensitive Data and Minimize Personal Data: Depending on the use case,

it might not be possible for Cisco to apply filtering on the input data. Thus, we recommend that users mask or remove all sensitive data and limit disclosure of personal data to only the extent necessary for your query in any user provided prompts. ThousandEyes addresses processing of and security around personal data, including retention periods for that personal data, in its Privacy Data Sheet, found on the Trust Portal - Cisco.

How We Continuously Monitor Our GenAI Capabilities

Our GenAI-based features and the associated models undergo evaluation and testing throughout their lifecycle to maintain and/or improve performance, security, and accuracy of generated output. Each third party model provider undergoes a vendor assessment and an AI Impact Assessment to ensure they are also meeting our AI and security standards.

● Performance Metrics: Performance is assessed using relevant metrics, which may

include accuracy, reliability, latency, relevance of grounding, user satisfaction (derived from feedback) and fairness, depending on the GenAI feature’s function.

Page 6 of 7¶

● Testing Methodologies: Our testing processes include functional testing, performance testing and, where applicable, evaluations for robustness and against potential biases.

● Human Review: Human oversight and review are integral parts of our GenAI development and evaluation process, especially where GenAI outputs could significantly impact users or operations. User feedback is a key input into this review.

● Ongoing Monitoring: Deployed GenAI-based features are subject to ongoing monitoring to track performance and identify areas for improvement or re-evaluation. We test the implementation with concrete auto evaluation frameworks to protect against any regressions.

Cisco implements robust safeguards and conducts harm mitigation testing on the experiences it controls, while also leveraging the comprehensive safeguards provided by its model providers, such as AWS and Microsoft. We take these measures with an aim to validate that our GenAI- based features are effective, reliable and provide value to our users.

Customer Transparency and Control

We strive to empower customers to make their own choices related to GenAI. To provide this assurance, we provide the following visibility and options related to our GenAI-based features:

● Transparency of GenAI Use: We inform users when they are interacting with GenAI-based

features within the ThousandEyes platform. Similarly, when GenAI output is provided to a user, it will be denoted as being generated using GenAI (e.g. “Assistant can make mistakes. Verify responses”).

● GenAI Opt-Out: You may opt out of our GenAI-based features at any time by following

the instructions in the applicable ThousandEyes documentation.

● Feedback Mechanisms: We provide channels for users to provide feedback on their

experience with the ThousandEyes platform, including our GenAI-based features (e.g., thumbs up/down ratings on GenAI responses). This feedback is valuable for our continuous improvement efforts.

● Concerns: Any concerns or issues identified with our GenAI-based features can be

raised through legal@thousandeyes.com.

Updates, Versioning and Governance

GenAI technology and its applications are dynamic. We are committed to the ongoing management and governance of GenAI within the ThousandEyes platform through the following:

● System Updates: Our GenAI-based features and their associated models may be updated periodically, for example, to improve performance, address new risks, or introduce new capabilities.

Page 7 of 7¶

● Transparency Note Updates: This AI Transparency Note will be reviewed and updated

as needed to reflect changes in our general approach to GenAI within the ThousandEyes platform. The “Date of Last Update” is indicated at the top of this document.

● Governance: The development, deployment and maintenance of GenAI in ThousandEyes

are subject to Cisco’s Responsible AI governance framework.

● Enduring Principles: This technical note focuses on our overarching principles and

approaches to GenAI-based features in the ThousandEyes platform. Specific technical details for individual features, which may change more rapidly, will be found in feature- specific documentation. Changes to the ThousandEyes platform are documented in the appropriate artifacts such as the release notes, change logs, user guides, etc.

Contact Information and Further Resources

For more information about Cisco’s approach to GenAI or specific questions related to GenAI in the ThousandEyes platform:

● RAI Principles

● RAI Framework

● Cisco Trust Portal

● Cisco ThousandEyes Privacy Data Sheet