Cloudバリューを最大化してエクスペリエンスを最適化Elasticの全サービスをあらゆるクラウドに、数分でデプロイ&スケールしましょう。LearningやGraph分析などエンタープライズグレードのセキュリティと開発者フレンドリーなAPIを備えた高度なオプション群(旧X-Pack)を提供しています。Serviceを、14日間無料トライアルでお試しください。クレジットカード情報の入力は必要ありません。管理と運用スケーラビリティと回復性Elasticsearchは、設計段階から分散環境での安全な運用を考慮したプロダクトです。クラスターサイズの変更も思いのまま。ノードを追加するだけです。クラスタリングと高可用性クラスターとは、共同ですべてのデータを保有し、全ノードを横断してフェデレーションによるインデキシングと検索を提供する1つ以上のノード(サーバー)の集合です。Elasticsearchのクラスターはプライマリシャードとレプリカシャードの2つを搭載しており、ノードがダウンした場合にフェイルオーバーの役割を果たします。プライマリシャードに問題が生じると、レプリカシャードが代替します。意図的であるかを問わず、何らかの理由で任意のノードがクラスターから切り離される場合、複製とシャードのリバランスを活用して、マスターノードに代替されます。この一連のアクションは、各シャードを可能な限りすみやかに、完全に複製することで、データロスからクラスターを保護することを目的としています。ノードの割り当てについてさらに詳しく自動のデータリバランスElasticsearchクラスターのマスターノードは、どのシャードをどのノードに割り当てるか自動的に判断します。マスターノードは、シャードを別のノードへ移動させ、クラスターの再バランス化を図るタイミングも決定します。自動のデータ再バランス化についてさらに詳しく分散型スケーラビリティElasticsearchは、ニーズに応じて自在にスケールします。データの増加やユースケースの追加、リソースの不足が生じた場合も、運用クラスターにノードを追加するだけ。キャパシティと信頼性を簡単に引き上げることができます。クラスターにノードを追加すると、自動でレプリカシャードが割り当てられ、有事の際も安心です。分散型スケーラビリティについてさらに詳しくrack認識カスタムノード属性を認識属性として使用し、シャードを割り当てる際、Elasticsearchに物理ハードウェアの設定を考慮させることができます。どのノードが同じ物理サーバー(あるいは同じラック、同じゾーン)にあるかをElasticsearch側で把握していれば、プライマリシャードとレプリカシャードを分散させ、障害発生時にすべてのシャードコピーが失われるリスクを最小化することができます。replication、CCR)機能を使って、リモートクラスターのインデックスをローカルクラスターに複製することができます。一般的な運用ユースケースで広く役立ちます。CCRについてさらに詳しく災害復旧:プライマリクラスターに障害が発生した場合、2番目のクラスターがホットバックアップとして振る舞います。地理的近接性:ローカルな読み取りで、ネットワークレイテンシーを低減します。データセンター横断レプリケーションElasticsearchを使用するミッションクリティカルな多くのアプリに欠かせない要件に、データセンター横断レプリケーションがあります。従来は、部分的かつ付加的なテクノロジーで解決されていました。Elasticsearchのクラスター横断レプリケーションなら、データセンター間や、地理的冗長性を目的に、あるいはElasticsearchクラスター間のデータ複製のためにテクノジーを追加する必要はありません。Stackの稼働状況を可視化できます。最大限に活用するために、いつでも状態を把握しておきましょう。StackのMonitoringオプションで、ElasticsearchやLogstash、Kibanaの運用に関するインサイトを取得してみましょう。あらゆる監視メトリックをElasticsearchに格納し、Kibanaで簡単に可視化できます。一元化された監視クラスターで、複数のクラスターの状態とパフォーマンスを記録、追跡し、ワークフローをシンプルにします。Stackで、監視データをどの程度の期間保持するか制御することができます。デフォルトでは7日間ですが、お好みに応じて自在に設定を変更可能です。Stackのアラート機能は、クラスターの状態やライセンス期間の終了、Elasticsearch、Kibana、Logstashに関するメトリックの変化を自動で通知します。Stackのデータやユーザー、クラスター、運用などを完全に制御できます。インデックスライフサイクル管理インデックスライフサイクル管理(ILM)は、4つある各フェーズにインデックスが滞在する期間のポリシーを定義し、自動化して制御します。インデックスの各フェーズで実行される一連のアクションも定めます。データを保管するリソースのグレードを変えることで、運用コストのよりきめ細やかな管理を実現します。ILMについてさらに詳しくHot:頻繁に更新、クエリが生じるフェーズWarm:更新はされないが、クエリが生じるフェーズCold/Frozen:更新はされず、クエリが生じる頻度も乏しいフェーズ(検索は可能だが、遅い)Delete:保持が不要なフェーズデータティアデータティアは、ノードロール属性を使ってデータをHot、Warm、Coldの3つのノードに正式に区分する手法です。ノードロール属性に基づき、ノードのインデックスライフサイクル管理ポリシーも自動的に定義されます。Hot、Warm、Coldの3つのノードロールを割り当てることで、高コスト・高パフォーマンスなストレージから低コスト・低パフォーマンスなストレージへのデータ移動プロセスを大幅にシンプル化、および自動化できます。大切なデータインサイトには、一切影響を生じません。データティアについてさらに詳しくHot:最もパフォーマンスにすぐれたインスタンスで、更新やクエリの頻度も高いティアWarm:パフォーマンスが低めのインスタンスで、クエリの頻度も低いティアCold:読み取りのみ、クエリの頻度は稀で、検索可能スナップショットによりパフォーマンスを維持したままストレージ使用量を大幅削減するティアスナップショットと復元スナップショットとは、実行中のElasticsearchクラスターのバックアップです。個々のインデックスのスナップショットを撮ることも、クラスター全体で撮ることもでき、スナップショットは共有ファイルシステムのレポジトリに格納されます。プラグインを使用し、リモートレポジトリを選択することもできます。Storage検索可能スナップショット“検索可能スナップショット”は、直接クエリできるスナップショットです。通常のスナップショットを復元する場合と比べて、検索にかかる時間を劇的に短縮できます。各スナップショットインデックスの必要な部分を読み取り専用で活用し、検索リクエストを実行する仕組みです。Storageといったオブジェクトストレージシステムにレプリカシャードをバックアップすると、データストレージコストを大幅に削減できます。検索のための完全なアクセスが保たれます。管理者はバッググラウンドでスナップショットの管理を行うスナップショットライフサイクル管理(SLM)APIを使って、Elasticsearchクラスターのスナップショットを撮る間隔を定義できます。SLM専用のUIがあり、SLMポリシーの保持期間を設定したり、スナップショットを自動で作成・削除したり、スケジュールを指定できるようになっています。どのクラスターも適切にバックアップできるだけでなく、顧客とのSLAに沿って復旧を実施するために必要な頻度のバックアップを確実に実行することができます。SLMについてさらに詳しくスナップショットベースのピア復旧Elasticsearchのレプリカからの復元や、データが利用可能になった際に、最新のスナップショットからプライマリシャードを移転するための機能です。スナップショットからの復元に比べて、ノード間のデータ転送が高コストとなる環境で実行しているクラスターの運用コストを下げることができます。スナップショットベースのピア復旧についてさらに詳しくデータのロールアップ古いデータを使えるようにしておくと、分析には非常に役立ちます。問題は、膨大な量のデータのアーカイブに費用がかかることでした。したがって膨大な過去データの保持期間を、その有用性よりも、コスト面の制約で決定されることが少なくありませんでした。Elasticのロールアップは、過去データを要約して格納する機能です。分析に使えるように維持しつつ、生データにかかるストレージコストを大きく引き下げます。ロールアップについてさらに詳しくデータストリームデータストリームは、継続的に生成される時系列データのインジェスト、検索、管理に便利で、スケーラブルな方法です。データストリームについてさらに詳しくCLIツールコマンドラインでElasticsearchのセキュリティを設定したり、その他のタスクを実行したりするためのツールが数多くあります。Stackの最新バージョンへ移行する作業をアシストします。UIのアシスタントがお使いのクラスターやインデックスから推奨されない設定を特定します。再インデキシングを含む問題解決プロセスへナビゲートします。アップグレードアシスタントについてさらに詳しくアップグレードアシスタントAPIアップグレードアシスタントAPIでElasticsearchクラスターのステータスを確認・アップグレードしたり、以前のメジャーバージョンで作成されたインデックスを再インデックスしたりすることができます。Elasticsearchで、より新しいメジャーバージョンへ移行する際に便利です。アップグレードアシスタントAPIについてさらに詳しくユーザーとロールの管理Kibanaから、APIや[管理]メニューでユーザーとロールの作成/管理を行うことができます。変換は、2次元的な表によるデータストラクチャーです。このデータストラクチャーは、インデックス済みデータをより処理しやすくする性質を備えています。変換は、アグリゲーションを通じてデータをエンティティセントリックなインデックスにピボットします。変換、要約でデータを可視化できようにするだけでなく、機械学習分析用のソースを提供するなど、別の手法によるデータ分析を可能にします。Stackのアラート機能なら、データの重要な変化を見逃しません。Elasticsearchでクエリできるものは何でも通知可能です。Stackを活用するメリットは、組織の規模を問いません。カスタムの頼れる通知をアナリストに届けます。Teams、PagerDuty、ServiceNow、xMatters、Slackに対応する内蔵の統合機能で、アラートをリンク付けできます。Webフックアウトプットを経由して、あらゆるサードパーティのシステムを連携させることも可能です。アラートの通知オプションについてさらに詳しくアラートUIひとつのUIで、通知の参照、作成、管理を制御することができます。通知の内容も、実施されたアクションも、リアルタイムにわかります。Kibanaの通知設定についてさらに詳しくアラートの抑制とノイズ軽減ユーザーが指定した一定の時間、アラートルールをスヌーズすることにより、通知やアクションを抑制できます。予期せず生じた問題の対処中、あるいは、既知のダウンタイム中はルールのミュート解除がされないため、アクションのタイミングを逃すことはありません。アラートの抑制とノイズ軽減についてさらに詳しくディスカバリ向け検索閾値アラートディスカバリの検索閾値アラートは、Elasticsearchクエリベースのルールです。このルールは所与の時間間隔でドキュメントを分析し、指定した基準の閾値にドキュメントが達しているかを確認した後、アラートをトリガーします。ユーザーは必要に応じてアクションを作成およびアサインして、通知をトリガーしたり、インシデントを自動作成したりすることができます。Stackのセキュリティ機能です。IT部門や事業部、アプリ開発チームごとに善意のユーザーを管理することで、不正な侵入を防ぐことができます。Stackのデータを安全に、安心して共有できます。設定を安全に保つ設定そのものがセンシティブである場合があります。設定値の保護をファイルシステム権限だけに頼る手法は、十分ではありません。Stackコンポーネントのキーストアです。キーストアを使って、センシティブなクラスター設定への望ましくないアクセスを防止できます。ElasticsearchとLogstashのキーストアは、付加的なセキュリティとなるパスワード保護のオプションも提供します。設定を安全に保つ仕様についてさらに詳しく通信の暗号化SSL/TLSを用いたトラフィック暗号化や、ノード認証証明書をはじめとするテクノロジーで、Elasticsearchノードのデータに対するネットワークベースの攻撃を阻止しています。Stackに保存データを暗号化する設定不要の機能が搭載されているわけではなく、ホストマシンにおけるディスクレベルの暗号化は常に推奨されています。スナップショットの対象についても、保存データが確実に暗号化されていることが必要です。ロールベースのアクセス制御(RBAC)ロールベースのアクセス制御は、ユーザーやグループにロールをアサインし、さらにロールに応じた権限をアサインしてユーザーのアクセス権を設定する機能です。StackのSecurityオプションは、属性ベースのアクセス制御(ABAC)メカニズムも備えています。属性を使用して、検索クエリやアグリゲーションがアクセスするドキュメントを制約します。このメカニズムで、ロール定義にアクセスポリシーを導入することが可能です。エンドユーザーは、必要なすべての属性を備える特定のドキュメントしか読み取ることができません。ABACについてさらに詳しく匿名アクセス制御(パブリック共有用)マップからダッシュボード、Kibanaに保存されたあらゆるオブジェクトまで、認証情報を求められることなく誰でもアセットにアクセスできる専用リンクを作成できるようになりました。匿名アクセスについてさらに詳しくフィールドとドキュメントレベルのセキュリティフィールドレベルのセキュリティ対策で、ユーザーが読み取りアクセスを持つフィールドを制限します。ドキュメントベースの読み取りAPIで、どのフィールドにアクセスを許可するか定めることが可能です。フィールドレベルのセキュリティについてさらに詳しくドキュメントレベルのセキュリティ対策で、ユーザーが読み取りアクセスを持つドキュメントを制限します。ドキュメントベースの読み取りAPIで、どのドキュメントにアクセスを許可するか定めることが可能です。ドキュメントレベルのセキュリティについてさらに詳しく監査ログ認証の失敗や拒否された接続など、セキュリティ関連イベントを追跡する監査を有効化することができます。したイベントのログを記録しておくことによって、クラスター上の疑わしいアクティビティを監視し、攻撃が発生した際のエビデンスとして使用することができます。監査ログについてさらに詳しくIPフィルタークラスターに追加するノードや、アプリクライアント、ノードクライアント、トランスポートクライアントなどにIPフィルターを追加することができます。ブラックリストに入っているIPアドレスがノードに入ると、セキュリティ機能がElasticsearchへの接続をただちに遮断し、リクエスト処理が停止されます。StackのSecurityオプションで実行されるユーザー認証は、レルムと、1つ以上のトークンに基づく認証サービスを使用します。レルムは認証トークンに基づいてユーザーを解決、認証する役割を果たします。StackのSecurityオプションで、多数の内蔵型レルムが提供されています。StackはバックエンドサービスにElasticsearchを使用しており、KibanaへのSAMLシングルサインオン(SSO)に対応しています。SAML認証の導入で、OktaやAuth0といった外部IDプロバイダーを使ったKibanaへのログインが可能になります。Stackのセキュリティ仕様がサポートしない認証システムをお使いの場合も、カスタムレルムを作成してユーザーを認証することができます。140-2準拠モードを提供しています。140-2の処理基準に準拠することができます。508(第508条)に準拠させる必要がある場合も、セキュリティ機能で対応することができます。扱っているデータが、GDPRガイドラインでは「個人データ」に分類にされる確率は決して低くありません。Stackの機能を活用してみましょう。GDPRが定める保護と処理の要件に、Elasticsearchデータを対応させることができます。GDPRに関するホワイトペーパーはこちら管理と運用デプロイパブリッククラウド、プライベートクラウド、またはハイブリッドでも。Stackを簡単にデプロイして管理できます。ダウンロードとインストールとにかく簡単にはじめることができます。ElasticsearchとKibanaをダウンロードして、アーカイブやパッケージマネージャーからインストールするだけ。データをインデックスして、分析と可視化をすぐに実行できます。機械学習やセキュリティ、Graph分析などの有償オプション(プラチナ)はデフォルトの配布に含まれており、30日間無料でお試しいただけます。CloudはElasticプロダクトをシームレスに導入する出発点となります。Cloudのすべてのプロダクトを14日間無料でお試しください。クレジットカードの登録は必要ありません。Enterprise(ECE)は規模やインフラストラクチャーを問わず、ひとつのコンソールでElasticsearchとKibanaをプロビジョニング、管理、監視します。Elasticsearch、Kibana、各種オプションを、ベアメタルサーバー、仮想環境、プライベートクラウド、またはパブリッククラウド(Google、Azure、AWSなど)ほか、お好きな環境に展開できます。Kubernetes(ECK)は、Kubernetesの基本的なオーケストレーション機能を拡張することにより、KubernetesでのElasticsearchやKibanaの設定/管理をサポートします。Kubernetesを使うと、KubernetesでElasticsearchを実行するためのデプロイ、アップグレード、バックアップ、スケール、高可用性、セキュリティなどのプロセスをシンプル化することができます。KubernetesでデプロイHelmチャートわずか数分でオフィシャルのElasticsearchやKibanaでHelmチャートをデプロイできます。Hubのオフィシャルなコンテナーを使って、ElasticsearchやKibanaをDocker上で実行できます。Stackなら、ユーザーが「使いやすい」と感じる方法で自由にデータを扱うことができます。APIや言語クライアント、堅牢なDSLを備え、SQLにも対応。あらゆる方法をスムーズに実行できる柔軟性があります。APIを通じて、クラスターを操作することができます。APIについてさらに詳しくクラスターやノード、インデックスのヘルスとステータス、統計情報を確認しましょう。クラスターやノード、インデックスデータ、メタデータを管理します。インデックスのCRUD(作成、読み取り、アップデート、削除)と検索操作を実行します。ページング、ソート、フィルタリング、アグリゲーションをはじめとする高度な検索操作を実行します。APIとJSONを使用します。Elasticが開発・保守するクライアントライブラリがJava、Python、.Net、SQL、PHPといった多数の言語で用意されているほか、コミュニティによるクライアントもあります。無限の可能性を持つElasticsearch。あなたの自由なアイデアを妨げません。APIコミュニティが開発しているクライアントコンソール[コンソール]はKibanaが開発ツールの1つです。cURL風の構文でElasticsearchに送るリクエストを作成したり、リクエストへのレスポンスを表示することができます。language)を提供しています。クエリDSLはパワフルな検索オプションとして、用語/フレーズのマッチング、あいまい検索、ワイルドカード、正規表現、ネストクエリ、ジオクエリなどを含む全文検索に対応しています。SQLは、ElasticsearchでリアルタイムにSQL風のクエリを実行できる機能です。クライアントはRESTインターフェース、コマンドライン、JDBCのいずれでもSQLを使用することができ、Elasticsearch内でデータ検索やアグリゲーションがネイティブに実行されます。Language(EQL)は、セキュリティ分析をはじめとするユースケースを目的として開発されています。JDBCドライバーは、豊富で包括的な仕様を備えたElasticsearchのためのJDBCドライバーです。SQLに転換するタイプ4ドライバー(プラットフォーム非依存でスタンドアローン、データベース直結の純粋なJavaドライバー)です。ODBCドライバーです。Serverのユーザーは、Elasticsearch向けTableauコネクターを使うことでElasticsearchのデータにより簡単にアクセスできます。Tableauコネクターをダウンロード投入とエンリッチ投入とエンリッチデータソースどのようなタイプのデータ収集も、Beatsにおまかせください。サーバーやコンテナーにデプロイするだけで、Elasticsearchにデータを集約します。高度な処理にも最適です。Logstashにデータを送信して変換やパースを任せることもできます。オペレーティングシステムLinuxの監査フレームワークデータを収集し、ファイルの整合性を監視します。Stackがさらに分析を進めます。Auditbeatについてさらに詳しくWindowsベースの環境で起きていることを、常に把握しておくことができます。Winlogbeatは、WindowsイベントログをElasticsearchとLogstashにリアルタイムでストリームするスマートな手段です。Winlogbeatについてさらに詳しくWebサーバーとプロキシFilebeatやMetricbeatを使って、お使いのWebサーバーやプロキシサーバーをさまざまな方法で監視できます。NGINX、Apache、HAProxy、IISなどに対応するモジュールや、事前設定済みダッシュボードも用意されています。使用可能なFilebeatモジュールを探すデータストアとメッセージキューFilebeatとMetricbeatは、シンプルにデータを収集、パース、可視化する内部モジュールを搭載。SQLをはじめとする一般的なログフォーマットやデータストアのシステムメトリック、データベース、メッセージキューシステムに対応しています。Azureの広範なクラウドサービスにわたり、パフォーマンスと可用性をトラッキングしましょう。1つの画面で、効率的な分析を大規模に推進できます。Logsといったサーバーレスクラウドのアーキテクチャーをシンプルに監視することも可能です。クラウド統合機能についてさらに詳しくコンテナーと制御アプリケーションログを監視し、Kubernetesのメトリックとイベントをモニタリングして、Dockerコンテナーのパフォーマンスを分析しましょう。インフラ運用に特化したアプリで、あらゆるデータをリアルタイムに可視化・検索できます。コンテナー監視についてさらに詳しくMetricbeatとFilebeatの自動探知機能で、環境のあらゆる変化を把握できます。モジュールやログパスの追加が自動化され、監視設定はDockerやKubernetesのAPIフックを使って動的に調整されます。ネットワークデータHTTP、DNS、SIPほか、各種のネットワーク情報から、アプリケーションの遅延やエラー、応答時間、SLA、ユーザーアクセスのパターン、傾向などを把握できます。このデータを活用して、ネットワーク内のトラフィックの流れを捉えてみましょう。Packetbeatについてさらに詳しくセキュリティデータ脅威を検知するカギは、あらゆる場所で見つかる可能性があります。環境全体で起きていることを、リアルタイムに把握してみましょう。AgentとBeatsを使って、大規模な監視と検知を実現できます。Elasticセキュリティでデータを保護アップタイムデータサービスを同じホストでテストする場合も、インターネット経由でテストする場合も、Heartbeatがあればアップタイムと応答時間のデータ生成が簡単になります。Heartbeatについてさらに詳しくファイルのインポートファイルデータビジュアライザーを使って、CSVやNDJSON、ログのファイルをElasticsearchインデックスにアップロードすることができます。ファイルデータビジュアライザーは、ファイルストラクチャーAPIを使用してファイルのフォーマットとフィールドマッピングを特定します。その後、データをインデックスにインポートすることができます。Stackなら、生データから貴重な情報を引き出せます。各種プロセッサーIngestノードを使用して、実際のドキュメントをインデックスする前にドキュメントを事前処理することができます。Ingestノードはバルクリクエストやインデックスリクエストを遮断し、ドキュメントを変換してから再びバルクAPIまたはインデックスAPIにドキュメントを渡します。Ingestノードにはappend、convert、date、dissect、drop、fail、grok、join、emove、set、split、sort、trimほか、25種類以上のプロセッサーがあります。分析とは、テキストの変換プロセスです。Eメールにかならず"本文"がついてくるのと同じです。検索のために倒置されたインデックスと、トークンやタームを切り離すことはできません。内蔵のアナライザーを分析用のアナライザーとして使うことも、インデックスごとに、トークナイザーやフィルターを組み合わせて作成したカスタムアナライザーを定義して使用することもできます。bone."アウトプット:the2quickbrownfoxesjumpedoverthelazydog'sbone各種トークナイザートークナイザーは文字のストリームを受け取り、個別のトークン(通常は個別の単語)に分解してから、トークンのストリームを出力します。トークナイザーは各タームの順序や位置も記録しています(フレーズや単語の近接性クエリに使用)。先頭と末尾の文字はタームが表現する元の単語から控除されます(検索スニペットの強調に使用)。Elasticsearchは多数のトークナイザーを搭載しており、そのトークナイザーを使ってカスタムアナライザーを構築することもできます。bone."アウトプット:The2QUICKBrown-Foxesjumpedoverthelazydog'sbone.各種フィルタートークンフィルターは、トークナイザーから来るトークンのストリームを受け取り、修正(例:小文字に変える)や、削除(例:ストップワードを除外する)、追加(例:同義語)を行うことができます。Elasticsearchは多数のトークンフィルターを搭載しており、そのトークンフィルターを使ってカスタムアナライザーを構築することもできます。トークンフィルターについてさらに詳しく文字フィルターを使って、トークナイザーに渡される前の文字を、事前処理することができます。文字フィルターは、元のテキストを文字のストリームとして受け取り、文字を追加、削除、または変更してそれを変換します。Elasticsearchは多数の文字フィルターを搭載しており、その文字フィルターを使ってカスタムアナライザーを構築することもできます。Elasticsearchは30以上の言語アナライザーを提供しており、ロシア語やアラビア語、中国語などラテン文字を使用しない言語にも対応します。使用可能な言語フィルターを探すGrokGrokパターンとは、再使用可能な別の表現をサポートする正規表現のようなものです。Grokを使用して、ドキュメントの構造化フィールドからシングルテキストフィールドを抽出することができます。syslogログや、Apache、MySQLログのようなWebサーバーログ、(コンピューター用ではなく)人間用に書かれるログフォーマットに最適なツールです。Grokについてさらに詳しくフィールド変換データフィードを使用している場合、スクリプトを追加して分析前にデータを変換することができます。データフィードには任意のscript_fieldsプロパティがあります。そこにスクリプトを指定し、カスタム表現を評価して、スクリプトフィールドに返すようにすることができます。この機能を使用して、さまざまなデータ変換を実施することができます。外部参照Logstashの外部参照プラグインで、ログデータを投入時にエンリッチすることができます。ログ行を手軽に追加できるだけでなく、クライアントIPロケーションやDNS参照結果、前後のログ行といったコンテクスト情報を加えることも可能。Logstash向けの多彩なプラグインから、自由に選んで使えます。一致投入プロセッサーを使うことにより、投入時にデータを参照して、エンリッチ済みデータをプルする最適なインデックスを指定することができます。データに要素を追加するプロセスが不可欠なBeatsのユーザーに便利です。BeatsからLogstashにピボットする必要がなく、インジェストパイプラインだけで処理することが可能になります。一致エンリッチプロセッサーによるデータの正規化は、高度な分析や一般的なクエリにも役立ちます。地理空間一致エンリッチプロセッサーは、地理データを活用して検索とアグリゲーションの機能性を高めます。クエリやアグリゲーションを地理座標で定義する必要がありません。一致エンリッチプロセッサーと同様に、投入時にデータを参照して、エンリッチ済みデータをプルする最適なインデックスを判断することができます。Stackに入れることができます。Agent、あるいはLogstashを使うことも可能。サポート言語リストに拘束されることがありません。オープンソースだから、インジェストするデータタイプにも制限はありません。特定のデータタイプをシッピングする必要がある場合も、カスタムのインジェストメソッドの構築に必要となるライブラリと手順が揃っています。成果をコミュニティにシェアすることもできます。同じメソッドを必要とする人のために、公開することが可能です。APIとJSONを使用します。Elasticが開発・保守するクライアントライブラリがJava、Python、.Net、SQL、PHPといった多数の言語で用意されているほか、コミュニティによるクライアントもあります。無限の可能性を持つElasticsearch。あなたの自由なアイデアを妨げません。APIコミュニティが開発しているクライアントインジェストノードElasticsearchが提供する多彩なノードタイプの1つに、データ投入専用のノードがあります。インジェストノードは1つ以上の投入プロセッサーで構成されたパイプラインの事前処理を実行することができます。投入プロセッサーの動作タイプと必要なリソースにより、特定のタスクのみ実行する投入専用ノードを使う方がよい場合があります。Agentは一元化された単体のエージェントです。Stackに送信できます。Agentを活用することで、各ホストのログ、メトリック、その他のタイプのデータも監視対象に加わります。Security機能を活用可能です。セキュリティ関連イベントの監視を通じてエンドポイントを保護したり、KibanaのElasticセキュリティアプリからセキュリティデータを調査したりできます。Agentについてさらに詳しくBeatsBeatsは、エージェントとしてサーバーにインストールできるオープンソースのデータシッパー。運用に関するデータをElasticsearchやLogstashに送ります。一般的なログやメトリック、その他さまざまなタイプのデータを捉えることができます。Beatsについてさらに詳しくLinux監査ログ用Auditbeatログファイル用Filebeatクラウドデータ用Functionbeatアベイラビリティデータ用Heartbeatシステムジャーナル用Journalbeatインフラメトリック用Metricbeatネットワークトラフィック用PacketbeatWindowsイベントログ向けWinlogbeatコミュニティのシッパーユースケースに解決を必要する具体的な課題がある場合、コミュニティBeatの活用をおすすめしています。Elasticは、そのプロセスをシンプル化するインフラを用意しました。libbeatライブラリにすべてGoで記述されているAPIが提供されています。どのBeatsでも、このAPIを使用してElasticsearchにデータをシッピングしたり、入力オプションの設定や、ロギングの実装などを行うことができます。Beats開発者向けガイドはこちらBeatsへのコントリビューションを行うコミュニティは100以上。Prometheus、Apache、Twitterまで、さまざまなエージェントがあります。コミュニティが開発したBeatsを探すLogstashLogstashは、リアルタイムでパイプライン処理に対応するオープンソースのデータ収集エンジンです。Logstashは異なるソースから動的にデータを集め、正規化して指定の送信先に届けます。あらゆるデータをクレンジングし、アクセシブルになるよう整形。下流工程にある高度な分析や可視化など、幅広いユースケースで使えるデータにします。Logstashについてさらに詳しくLogstashプラグインインプットやコーデック、フィルター、アウトプットなど各種の独自プラグインをLogstashに追加することができます。プラグインを自由に開発し、Logstashの中核部にデプロイすることができます。Logstashで使用するオリジナルのJavaプラグインを記述することも可能です。ES-Hadoopを使うと、HadoopジョブでElasticsearchを操作することができます。アグリゲーション機能を使った深く遅延の少ない分析を実行したりできます。無料かつオープンで言語不問。プラグインと統合を使って、Elasticsearchの機能性を手軽に拡張することができます。プラグインは、ユーザーがカスタマイズした方法でElasticsearchのコア機能を拡張します。統合とは、Elasticsearchを使いやすくする外部ツールやモジュールのことです。使用可能なElasticsearchプラグインを探すAPI機能拡張プラグインアラートプラグイン分析プラグインディスカバリープラグインインジェストプラグイン管理プラグインマッパープラグインセキュリティプラグインスナップショット/レポジトリ復元プラグイン格納プラグイン投入とエンリッチ管理インジェストメソッドは、Kibanaから一元的に管理することができます。Agentの集団を管理するWebベースUIとして使えます。各種の統合機能で新規データソースを簡単に追加できるほか、ダッシュボードや可視化、パイプラインなど設定不要で使えるアセットをシッピングして、ログから構造化フィールドを抽出します。Fleetについてさらに詳しくLogstashパイプラインの一元管理Kibanaのパイプライン管理UIで、複数のLogstashインスタンスを制御できます。Logstash側では、設定管理を有効化する操作を行うだけ。一元管理パイプライン設定で使用するLogstashとして登録されます。Stackは、あらゆるユースケースに対応するパワフルなソリューションです。ための最適なツールにもなります。多様なニーズに応えるフレキシブルな設計です。データタイプElasticsearchは、ドキュメントのフィールドについてさまざまなデータタイプをサポートしています。各データタイプについて複数のサブタイプも提供しています。それが、種類を問わず、データを可能な限り効率的かつ効果的に格納、分析、活用できる理由です。Elasticsearchで最適に扱うことができるデータタイプに、次のようなものがあります。Elasticsearchがサポートするデータタイプテキストシェイプ数ベクターヒストグラム日時/時系列フラット化されたフィールド地理座標/ジオシェイプ非構造化データ(JSON)構造化データ全文検索(転置インデックス)Elasticsearchは、超高速の全文検索を実現する目的で開発された倒置インデックスと呼ばれる構造を使用します。倒置インデックスは、ドキュメントに出現するユニークなすべての単語を列挙したリストと、各単語がどのドキュメントに出現するかを列挙したリストで構成されます。倒置インデックスを作成する際、はじめに各ドキュメントのコンテンツフィールドを単語(ターム、またはトークンと呼ばれます)に分割します。次に、ユニークなすべての単語を列挙し、並べ替えたリストを作成します。最後に、各タームが出現するドキュメントをリストアップします。倒置インデックスについてさらに詳しくドキュメント格納(非構造化データ)Elasticsearchは、構造化をデータ投入や分析の要件としていません(構造化されていれば、スピードが向上します)。シンプルに使いはじめることができる設計で、ドキュメントストアとしても効率的です。ElasticsearchはNoSQLデータベースではありませんが、類似の機能性を備えています。動的マッピングについてさらに詳しく時系列/分析(列での格納)転置インデックスでクエリを実行すると、検索タームをすばやく参照できます。並べ替えやアグリゲーションを実行するには、別のデータアクセスパターンが必要です。タームを参照してドキュメントを見つける代わりに、ドキュメントを参照してフィールドにあるタームを探せるようにしなければなりません。ドキュメントの値は、インデックス時にElasticsearchのオンディスクデータ構造になっています。そのため前述のデータアクセスパターンを使うことができ、検索を列で実行することが可能です。Elasticsearchが時系列とメトリック分析にすぐれた能力を発揮できる理由もここにあります。ドキュメント値についてさらに詳しく地理空間(BKDツリー)ElasticsearchはLuceneでBKDツリー構造を使用し、地理空間データを格納します。これにより、地理座標(緯度・経度)とジオシェイプ(四角形・ポリゴン)のどちらも効率的に分析することができます。データストレージセキュリティElasticsearchは、データの悪用を回避する複数の手段をサポートしています。Stackに保存データを暗号化するメニューは搭載されていませんが、ホストマシンにおけるディスクレベルの暗号化は常に推奨されています。スナップショットの対象についても、保存データが確実に暗号化されていることが必要です。フィールドとドキュメントレベルのAPIセキュリティフィールドレベルのセキュリティ対策で、ユーザーが読み取りアクセスを持つフィールドを制限します。ドキュメントベースの読み取りAPIで、どのフィールドにアクセスを許可するか定めることが可能です。フィールドレベルのセキュリティについてさらに詳しくドキュメントレベルのセキュリティ対策で、ユーザーが読み取りアクセスを持つドキュメントを制限します。ドキュメントベースの読み取りAPIで、どのドキュメントにアクセスを許可するか定めることが可能です。ドキュメントレベルのセキュリティについてさらに詳しくデータストレージ管理Elasticsearchのクラスターやノード、インデックス、シャード、そしてデータ自体も、完全に管理することができます。クラスター化インデックスクラスターとは、共同ですべてのデータを保有し、全ノードを横断してフェデレーションによるインデキシングと検索を提供する1つ以上のノード(サーバー)の集合です。このアーキテクチャーでは、簡単に水平方向へのスケールを行うことができます。APIとUIを提供しています。クラスター化インデックスについてさらに詳しくデータスナップショットと復元スナップショットとは、実行中のElasticsearchクラスターのバックアップです。個々のインデックスのスナップショットを撮ることも、クラスター全体で撮ることもでき、スナップショットは共有ファイルシステムのレポジトリに格納されます。プラグインを使用し、リモートレポジトリを選択することもできます。Storageソースのみのデータスナップショットソースレポジトリは、ソースのみのスナップショットを作成する機能です。スナップショットを最小限にすることで、最大50%のディスクスペースを節約します。ソースのみのスナップショットは格納フィールドとインデックスメタデータを含みます。インデックスやドキュメント値ストラクチャーを含まず、格納後は検索できません。ソースのみのスナップショットについてさらに詳しくロールアップインデックス古いデータを使えるようにしておくと、分析には非常に役立ちます。問題は、膨大な量のデータのアーカイブに費用がかかることでした。したがって膨大な過去データの保持期間を、その有用性よりも、コスト面の制約で決定されることが少なくありませんでした。Elasticのロールアップは、過去データを要約して格納する機能です。分析に使えるように維持しつつ、生データにかかるストレージコストを大きく引き下げます。全文検索Elasticsearchは、パワフルな全文検索機能で広く知られています。中核となる転置インデックスが高速処理を実現し、調整可能な関連性スコアリングや高度なクエリDSL、幅広い検索拡張など、機能性にすぐれています。倒置インデックスElasticsearchは、超高速の全文検索を実現する目的で開発された倒置インデックスと呼ばれる構造を使用します。倒置インデックスは、ドキュメントに出現するユニークなすべての単語を列挙したリストと、各単語がどのドキュメントに出現するかを列挙したリストで構成されます。倒置インデックスを作成する際、はじめに各ドキュメントのコンテンツフィールドを単語(ターム、またはトークンと呼ばれます)に分割します。次に、ユニークなすべての単語を列挙し、並べ替えたリストを作成します。最後に、各タームが出現するドキュメントをリストアップします。readの)フィールドです。ドキュメントのインデックス後を含むあらゆるタイミングで作成、修正でき、クエリの一部として定義できます。ランタイムフィールドはインデックス済みフィールドと同じインターフェースでクエリにエクスポーズされます。フィールドはデータストリーム中の一部のインデックスのランタイムフィールドにすることも、データストリーム中の他のインデックスのインデックス済みフィールドにすることも可能で、かつ、どのフィールドを使うかをクエリ側で認識する必要はありません。インデックス済みフィールドを使うとクエリを最適なパフォーマンスで実行できるのに対し、ランタイムフィールドにはインデックス済みドキュメントのデータ構造を後からフレキシブルに変更できるメリットがあり、補完的に使うことができます。ランタイムフィールドについてさらに詳しくランタイムフィールドのルックアップランタイムフィールドのルックアップを用いると、ドキュメントをリンクする両方のインデックスにキーを定義することにより、ルックアップインデックスからの情報をプライマーインデックスからの結果と柔軟に結びつけることができます。この機能は、ランタイムフィールドと同様、クエリ時に用いられ、柔軟なデータエンリッチメントを可能にします。search、CCS)で、ノードを複数のクラスターを横断する連携クライアントのように実行させることができます。クラスター横断検索ノードは、リモートクラスターに直接は加わりません。ほとんど負荷をかけずにリモートクラスターへ接続し、連携された検索リクエストを実行します。CCSについてさらに詳しく関連性スコアリングマッチするドキュメントのスコアを定義するのが類似度(関連性スコアリング/順位付けモデル)です。デフォルトで、ElasticsearchはBM25類似度を使用します。これはTF/IDFベースの高度な類似度で、(名前など)短いフィールドに最適なtf正規化に内蔵されています。この他にも、多数の類似度オプションを使用することができます。APIエンドポイントを導入しました、ベクトル類似度を活用し、よりスケーラブルで高パフォーマンスな検索を実行できます。そのからくりは、再現率とパフォーマンスのトレードオフです。再現率をわずかに犠牲にすることで、(既存の総当たり式ベクトル類似度メソッドに比べた場合に)非常に大規模なデータセットではるかにすぐれたパフォーマンスを実現させています。DSL全文検索を実行するには、頼れるクエリ言語が必要です。language)を提供しています。シンプルなクエリでタームやフレーズをマッチさせることができ、複数のクエリの組み合わせに対応する複合クエリを開発することも可能です。クエリ時にフィルターを適用して、関連性スコアの算出前にドキュメントを除外することもできます。APIを使うと、長時間かかるクエリをバックグラウンドで実行できます。クエリの進捗を把握しながら、生成された順に結果を部分的に取得して利用できます。検索結果から1つ以上のフィールドの文字列をハイライトします。クエリがマッチしている箇所が一目でわかります。強調表示をリクエストすると、レスポンスに強調表示要素が追加され、強調表示されたフィールドとフラグメントを含む検索ヒット部分を示します。より、自動入力機能や、入力と同時に検索結果を表示するエクスペリエンスが提供されています。エンドユーザーの入力と同時に関連性の高い結果へ導くナビゲーターとなり、検索精度も高くなります。自動入力についてさらに詳しく修正(スペルチェック)編集スペルチェックは、編集距離からタームを提案する予測機能を応用しています。提案されるテキストはあらかじめ分析されており、提案されるタームは、分析されたテキストトークンごとに出力されます。検索中に「もしかして~ですか?」と提案する、フレーズの入力予測機能を追加できます。ngram言語モデルに基づいて重み付けされた個別のトークンは使用しません。用語の入力予測機能に付加的なロジックを構築することにより、完全に修正されたフレーズを選択します。この入力予測機能は、共起性と頻度に基づいて取り上げるトークンを決定にすぐれた能力を発揮します。入力予測についてさらに詳しくパーコレータークエリを使ってインデックスに格納されたドキュメントを探す、というのが標準的な検索モデルです。それとは対照的に、パーコレーターを使ってインデックスに格納されたクエリにドキュメントをマッチさせることができます。percolateクエリは一部にドキュメントを含んでおり、そのドキュメントをインデックスに格納されたクエリとマッチさせるために使用します。パーコレーターについてさらに詳しくクエリプロファイラー/オプティマイザープロファイルAPIは、検索リクエストを実行中する個々のコンポーネントのタイミングについて詳しい情報を提供します。行レベルで検索リクエストがどのように実行されたかのインサイトを入手できることで、特定のリクエストが遅延した理由を把握したり、改善措置を講じることができます。プロファイルAPIについてさらに詳しく権限ベースの検索結果表示フィールドレベルのセキュリティとドキュメントレベルのセキュリティを備え、エンドユーザーの検索において、読み取りアクセスのある範囲の結果だけを表示します。具体的には、ドキュメントベースの読み取りAPIからアクセスできるフィールドとドキュメントを制限します。クエリのキャンセルKibanaに搭載されている"クエリのキャンセル"機能は、不要な処理の負荷を軽減させることでクラスター全体への影響を抑制します。ユーザーがクエリを変更/更新した場合や、ブラウザーのページを再読み込みした場合にElasticsearchリクエストの自動的なキャンセルが実行されます。検索は「最初の一歩」です。Stackのパワフルな分析機能を使って、欲しいデータを入手したり、より深い意味を見出してみましょう。アグリゲーション結果の表示や、ドキュメント間の関連性分析、閾値ベースのアラート設定といった高度な作業も、土台となるパワフルな検索のおかげで簡単に行えます。アグリゲーションアグリゲーションフレームワークが、検索クエリに基づいてアグリゲーション済みデータを提供します。たとえるなら、アグリゲーションと呼ばれるシンプルなブロックを用意しておき、それを組み合わせて複雑なデータのサマリーを構築する、そんな仕組みです。アグリゲーションを、一連のドキュメントから分析的な情報を取得する作業の単位としてとらえることができます。アグリゲーションについてさらに詳しくメトリックアグリゲーションバケットアグリゲーションパイプラインアグリゲーションマトリックスアグリゲーションジオヘクスグリッドアグリゲーションランダムサンプラーアグリゲーショングラフ探索グラフ探索APIを使って、Elasticsearchインデックス中のドキュメントや用語に関する情報を抽出/要約することができます。グラフ探索APIについて理解するベストな方法は、Kibanaでグラフを使った関係性の探索を行ってみることです。グラフ探索APIについてさらに詳しく閾値アラートElasticsearchインデックスのデータが一定時間内に指定した閾値を上回る、または下回るよう定期的にチェックするアラートを作成できます。Elasticsearchのクエリ機能をフルパワーで活用するアラートなら、データの重要な変化を見逃しません。機械学習Elasticの機械学習は、トレンドや周期性などからデータの振る舞いを自動的に、リアルタイムにモデル化し、すばやく問題を特定して原因分析を手助けします。推定により、リグレッションや分類などの教師あり機械学習プロセスをバッチ分析だけでなく、連続的に実行することができます。教育済み機械学習モデルを流入データに使えるのも、推定のおかげです。言語特定とは、訓練済みモデルを使ってテキストの言語を特定することです。推定プロセッサー内の言語特定モデルを参照することができます。言語特定についてさらに詳しく時系列データの将来予測Elasticの機械学習は、データの正常な振る舞いのベースラインを作成します。この情報を活用すれば、未来の振る舞いを予測することもできます。未来の特定の日時の数値を予測する、あるいは時系列中の値が未来に再び発生する可能性を見積もる、といった使い方が可能です。未来予測についてさらに詳しく時系列データの異常検知Elasticの機械学習機能は、データの正常な振る舞いの正確なベースラインを作成し、異常なパターンを特定することによって時系列データ分析を自動化します。異常が検知され、スコア付けされるだけではありません。機械学習の専有アルゴリズムを使用してデータ中の顕著なインフルエンサーへのリンク付けまで実行します。データ母集団における稀な振る舞い異常の通知アラートに教師なしの機械学習を組み合わせて、ルールや閾値の定義が難しい異常を検知しましょう。アラートフレームワークの異常スコアを活用し、問題が発生した場合に通知を受け取ることができます。アラートについてさらに詳しく占有数解析Elasticの機械学習機能は、指定した期間について"典型的"なユーザーやマシン、他のエンティティのプロファイルを構築します。そこから、母体データと比較して異常に振る舞う「外れ値」を特定することができます。占有数解析についてさらに詳しくログメッセージの分類アプリのログイベントは構造化されていないことが多く、また変数データを含むこともあります。Elasticの機械学習機能は、メッセージの静的な部分とクラスターの類似メッセージを同時に観測し、カテゴリー別に分類します。検出された瞬間から、Elasticの機械学習は大きな影響を及ぼす要因の特定に向けて動き出します。トランザクションに異常がある場合、問題の原因となっているクラッシュしたサーバーや、設定に誤りのあるスイッチをすばやく特定することができます。根本原因分析についてさらに詳しくデータビジュアライザーデータビジュアライザーはElasticsearchデータを深く理解する上で役立ちます。ログファイル、または既存のインデックスのメトリックやフィールドを解析し、機械学習分析に使用できるフィールドを特定することもできます。複数の検知器を使用し、高度な機械学習ジョブを作成できます。マルチメトリックジョブでインプットデータストリームを分析し、挙動をモデル化しましょう。ジョブで定義した2つの検知器に基づく分析を実行したら、あとは異常エクスプローラーで結果を表示するだけです。マルチメトリックジョブについてさらに詳しく外れ値検出API教師なしの機械学習による外れ値検出機能は、距離と密度に基づく4つの技術を使用して、"大部分"に比べて"普通ではない"データポイントを発見します。ジョブ作成APIで、外れ値を検出するデータフレーム分析ジョブを作成できます。予期しないシステム障害や、異常検知に紛らわしい結果をもたらすイベントが生じた際、望ましいスナップショットで速やかにモデルを復元できます。APMで、アプリケーションのメトリックも投入できます。初期設定に、4行コードを加えるだけ。問題箇所をすばやく確認し、自信をもってコードをプッシュできます。APMサーバーAPMサーバーは、APMエージェントからデータを受け取り、Elasticsearchドキュメントに変換します。受け取りと変換は、HTTPサーバーエンドポイントを、収集したAPMデータをストリーミングするエージェントにエクスポーズすることで行われます。APMサーバーは、APMエージェントから受け取ったイベントを検証・処理した後、データをElasticsearchドキュメントに変換して、対応するElasticsearchインデックスに格納します。APMサーバーについてさらに詳しくAPMエージェントAPMエージェントは、運用中のサービスと同じ言語のオープンソースライブラリです。他のライブラリと同じように、運用中のサービスにインストールすると、サービスコードを記録してランタイムのパフォーマンスデータとエラーを収集します。収集データは短時間バッファされ、APMサーバーに送られます。JavaScriptエージェントGoエージェントJavaエージェント.NETエージェントAPMアプリコードから問題を検索し、修正できます。ボトルネックを特定し、コードレベルの変化への注目を促すKibanaのAPMアプリがナビゲート。開発・テストのサイクルから、アプリケーションのパフォーマンス、ユーザーエクスペリエンスまで、開発のあらゆるフェーズでコードを最適化することができます。APMについてさらに詳しく分散トレーシングインフラを通過するリクエストの数はいくつ?個々の取引を結びつける分散トレーシングを使えば1つのリクエストの全体像を追うことができ、サービスの状況を明確に把握できます。パスのどこでレイテンシーが生じるか特定することで、最適化が必要なコンポーネントもおのずとわかります。目を離しているときも状況を把握できます。問題がある時も、万事うまくいっている時も、メールやSlackで通知が届きます。アラートについてさらに詳しくサービスマップサービスマップは、各サービスがどのように接続しているかを視覚的に表示し、トランザクションの平均持続時間、リクエスト率、エラー率といった高次のトランザクションメトリックのほか、CPU、メモリ使用量などの情報を提供します。サービスマップについてさらに詳しく機械学習統合APMアプリで直接機械学習ジョブを作成してみましょう。機械学習機能がデータを自動でモデル化し、異常な振る舞いをすばやく検出します。可視化Elasticsearchインデックスにあるデータを、可視化してみましょう。Kibanaは、Elasticsearchクエリをベースにした可視化を作成します。Elasticsearchの各種アグリゲーションを使用し、データを抽出処理するだけ。データのトレンドからスパイク、急な落ち込みまで、把握すべきあらゆる情報をチャートで表示してくれます。ダッシュボードKibanaのダッシュボードは可視化や検索のコレクションを表示します。ダッシュボードのコンテンツを思いのままにアレンジ、サイズ調整、編集することができ、保存後に共有することもできます。複数のダッシュボード間の移動や、Webアプリへジャンプする操作を可能にするカスタムドリルダウン機能で、アクションと意思決定を促進しましょう。Kibanaのダッシュボードについてさらに詳しくCanvasCanvasは、データを美しく表現する新しい手法です。Canvasは、データを色や形、テキスト、ユーザーの想像力と結びつけます。動的でマルチページ、ピクセルパーフェクトなデータ表現は、大型ディスプレイへの表示にも最適です。Experienceデータは、現実世界のユーザーエクスペリエンスを反映します。Webアプリケーションで観測されたパフォーマンスを定量化し、分析してみましょう。LensのUIは使いやすく、直感的。ドラッグ&ドロップの簡単な操作で、データの可視化プロセスをシンプルにします。何十億のログ行を探索する場合も、Webサイトトラフィックに潜む傾向を特定する場合も、Lensなら数クリックでデータのインサイトを入手できます。Kibanaの使用経験も、知識も必要ありません。Lensについて詳しくはこちらをご覧ください。Builder、TSVB)Elasticsearchのアグリゲーションフレームワークを最大に活用しています。無限のアグリゲーションとパイプラインアグリゲーションを組み合わせ、複雑なデータを有意義な手法で表示します。TSVBについてさらに詳しくグラフ分析Graph分析オプションで、Elasticsearchインデックスにある項目同士の関わりを見つけ出すことができます。インデックスされたターム同士の関係性を探索し、どの関係性が最も重要か確かめましょう。不正検知から"おすすめ"を提案するエンジンまで、幅広いアプリに役立てることができます。Stackを使う現場にたびたび登場するのが、「どこで?」という問いです。攻撃者からネットワークを保護するときも、特定の地域でアプリのレスポンスが低速化するときも、タクシーで帰宅するときでさえ、地理データの検索が重要な役割を果たします。地理空間分析とマップについてさらに詳しくコンテナー監視アプリケーションや環境は日々進化しています。Stackも進化しました。コンテナー監視についてさらに詳しくKibanaプラグインコミュニティ発のプラグインモジュールで、さらにたくさんの機能をKibanaに追加してみましょう。オープンソースのプラグインを、幅広いアプリや機能拡張、可視化などで使うことができます。次のようなプラグインがあります。他多数データインポートチュートリアルわかりやすいチュートリアルで、データセットをElasticsearchに読み込む方法を学習できます。インデックスパターンの定義や、データの探索と発見、可視化やダッシュボードの作成方法も紹介されています。データインポートチュートリアルについてさらに詳しくKibanaランタイムフィールドエディターKibanaランタイムフィールドエディターでは、アナリストがElasticsearchのランタイムフィールド機能を使用して独自のカスタムフィールドを即座に追加することができます。Lensで使用でき、ランタイムフィールドの作成、編集、または削除が可能です。共有と共同作業Kibanaで可視化したデータを上司やチームに共有しましょう。上司の上司や、クライアント、コンプライアンス管理者、ビジネスパートナーまで、共有したい相手に簡単にシェアできます。ダッシュボードへの埋め込みや、リンクでの共有、PDFやPNG、CSVへの出力まで、共有のオプションも豊富。KibanaのSpacesが、ダッシュボードや可視化レポートの管理をサポートします。埋込ダッシュボードKibanaなら、ダッシュボード関連の操作も簡単です。ダッシュボードのリンクを共有したり、Webページにiframeでダッシュボードを埋め込んだりでき、ライブデータのダッシュボードにも、現在時の静的なスナップショットにも対応しています。built-inロールを使用して、ログインしたユーザーがKibanaに表示できるコンテンツを制限できます。Kibanaのkibana_dashboard_only_userロールには、読み取り限定のアクセス許可が事前設定されています。このロールのユーザーがダッシュボードを開くと閲覧エクスペリエンスに制約があり、[編集]や[作成]のメニューは非表示になっています。ダッシュボードオンリーモードについてさらに詳しくSpaceKibanaのSpaceを使用して、ダッシュボードやその他の保存済みオブジェクトを、わかりやすいカテゴリー別に整理することができます。いずれかのspaceを開くと、そのspaceに保存されているダッシュボードとオブジェクトだけが表示されます。セキュリティ面でも役立ちます。ユーザーからspaceへのアクセス権限を個別に制御できる、追加の保護レイヤーとして機能します。Spaceのカスタムバナーカスタムバナーは、異なるロール、チーム、機能などに応じてKibanaのSpaceを差別化するのに役立ちます。Spaceへの特定のお知らせやメッセージをカスタム作成することができ、また、どのSpaceにいるのかをユーザーがすばやく確認するのに役立ちます。Spaceのカスタムバナーについてさらに詳しくCSVファイルへのエクスポート[ディスカバー]に保存した検索をCSVファイルにエクスポートし、外部のテキストエディターで使うことができます。保存した検索のエクスポートについてさらに詳しくタグ簡単にタグを作成し、ダッシュボードや視覚化に追加して、コンテンツ管理を効率化できます。タグの作成と管理の詳細PDF/PNGレポートKibanaの可視化やダッシュボードは、すばやくレポート生成してPDFやPNGに保存することができます。オンデマンドでレポートを取得したり、後で生成するようにスケジュール設定したり、特定の条件で生成されるように設定できるほか、関係者との自動共有も設定できます。レポートについてさらに詳しく探索と可視化Elasticマップマップアプリを使って、地理空間データを大規模に、高速かつリアルタイムにパースすることができます。1つのマップに複数のレイヤーやインデックスを使用する機能や、生ドキュメントのプロッティング、動的なクライアントサイドスタイリング、複数レイヤーを縦断する検索など、多彩な機能を通じてデータを手軽に把握し、監視することができます。マップレイヤーKibanaのマップアプリは、複数の異なるインデックスを複層レイヤーとして1つのビューに表示します。同一の地図上にレイヤーを重ねることで、まとめて、リアルタイムに検索したり、絞り込むことが可能です。コロプレスレイヤーやヒートマップレイヤー、タイルレイヤー、ベクターレイヤーを含む豊富なオプションを搭載。“APMデータのオブザーバビリティ”など、ユースケースに特化したレイヤーも使えます。マップレイヤーについてさらに詳しくベクトルタイルベクトルタイルを使ってマップを複数のタイルに分割することで最良のパフォーマンスを実現し、他の手法よりもスムーズにズームを実行できます。新登場のポリゴンレイヤーでは、デフォルトで[ベクトルタイルを使う]の設定が有効化されています。拡大縮小のオプションを変更すれば、10,000個のレコードを表示することも可能です。Elasticマップのベクトルタイルについてさらに詳しくカスタムリージョンマップベクターシェイプの境界とグラデーションカラーでテーマに合わせたリージョンマップを作成できます。お好みのスタイルを選び、カスタムロケーションデータに適用してみましょう。Serviceはマップアプリをはじめ、Kibanaで地理空間データを可視化するすべてのサービスを支えています。地理データの可視化に欠かせないベースマップタイルや、シェイプファイル、その他の主要な機能を提供します。Kibanaのデフォルト配布では、マップ上で最大18倍まで拡大することができます。Serviceのベースマップと境界を使用します。Elasticマップサーバーについてさらに詳しくGeoJSONアップロードGeoJSONアップロード機能はシンプルで使いやすく、堅牢です。Elasticsearchにデータを直接インジェストし、この機能を使用することで、ポイントやシェイプ、コンテンツでエンリッチ化されたGeoJSONファイルを地図にドラッグアンドドロップし、瞬時に可視化できます。GeoJSONで定義した境界を使ってメールやWebアプリアラートを有効化し、データ主導のオブジェクト移動を追跡することもできます。GeoJSONアップロードについてさらに詳しく地理アラートエンティティが地理的境界を出入りしたり超えたりした場合に通知をトリガーします。エンティティが特定の境界内に留まっている間、その位置を追跡します。地理アラートについてさらに詳しくシェイプファイルのアップロードマップアプリに内蔵されたシンプルかつパワフルなアップローダーを使って、Elasticでシェイプファイルを読み込みできます。地域の公開データや境界線データを手軽に読み込んで、分析や比較に活用してみましょう。Stackには、一般的なデータソースにそのまま使えるダッシュボードがあらかじめ用意されています。FilebeatとWinlogbeatでログを送ると、ElasticsearchにインデックスされてKibanaが可視化。ログシッパー(Filebeat)Filebeatでログやファイルを転送して1か所にまとめれば、シンプルなものはシンプルに扱うことができます。Filebeatにはauditd、Apache、NGINX、System、MySQLなど、多様なモジュールがあります。使われる形式のログを、1つのコマンドで簡単に収集、パース、可視化できます。Filebeatについてさらに詳しくLogsダッシュボードFilebeatダッシュボードサンプルを使って、Kibanaで簡単にログデータの探索をはじめることができます。事前構成済みのダッシュボードではじめて必要に応じてカスタマイズするスタイルなら、セットアップに時間がかかりません。機械学習で実施するログレート分析は、ログレートが正常な範囲外にある時間を自動で強調表示することで、担当者による早期のログの異常の特定や、調査に役立ちます。ログの異常についてさらに詳しくLogsアプリLogsアプリを使うと、コンパクト&カスタマイズ可能な画面上でリアルタイムにログをtailすることができます。このログデータはメトリックアプリ内でメトリックと相関付けされ、問題の診断も簡単に行うことができます。Metricsで、CPUの使用量やシステム負荷、メモリ使用量、ネットワークトラフィックといった高次のメトリックを簡単に追跡することができます。サーバーやコンテナー、サービス全体のヘルスの把握に役立ちます。メトリックシッパー(Metricbeat)Metricbeatはサーバーにインストールできる軽量のシッパーです。サーバーで運用中のシステムや実行中のサービスからメトリックを定期的に収集します。CPUやメモリ、RedisやNGINXなど、システム統計情報を軽快に転送します。Metricbeatについてさらに詳しくメトリックダッシュボードMetricbeatダッシュボードサンプルを使って、Kibanaで運用するサービスの監視を簡単にはじめることができます。事前構成済みのダッシュボードではじめて必要に応じてカスタマイズするスタイルなら、セットアップに時間がかかりません。メトリックダッシュボードについてさらに詳しくMetricsアプリのアラート統合メトリック用の閾値アラートを作成し、リアルタイムなフィードバックを受け取りましょう。KibanaのMetricsアプリから直接作成できます。文書やログ、Slack、シンプルなWebフックなど、お好みの通知方法を指定可能です。UIを1クリックするだけ。インフラストラクチャーの一般的な問題を異常検知で捉えます。機械学習についてさらに詳しくMetricsアプリElasticsearchにメトリックデータを投入するセットアップが完了したら、Kibanaのメトリックアプリで監視して、リアルタイムに問題を特定しましょう。Uptimeは、ログ、メトリック、APMが提供するリッチなコンテクストとアベイラビリティデータを組み合わせて活用します。シンプルな方法で点と点を結び、アクティビティ同士を関連付けて問題をすばやく解決します。アップタイムモニター(Heartbeat)Heartbeatはリモートサーバーにインストールする軽量なデーモンです。サービスのステータスを定期的に確認することにより、サービスを提供できているか判断します。Heartbeatが投入するサーバーデータをKibanaのアップタイムダッシュボードやアプリに表示することができます。Heartbeatについてさらに詳しくアップタイムダッシュボードHeartbeatダッシュボードサンプルを使って、運用するサービスのステータスをKibanaで簡単に可視化できます。事前構成済みのダッシュボードを利用して導入した後、必要に応じてカスタマイズするアプローチなら、セットアップに時間がかかりません。アップタイムダッシュボードについてさらに詳しくUptimeアプリのアラート統合Uptimeアプリ内で直接、アベイラビリティデータに閾値ベースのアラートを手軽に作成しましょう。ドキュメント、ログ、Slack、シンプルなWebフックなど、好みの通知方法を選ぶことができます。証明書の監視SSLやTSL証明書の有効期限終了が近づいているか確認し、通知を送信します。アップライムアプリ内でダイレクトにサービスの可用性を維持できます。シンセティック監視たとえばeコマースサイトの決済フローのように、複数のステップにわたるユーザーエクスペリエンスをシミュレートしてみましょう。各ステップの詳細なステータスを捉えて問題領域を特定することにより、卓越したデジタルエクスペリエンスを生み出すことができます。シンセティックテストについてさらに詳しくアップタイムアプリKibanaのアップタイムアプリで、ネットワークや環境内で生じる障害と接続の問題をすみやかに特定/診断することができます。便利なインターフェースで、ホストやサービス、Webサイト、APIなどを手軽に監視できます。アップタイムアプリについてさらに詳しく探索と可視化Elasticセキュリティセキュリティ運用チーム、脅威ハンティングチーム、IT運用チームまで幅広く支援します。必要なツールを配備しましょう。ホストでランサムウェアやマルウェアの攻撃を防御し、脅威と異常の検知を自動化するほか、担当者のスムーズな対応をサポート。直感的なワークフローや内蔵のケースマネジメント機能、SOARやチケット発行プラットフォームとの統合機能を搭載し、有事にも適切な対応を取ることができます。Schema(ECS)を使って、多様なソースからくるデータを一元的に分析できます。検知ルール、機械学習ジョブ、ダッシュボード、その他のセキュリティコンテンツを幅広いデータに適用できるだけでなく、検索範囲を精緻に絞り込むことができ、フィールド名も覚えやすくなります。Schemaに関するビデオを視聴するホストセキュリティ分析Elasticセキュリティは、エンドポイントデータやコンテクストをインタラクティブなビジュアライゼーションと表で示します。Endpointなど各社のテクノロジーからくるデータも有効に活用できます。Viewでシェルアクティビティを調べ、Analyzerでプロセスを調べます。ホストセキュリティ分析についてさらに詳しくネットワークセキュリティ分析Elasticセキュリティは、インタラクティブなマップやグラフ、イベントテーブルを通しネットワークセキュリティ監視を行います。Pointといったベンダー供給のデバイス、AWS、Azure、GCP、Cloudflareなどのクラウドサービスを含む、多数のネットワークセキュリティソリューションをサポートします。8.2はユーザーアクティビティに対する可視性を提供し、担当者が内部脅威、アカウントの乗っ取り、権限の乱用、および関連するベクトルに対処するのを支援します。ユーザーデータは厳選されたビジュアライゼーションや表で示され、環境全体のユーザーデータを用いてセキュリティ監視が行われます。ユーザーコンテクストがハンティングまたは調査フロー内に表示され、詳しい内容に迅速にアクセスすることが可能です。タイムラインイベント探索アナリストはタイムラインイベント探索を使用して、イベントの表示、フィルタリング、相関付け、注釈といった操作を実行し、データを収集して根本原因や攻撃範囲を明らかにし、調査員の協調を促し、情報を即時または長期的に参照できるようパッケージ化することができます。タイムラインイベント探索についてさらに詳しくケースマネジメント組み込み型ケースマネジメントワークフローは、検知と対応の管理を強化します。Elasticセキュリティでケースを簡単に作成、更新、タグ付け、コメント、終了できるほか、外部システムとケースを統合することも可能です。Resilient、Jira、Swimlane、ServiceNow向け各種サポートを使って、既存のワークフローと統合できます。活用事例はこちら検知エンジン検知エンジンは、テクニックベースの脅威検知を実行し、高い異常値についてアラートを発行します。Elasticセキュリティのセキュリティ調査エンジニアが開発・テストした事前構築済みルールにより、迅速な導入が可能です。Schema(ECS)用にフォーマットされたあらゆるデータ向けに、カスタムルールを作成することも可能です。機械学習で異常検知を自動化することにより、検知とハンティングのワークフローを強化できます。多彩な事前構築済みの機械学習ジョブを使ってすばやく導入可能です。機械学習の成果を、アラートや調査のワークフローでも活用できます。Agentによる振る舞い分析を活用するランサムウェア防御機能を搭載しています。この機能は、低レベルのシステムプロセスからデータを分析することで、Windowsシステムへのランサムウェア攻撃を検出して阻止します。これは、広く蔓延しているさまざまなランサムウェアに有効です。Agentは悪意ある振る舞いからの保護機能を提供し、巧妙な脅威をエンドポイントで抑止します。膨大な数の攻撃で利用された攻撃テクニックに対する防御分析を通じ、Linux、Windows、macOSのホストに新たな保護レイヤーを提供します。悪意ある振る舞いからの保護機能は、脅威発動後の振る舞いを動的に防御して巧妙な脅威をただちに抑止することにより、既存のマルウェアおよびランサムウェア防御を補完する立役者となります。マルウェア対策シグネチャーレス型マルウェア防御は、Linux、Windows、macOSホスト上の悪意のある実行ファイルを瞬時に停止させます。Agentによって提供されます。Agentはセキュリティデータの収集も行い、ホストベースのインスペクションや対応を可能にします。Kibanaベースの管理機能により、デプロイと管理が合理化されます。Agentが搭載するメモリ保護機能は、シェルコードを経由するプロセスインジェクションに使われる多数のテクニックを抑止します。スレッド実行ハイジャッキングや非同期プロシージャコール、プロセスハロウイング、プロセスドッペルギャンギングなどのサブテクニックを抑止する仕組みです。メモリ脅威保護メモリ脅威保護は、シェルコードやスレッド実行ハイジャッキング、非同期プロシージャコール、プロセスハロウイング、プロセスドッペルギャンギングなど従来型の防御機構を回避する高度な脅威の停止に多く使われているテクニックです。osqueryの集中管理Elasticセキュリティを使って、すべてのエンドポイントにosqueryを手軽にデプロイできます。LinuxからWindows、macOSまでのホスト全体にわたり、効率的にハンティングと検査を実行しましょう。この手法を使ってリッチなホストデータに直接アクセスし、さらに事前構築やカスタムのSQLクエリで検索をかけてElasticセキュリティの分析に役立てることができます。Agentを使ってネットワークアクティビティを収集できます。ネットワークの境界内はもちろん、ファイアウォールではわからない境界の外のトラフィックも明らかにして分析しましょう。セキュリティチームが、水飲み場型攻撃やデータの抜き出し、DNS攻撃などの悪意のある振る舞いの解決に役立ちます。Analyzer統合機能には、Npcapに使える無償の商業用ライセンスが含まれています。NpcapはWindows用のパケットスニッフィングライブラリとして広範にデプロイされており、OSを問わず、すべてのホストのネットワークについて可視性を確立します。ワークロードセッション監査eBPFベースの軽量なエージェントを活用すれば、ハイブリッドクラウドのワークロードやクラウドネイティブなアプリを安全に保つことができます。ランタイムの脅威は、プリビルトやカスタムの検知ルールと機械学習モデルを使って自動的に検知しましょう。ターミナルスタイルの画面に表示されるリッチなコンテクストが調査を手助けします。KSPMデータ収集&CISポスチャー所見マルチクラウドな環境で、セキュリティポスチャーへの包括的な可視性を確立する方法があります。Controlsに照らして確認し、緩和策のガイダンスに沿って対応しましょう。速やかに改善を実施できます。Foundationの商標です。