JP6889289B2 - 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 - Google Patents
計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 Download PDFInfo
- Publication number
- JP6889289B2 JP6889289B2 JP2020004714A JP2020004714A JP6889289B2 JP 6889289 B2 JP6889289 B2 JP 6889289B2 JP 2020004714 A JP2020004714 A JP 2020004714A JP 2020004714 A JP2020004714 A JP 2020004714A JP 6889289 B2 JP6889289 B2 JP 6889289B2
- Authority
- JP
- Japan
- Prior art keywords
- data stream
- data
- block
- language program
- metadata
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 26
- 238000005259 measurement Methods 0.000 claims description 132
- 238000004458 analytical method Methods 0.000 claims description 120
- 238000000034 method Methods 0.000 claims description 94
- 230000008569 process Effects 0.000 claims description 56
- 230000014509 gene expression Effects 0.000 claims description 36
- 230000008859 change Effects 0.000 claims description 24
- 238000003860 storage Methods 0.000 claims description 24
- 230000002776 aggregation Effects 0.000 claims description 6
- 238000004220 aggregation Methods 0.000 claims description 6
- 230000003252 repetitive effect Effects 0.000 claims 3
- 238000004364 calculation method Methods 0.000 description 42
- 238000011161 development Methods 0.000 description 41
- 238000013139 quantization Methods 0.000 description 39
- 230000006870 function Effects 0.000 description 13
- 230000009471 action Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 230000000737 periodic effect Effects 0.000 description 9
- 238000011156 evaluation Methods 0.000 description 7
- 230000004931 aggregating effect Effects 0.000 description 6
- 239000000872 buffer Substances 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 206010016531 fetishism Diseases 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000026676 system process Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000002547 anomalous effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000011867 re-evaluation Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/40—Transformation of program code
- G06F8/41—Compilation
- G06F8/44—Encoding
- G06F8/443—Optimisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
- G06F11/3086—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves the use of self describing data formats, i.e. metadata, markup languages, human readable formats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3604—Software analysis for verifying properties of programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
- G06F16/164—File meta data generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24568—Data stream processing; Continuous queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/466—Transaction processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/542—Event management; Broadcasting; Multicasting; Notifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
- G06F11/3072—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/81—Threshold
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/835—Timestamp
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/86—Event-based monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/88—Monitoring involving counting
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Debugging And Monitoring (AREA)
- Stored Programmes (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、実施形態による、計測手段が組み込まれたソフトウェアに基づいて報告を行うための全体的なシステム環境を示している。この全体的なシステム環境は、計測分析システム100、1つまたは複数の開発システム120、管理システム160、および報告システム150を含む。その他の実施形態においては、図1において示されているよりも多くのコンポーネントまたは少ないコンポーネントが使用されることが可能である。たとえば、開発システム120、管理システム160、および報告システム150は、ネットワーク(図1においては示されていない)を介して計測分析システム100と対話することができる。さらに、図1において示されているそれぞれのシステムのさらに多くのインスタンスまたはさらに少ないインスタンスが存在することが可能であり、たとえば、複数の報告システム150が存在することが可能である。
counter 1=createCounter(source=“web 1”, metric=“metric 1”);
データストリームは、データストリームに関連付けられている次元の値を表す座標のセットを使用することによって識別されることが可能である。次元とは、値のセットの1つの値を取ることができるデータストリームのプロパティーを指す。それぞれのデータストリームは、次元に関する値に関連付けられることが可能である。たとえば、次元は、データストリームのソース、またはデータストリームに関連付けられているメトリック名であることが可能である。データストリームのソースは、サーバ名、サービス名などによって識別されることが可能である。メトリック名の例は、cpu(中央処理装置)負荷、キャッシュミス、キャッシュヒットなどである。次元の値は、データストリームの座標値とも呼ばれる。座標値は、メタデータストア230において格納されているメタデータ属性として表されることが可能である。ソースおよびメトリックという2つの次元を与えられると、ソースおよびメトリックを表す2つの座標、たとえば、(server 1, cpu_load)または(server2, memory_usage)を提供することによって、データストリームが識別されることが可能である。
図2は、実施形態による、計測手段が組み込まれたソフトウェアから受信されたデータストリームを処理するためのデータストリーム言語プログラムを実行するためのシステムのアーキテクチャーを示している。計測分析システム100は、インターフェースモジュール210、量子化モジュール240、メタデータモジュール220、メタデータストア230、データポイントルーティングモジュール250、アナリティクスエンジン270、ユーザインターフェースマネージャー280、データストリーム言語プロセッサ200、時系列データストア260、およびソフトウェアバス290を含む。その他の実施形態においては、計測分析システム100は、本明細書において記述されていないその他のモジュールを含むことができる。特定のモジュールによって提供されるものとして示されている機能は、代わりにその他のモジュールによって実施されることが可能である。
データストリーム言語を使用して指定されるプログラムは、ブロックと呼ばれる計算の単位を含む。それぞれのブロックは、データブロックによって実行される特定の処理または計算に関連付けられている。それぞれのブロックは、1つまたは複数の入力ポートおよび1つまたは複数の出力ポートを有することもできる。ブロックは、入力ポートを介して入力を受信し、そのデータを使用して特定の計算を実行し、その計算の結果を出力ポートへ送信する。このプロセスは、事前に指定された周期性で繰り返される。したがって、入力ポートは、データをブロックに提供するためのメカニズムの役割を果たし、出力ポートは、ブロックのデータを出力するためのメカニズムの役割を果たす。
図4は、実施形態による、データストリーム言語の特徴を示すためのデータストリーム言語プログラムの例を示している。図4は、データストリーム言語プログラムをブロックという点から表している。図4において示されているデータストリーム言語プログラムは、下記のように指定されることが可能である。
find(“source:analytics*”)→fetch
→groupby(“datacenter”)
→stats!mean
→publish
図5は、実施形態による、データストリームから受信されたデータをデータストリーム言語プログラムに基づいて処理するための計測分析システムの全体的なプロセスを示している。メタデータモジュール220は、データストリームについて記述するメタデータを510で受信する。メタデータ定義は、データストリームそのもののデータから独立して受信される。たとえば、データストリームは、いかなるプロパティー(たとえば、名前/値ペア)も提供することなく、データ値と、そのデータ値に関連付けられているタイムスタンプとを含むタプルを単に提供することができる。メタデータモジュール220は、データストリームについて記述するプロパティーを、そのデータストリームを提供しているソースとは異なるソースから受信する。たとえば、データストリームは、開発システム120上で実行している計測手段が組み込まれたソフトウェアのインスタンスによって提供され、メタデータ定義は、管理システム160を介してシステム管理者によって提供されることが可能である。
入力データストリームの量子化は、量子化されたデータストリームを使用してデータの処理を簡略化する。たとえば、それぞれのタイムインターバルに関して、受信された複数のデータストリームに基づくアグリゲート値が決定されることが可能である。これは、特定のタイムインターバルに関して複数のデータストリームにわたってデータをさらにアグリゲートすることによって実行される。実施形態においては、入力データストリームの量子化は、それぞれのタイムインターバルの終わりに実行され、それによって、そのタイムインターバルに関する量子化されたデータが、処理に利用できるようになる。
実施形態においては、計測分析システム100は、メトリックデータストリームおよびイベントデータストリームという2つのタイプのデータストリームをサポートする。イベントは、典型的には、システムにおいて発生している例外的な状況、たとえば、特定のしきい値を超過している負荷、または特定のしきい値を超過しているメモリ使用状況を指す。イベントは、システムにおいて、たとえば、開発システム120のシステム管理者によって実行される特定のアクションを指す場合もある。メトリックデータストリームは、計測手段が組み込まれたソフトウェアから入手されること、または計測手段が組み込まれたソフトウェアから入手されたメトリックデータストリームから得られることが可能であるメトリックの値を表すデータを含む。本明細書において言及されるデータストリームは、別段の記載がない限り、メトリックデータストリームである。メトリックデータストリームは、メトリック時系列とも呼ばれ、イベントデータストリームは、イベント時系列とも呼ばれる。
findブロックは、データストリーム言語プログラムに関して入力されるデータストリームの動的な選択を可能にする。findブロックは、データストリームを識別するための検索条件を指定する。実施形態においては、検索条件は、データストリームについて記述する属性(またはメタデータタグ)に基づく表現である。これらの属性は、データストリームの一部として受信されて、または、たとえば計測分析システム100に加えられるメタデータとして、データストリームに関連付けられて、メタデータストア230において格納されることが可能である。検索条件を実行することによって識別されたデータストリームは、入力としてデータストリーム言語プログラムの後続のブロックへ提供される。
実施形態においては、データストリーム言語プログラムは、データストリームの所与のセットからデータを取り出すためのfetchブロックを含む。典型的には、fetchブロックは、データストリーム言語プログラムのデータパイプラインにおいてfindブロックの後に配置される。言い換えれば、findブロックの出力は、入力としてfetchブロックへ提供される。したがってfetchブロックは、findブロックを処理した結果として探索モジュール310によって識別されたデータストリームのセットからデータを取り出す。フェッチモジュール320は、fetchブロックを実行する。
図12は、実施形態による、データストリームのデータをグループ化して結果データストリームのセットを生成するためのプロセスを示している。グループ化ステートメントが、たとえば図4において示されているようにgroupbyブロックを使用して、データストリーム言語プログラムに含まれることが可能である。データストリーム言語プログラムのグループ化ステートメントは、データストリームについて記述する1つまたは複数のメタデータ属性を指定する。groupbyブロックは、データストリームのそれぞれのグループに関して実行されるアグリゲート計算に関連付けられている。
実施形態によれば、データストリーム言語プログラムは、計測分析システム100のその他のコンポーネントにデータストリームを提供することによってデータストリーム言語プログラムの実行の結果に基づいて1つまたは複数のデータストリームを発行する発行コマンド(すなわち、publishブロック)を含む。たとえば、データストリーム言語プログラムによって生成されたデータストリームは、ユーザインターフェースに対して発行されてリアルタイムのチャートまたはレポートとして提示されることが可能である。生成されたデータストリームは、第一級市民として表される。言い換えれば、生成されたデータストリームは、計測分析システム100によって開発システム120の計測手段が組み込まれたソフトウェアから受信されたデータストリームと同じように表される。
find(“source:analytics*”, “metric:load”))→
fetch()→
groupby(“datacenter”)→
stats!mean→
publish(“dc_load”)
データストリーム言語プログラムは、データストリームのセットのデータがしきい値と比較されることを可能にするthresholdブロックをサポートする。比較されるデータストリームは、開発システム120の計測手段が組み込まれたソフトウェアから計測分析システム100によって受信されたデータストリーム、またはデータストリーム言語プログラムの1つまたは複数のブロックの実行の結果として入手されたデータストリームであることが可能である。thresholdブロックは、データポートおよびしきい値ポートを含む。データポートは、データ値を表す1つまたは複数のデータストリームを受信する。しきい値ポートは、しきい値を表す1つまたは複数のデータストリームを受信する。thresholdブロックは、データ値をしきい値と比較して、データ値が、しきい値によって指定されている範囲内にあるかどうかを決定する。実施形態においては、thresholdブロックは、複数のしきい値ポートを含む。たとえば、thresholdブロックは、低しきい値ポートおよび高しきい値ポートという2つのしきい値ポートを含むことができる。thresholdブロックは、データ値が、高しきい値ポートにおいて受信されたしきい値を下回っているかどうか、および低しきい値ポートにおいて受信されたしきい値を上回っているかどうかを決定する。
データストリーム言語の既存のビルトインブロックを組み合わせることによって、カスタマイズされたブロックがユーザによって指定されることが可能である。カスタマイズされたブロックは、マクロブロックまたはカスタマイズされたマクロブロックとも呼ばれる。カスタマイズされたマクロブロックを定義できることは、データストリーム言語を拡張可能にする。カスタマイズされたブロックは、ビルトインブロックと同様、データストリーム言語プログラムに含まれることが可能である。カスタマイズされたブロックは、その他のカスタマイズされたマクロブロックを使用して、カスタマイズされたマクロブロックの任意のネスティングを可能にすることができる。ユーザは、カスタマイズされたブロックを使用して任意のアブストラクションを指定することができる。カスタマイズされたブロックは、そのカスタマイズされたマクロブロックを含むデータストリーム言語プログラムを実行するジョブに関して指定されている周期性で実行される。カスタマイズドブロックモジュール390は、それぞれのタイムインターバルに関して、カスタマイズされたマクロブロックのそれぞれの入力ポートに関する入力値を決定する。
いくつかの実施形態においては、計測分析システム100は、データストリームに基づくレポートを見ることに関心があるエンドユーザのためにデータストリーム言語プログラムを生成するユーザインターフェースを提供する。ユーザは、データストリーム言語の複雑さを隠すユーザフレンドリーなユーザインターフェースを提供される。計測分析システムによって提供されたユーザインターフェースは、レポートを生成すること、ロールアップを実行すること、データストリームをグループ化することなどを行うためのメトリックを選択するなどのアクションをユーザが取ることを可能にするさまざまなウィジェットを示している。
本発明の図および記述は、本発明を明確に理解することに関連している要素を例示するように簡略化されており、その一方で明確さの目的から、典型的なシステムにおいて見受けられるその他の多くの要素を除外しているということを理解されたい。その他の要素および/またはステップも、本発明を実施する上で望ましく、および/または必要とされるということを当技術分野における標準的な技術者なら認識することができる。しかしながら、そのような要素およびステップは当技術分野においてよく知られているので、ならびにそれらは、本発明のさらによい理解を容易にするものではないので、そのような要素およびステップの論考は、本明細書においては提供されていない。本明細書における開示は、当業者に知られているそのような要素および方法に対するすべてのそのような変形形態および修正形態にも向けられている。
Claims (40)
- データストリーム言語プログラムを使用してデータストリームの動的に変わるセットを処理するための方法であって、
複数のデータストリームについて記述するメタデータを計測分析システムによって格納するステップと、
データストリーム言語を使用して指定された命令のセットを含むデータストリーム言語プログラムを受信するステップであって、前記命令は、検索式に関連付けられているfindブロックを含み、前記検索式は、データストリームに関連付けられているメタデータ属性に基づく、受信するステップと、
前記検索式を評価して、前記検索式に適合する前記複数のデータストリームからのデータストリームのセットを識別するステップと、
前記データストリーム言語プログラムを繰り返し実行するステップであって、前記実行は、
データストリームの前記識別されたセットのそれぞれのデータストリームからデータ値を受信するステップ、
前記データストリーム言語プログラムのそれぞれのブロックを実行するステップ、
前記実行に基づいて1つまたは複数の結果データ値を生成するステップであって、前記結果データ値は、前記データストリーム言語プログラムによって生成される結果データストリームに対応する、生成するステップ、および
前記1つまたは複数の結果データ値を格納するステップを含む、繰り返し実行するステップとを含むことを特徴とする方法。 - 前記検索式は、前記データストリーム言語プログラムの前記実行中に繰り返し評価されることを特徴とする請求項1に記載の方法。
- 第1のタイムインターバル中に評価された識別されたデータストリームの前記セットは、第2のタイムインターバル中に評価された識別されたデータストリームの前記セットとは異なることを特徴とする請求項2に記載の方法。
- 前記findブロックは、周期性に関連付けられており、前記検索式は、前記findブロックに関連付けられている周期性に基づいて決定されたそれぞれのタイムインターバルに関して周期的に評価されることを特徴とする請求項2に記載の方法。
- 前記検索式は、前記データストリームに関連付けられているメタデータにおける変化に応答して評価されることを特徴とする請求項2に記載の方法。
- 前記検索式は、前記複数のデータストリームにおける変化に応答して評価され、前記変化は、データストリームの追加またはデータストリームの削除を含むことを特徴とする請求項2に記載の方法。
- 前記検索式は、前記検索式の仕様における変化に応答して評価されることを特徴とする請求項2に記載の方法。
- 前記findブロックが実行される割合は、前記データストリーム言語プログラムの1つまたは複数のその他のブロックが実行される割合とは異なることを特徴とする請求項7に記載の方法。
- 前記複数のデータストリームは、外部システムから受信されるデータストリームを含むことを特徴とする請求項1に記載の方法。
- 前記複数のデータストリームは、別のデータストリーム言語プログラムの実行の結果として生成されるデータストリームを含むことを特徴とする請求項1に記載の方法。
- 前記検索式は、データストリームに関連付けられているメタデータに基づく正規表現であることを特徴とする請求項1に記載の方法。
- その上に命令を格納しているコンピュータ可読非一時的ストレージメディアであって、前記命令は、プロセッサによって実行されたときに、
複数のデータストリームを計測分析システムによって格納するステップであって、それぞれのデータストリームはメタデータ属性に関連付けられている、格納するステップと、
データストリーム言語を使用して指定された命令のセットを含むデータストリーム言語プログラムを受信するステップであって、前記命令は、検索式に関連付けられているfindブロックを含み、前記検索式は、データストリームに関連付けられているメタデータ属性に基づく、受信するステップと、
前記検索式を評価して、前記検索式に適合する前記複数のデータストリームからのデータストリームのセットを識別するステップと、
前記データストリーム言語プログラムを繰り返し実行するステップであって、前記実行は、
データストリームの前記識別されたセットのそれぞれのデータストリームからデータ値を受信するステップ、
前記データストリーム言語プログラムのそれぞれのブロックを実行するステップ、
前記実行に基づいて1つまたは複数の結果データ値を生成するステップであって、前記結果データ値は、前記データストリーム言語プログラムによって生成される結果データストリームに対応する、生成するステップ、および
前記1つまたは複数の結果データ値を格納するステップを含む、繰り返し実行するステップとを前記プロセッサに実行させることを特徴とするコンピュータ可読非一時的ストレージメディア。 - 前記検索式は、前記データストリーム言語プログラムの前記実行中に繰り返し評価されることを特徴とする請求項12に記載のコンピュータ可読非一時的ストレージメディア。
- 第1のタイムインターバル中に評価された識別されたデータストリームの前記セットは、第2のタイムインターバル中に評価された識別されたデータストリームの前記セットとは異なることを特徴とする請求項13に記載のコンピュータ可読非一時的ストレージメディア。
- 前記findブロックは、周期性に関連付けられており、前記検索式は、前記findブロックに関連付けられている周期性に基づいて決定されたそれぞれのタイムインターバルに関して周期的に評価されることを特徴とする請求項13に記載のコンピュータ可読非一時的ストレージメディア。
- 前記検索式は、前記データストリームに関連付けられているメタデータにおける変化に応答して評価されることを特徴とする請求項12に記載のコンピュータ可読非一時的ストレージメディア。
- 前記検索式は、前記複数のデータストリームにおける変化に応答して評価され、前記変化は、データストリームの追加またはデータストリームの削除を含むことを特徴とする請求項12に記載のコンピュータ可読非一時的ストレージメディア。
- 前記findブロックは、周期性に関連付けられており、前記検索式は、前記findブロックに関連付けられている周期性に基づいて決定されたそれぞれのタイムインターバルに関して周期的に評価されることを特徴とする請求項12に記載のコンピュータ可読非一時的ストレージメディア。
- 前記findブロックが実行される割合は、前記データストリーム言語プログラムの1つまたは複数のその他のブロックが実行される割合とは異なることを特徴とする請求項18に記載のコンピュータ可読非一時的ストレージメディア。
- 計測手段が組み込まれたソフトウェアによって生成されたデータを処理するためのコンピュータ実施システムであって、
コンピュータプロセッサと、
その上に命令を格納しているコンピュータ可読非一時的ストレージメディアであって、前記命令は、プロセッサによって実行されたときに、
複数のデータストリームを計測分析システムによって格納するステップであって、それぞれのデータストリームはメタデータ属性に関連付けられている、格納するステップ、
データストリーム言語を使用して指定された命令のセットを含むデータストリーム言語プログラムを受信するステップであって、前記命令は、検索式に関連付けられているfindブロックを含み、前記検索式は、データストリームに関連付けられているメタデータ属性に基づく、受信するステップ、
前記検索式を評価して、前記検索式に適合する前記複数のデータストリームからのデータストリームのセットを識別するステップ、ならびに
前記データストリーム言語プログラムを繰り返し実行するステップであって、前記実行は、
データストリームの前記識別されたセットのそれぞれのデータストリームからデータ値を受信するステップ、
前記データストリーム言語プログラムのそれぞれのブロックを実行するステップ、
前記実行に基づいて1つまたは複数の結果データ値を生成するステップであって、前記結果データ値は、前記データストリーム言語プログラムによって生成される結果データストリームに対応する、生成するステップ、および
前記1つまたは複数の結果データ値を格納するステップを含む、繰り返し実行するステップを前記プロセッサに実行させるコンピュータ可読非一時的ストレージメディアとを含むことを特徴とするシステム。 - データストリーム言語プログラムによって生成されるデータストリームを生成して格納するための方法であって、
複数のデータストリームからデータを受信するステップと、
前記複数のデータストリームについて記述するメタデータを格納するステップであって、それぞれのデータストリームに関する前記メタデータは、前記データストリームに関連付けられている1つまたは複数の属性を含む、格納するステップと、
前記複数のデータストリームを処理するためにデータストリーム言語プログラムを使用して指定された命令のセットを受信するステップと、
命令の前記セットを実行することによって1つまたは複数の結果データストリームを生成するステップと、
前記1つまたは複数の結果データストリームのそれぞれに関して、
前記結果データストリームについて記述する属性の値のセットを決定するステップであって、前記決定は命令の前記セットに基づく、決定するステップと、
前記結果データストリームについて記述するメタデータとして値の前記セットを格納するステップと、
前記結果データストリームに関する識別子を生成して、前記識別子を、前記結果データストリームについて記述する前記メタデータに関連付けるステップと、
前記結果データストリームのデータを前記識別子に関連付けて格納するステップとを含むことを特徴とする方法。 - 属性の値の前記セットは、前記データストリーム言語プログラムにおいて指定されているグループ化コマンドに基づくことを特徴とする請求項21に記載の方法。
- 前記データストリーム言語プログラムは、複数のグループ化コマンドを指定し、属性の値の前記セットは、前記データストリーム言語プログラムにおいて指定されている前記複数のグループ化コマンドからの最後のグループ化コマンドに基づくことを特徴とする請求項22に記載の方法。
- 前記グループ化コマンドは、メタデータ属性のセットによって前記データストリームの前記データをグループ化し、それぞれの結果データストリームは、メタデータ属性の前記セットの値の個別のセットに対応することを特徴とする請求項22に記載の方法。
- 前記結果データストリームの前記データを、別のデータストリーム言語プログラムの別のブロックへの入力として使用するステップ
をさらに含むことを特徴とする請求項21に記載の方法。 - 前記結果データストリームの前記データを、スクリーン上に表示するために送信するステップ
をさらに含むことを特徴とする請求項21に記載の方法。 - 結果データストリームの前記セットは、publishブロックに関連付けられており、前記publishブロックは、メトリック名に関連付けられており、前記方法は、
前記publishブロックの前記メトリック名を、前記結果データストリームのそれぞれについて記述する属性として使用するステップと、
前記メトリック名に基づく前記属性を、前記データストリームについて記述する前記メタデータとともに格納するステップとをさらに含むことを特徴とする請求項21に記載の方法。 - 前記複数のデータストリームからの1つまたは複数のデータストリームは、外部システム上で実行している計測手段が組み込まれたソフトウェアのインスタンスによって生成されることを特徴とする請求項21に記載の方法。
- 前記複数のデータストリームからの1つまたは複数のデータストリームは、別のデータストリーム言語プログラムの命令の実行の結果として入手される結果データストリームとして生成されることを特徴とする請求項21に記載の方法。
- データストリーム言語プログラムに基づいてデータストリームを生成して格納するための方法であって、
複数のデータストリームからデータを受信するステップであって、それぞれのデータストリームは、システム上で実行している計測手段が組み込まれたソフトウェアのインスタンスによって生成される、受信するステップと、
前記複数のデータストリームについて記述するメタデータを格納するステップであって、それぞれのデータストリームに関する前記メタデータは、前記データストリームに関連付けられている1つまたは複数の属性を含む、格納するステップと、
前記複数のデータストリームを処理するためにデータストリーム言語プログラムを使用して指定された命令のセットを受信するステップであって、前記命令は、データストリームをグループ化するための1つまたは複数のグループ化コマンドを含み、それぞれのグループ化コマンドは、データストリームの1つまたは複数の属性およびアグリゲーションオペレーションに関連付けられている、受信するステップと、
命令の前記セットを実行することによって1つまたは複数の結果データストリームを生成するステップと、
命令の前記セットにおいて実行された最後のグループ化コマンドを識別するステップと、
前記最後のグループ化コマンドに関連付けられている属性の前記セットを決定するステップと、
前記1つまたは複数の結果データストリームのそれぞれに関して、
前記結果データストリームに関連付けられている前記最後のグループ化コマンドの属性のセットの値を決定するステップと、
前記結果データストリームについて記述するメタデータとして前記最後のグループ化コマンドの属性の前記セットの前記値を格納するステップと、
前記結果データストリームに関する識別子を生成して、前記識別子を、前記データストリームについて記述する前記メタデータに関連付けるステップと、
前記結果データストリームのデータを前記識別子に関連付けて格納するステップとを含むことを特徴とする方法。 - 複数のデータストリームからデータを受信するための命令と、
前記複数のデータストリームについて記述するメタデータを格納するための命令であって、それぞれのデータストリームに関する前記メタデータは、前記データストリームに関連付けられている1つまたは複数の属性を含む、命令と、
前記複数のデータストリームを処理するためにデータストリーム言語プログラムを使用して指定された命令のセットを受信するための命令と、
命令の前記セットを実行することによって1つまたは複数の結果データストリームを生成するための命令と、
前記1つまたは複数の結果データストリームのそれぞれに関して、
前記結果データストリームについて記述する属性の値のセットを決定するための命令であって、前記決定は命令の前記セットに基づく、命令と、
前記結果データストリームについて記述するメタデータとして値の前記セットを格納するための命令と、
前記結果データストリームに関する識別子を生成して、前記識別子を、前記結果データストリームについて記述する前記メタデータに関連付けるための命令と、
前記結果データストリームのデータを前記識別子に関連付けて格納するための命令と
を格納していることを特徴とするコンピュータ可読非一時的ストレージメディア。 - 前記メタデータについて記述する値の前記セットは、前記データストリーム言語プログラムにおいて指定されているグループ化コマンドに基づくことを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。
- 前記データストリーム言語プログラムは、複数のグループ化コマンドを指定し、属性の値の前記セットは、前記データストリーム言語プログラムにおいて指定されている前記複数のグループ化コマンドからの最後のグループ化コマンドに基づくことを特徴とする請求項32に記載のコンピュータ可読非一時的ストレージメディア。
- 前記グループ化コマンドは、メタデータ属性のセットによって前記データストリームの前記データをグループ化し、それぞれの結果データストリームは、メタデータ属性の前記セットの値の個別のセットに対応することを特徴とする請求項32に記載のコンピュータ可読非一時的ストレージメディア。
- 結果データストリームの前記セットは、publishブロックに関連付けられており、前記publishブロックは、メトリック名に関連付けられており、前記コンピュータ可読非一時的ストレージメディアは、
前記publishブロックの前記メトリック名を、前記結果データストリームのそれぞれについて記述する属性として使用するための命令と、
前記メトリック名に基づく前記属性を、前記データストリームについて記述する前記メタデータとともに格納するための命令とをさらに格納していることを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。 - 結果ストリームの前記データを、別のデータストリーム言語プログラムの別のブロックへの入力として使用するための命令
をさらに格納していることを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。 - 結果ストリームの前記データを、スクリーン上に表示するために送信するための命令
をさらに格納していることを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。 - 前記複数のデータストリームからの1つまたは複数のデータストリームは、外部システム上で実行している計測手段が組み込まれたソフトウェアのインスタンスによって生成されることを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。
- 前記複数のデータストリームからの1つまたは複数のデータストリームは、別のデータストリーム言語プログラムの命令の実行の結果として入手される結果データストリームとして生成されることを特徴とする請求項31に記載のコンピュータ可読非一時的ストレージメディア。
- コンピュータプロセッサと、
複数のデータストリームからデータを受信するための命令、
前記複数のデータストリームについて記述するメタデータを格納するための命令であって、それぞれのデータストリームに関する前記メタデータは、前記データストリームに関連付けられている1つまたは複数の属性を含む、格納するための命令、
前記複数のデータストリームを処理するためにデータストリーム言語プログラムを使用して指定された命令のセットを受信するための命令、
命令の前記セットを実行することによって1つまたは複数の結果データストリームを生成するための命令、
前記1つまたは複数の結果データストリームのそれぞれに関して、
命令の前記セットに基づいて、前記結果データストリームについて記述する属性の値のセットを決定するための命令、
前記結果データストリームについて記述するメタデータとして値の前記セットを格納するための命令、
時系列に関する時系列識別子を生成して、前記時系列識別子を、前記データストリームについて記述する前記メタデータに関連付けるための命令、および
前記結果データストリームのデータを前記時系列識別子に関連付けて格納するための命令
を格納しているコンピュータ可読非一時的ストレージメディアと
を含むことを特徴とするコンピュータシステム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021085282A JP7437351B2 (ja) | 2014-12-19 | 2021-05-20 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462094935P | 2014-12-19 | 2014-12-19 | |
US62/094,935 | 2014-12-19 | ||
US14/970,454 | 2015-12-15 | ||
US14/970,450 | 2015-12-15 | ||
US14/970,451 | 2015-12-15 | ||
US14/970,451 US9760353B2 (en) | 2014-12-19 | 2015-12-15 | Dynamically changing input data streams processed by data stream language programs |
US14/970,454 US9846574B2 (en) | 2014-12-19 | 2015-12-15 | Representing result data streams based on execution of data stream language programs |
US14/970,450 US9804830B2 (en) | 2014-12-19 | 2015-12-15 | Anomaly detection using a data stream processing language for analyzing instrumented software |
JP2017532956A JP6793900B2 (ja) | 2014-12-19 | 2015-12-16 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017532956A Division JP6793900B2 (ja) | 2014-12-19 | 2015-12-16 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021085282A Division JP7437351B2 (ja) | 2014-12-19 | 2021-05-20 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020074157A JP2020074157A (ja) | 2020-05-14 |
JP6889289B2 true JP6889289B2 (ja) | 2021-06-18 |
Family
ID=56129450
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017532956A Active JP6793900B2 (ja) | 2014-12-19 | 2015-12-16 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
JP2020004714A Active JP6889289B2 (ja) | 2014-12-19 | 2020-01-15 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
JP2021085282A Active JP7437351B2 (ja) | 2014-12-19 | 2021-05-20 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017532956A Active JP6793900B2 (ja) | 2014-12-19 | 2015-12-16 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021085282A Active JP7437351B2 (ja) | 2014-12-19 | 2021-05-20 | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 |
Country Status (6)
Country | Link |
---|---|
US (8) | US9804830B2 (ja) |
EP (2) | EP3982265A1 (ja) |
JP (3) | JP6793900B2 (ja) |
CN (2) | CN113220724B (ja) |
AU (3) | AU2015364688B2 (ja) |
CA (2) | CA2969131C (ja) |
Families Citing this family (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9996445B2 (en) | 2014-01-17 | 2018-06-12 | International Business Machines Corporation | Computer flight recorder with active error detection |
US9804951B2 (en) * | 2014-10-08 | 2017-10-31 | Signalfx, Inc. | Quantization of data streams of instrumented software |
US9804830B2 (en) * | 2014-12-19 | 2017-10-31 | Signalfx, Inc. | Anomaly detection using a data stream processing language for analyzing instrumented software |
US10592500B2 (en) | 2015-01-27 | 2020-03-17 | International Business Machines Corporation | Eviction stream for data joins |
US10394692B2 (en) * | 2015-01-29 | 2019-08-27 | Signalfx, Inc. | Real-time processing of data streams received from instrumented software |
US10142353B2 (en) | 2015-06-05 | 2018-11-27 | Cisco Technology, Inc. | System for monitoring and managing datacenters |
US10536357B2 (en) | 2015-06-05 | 2020-01-14 | Cisco Technology, Inc. | Late data detection in data center |
US10263833B2 (en) | 2015-12-01 | 2019-04-16 | Microsoft Technology Licensing, Llc | Root cause investigation of site speed performance anomalies |
US10504026B2 (en) | 2015-12-01 | 2019-12-10 | Microsoft Technology Licensing, Llc | Statistical detection of site speed performance anomalies |
US10171335B2 (en) * | 2015-12-01 | 2019-01-01 | Microsoft Technology Licensing, Llc | Analysis of site speed performance anomalies caused by server-side issues |
US9892020B1 (en) * | 2016-03-11 | 2018-02-13 | Signalfx, Inc. | User interface for specifying data stream processing language programs for analyzing instrumented software |
US10972333B2 (en) * | 2016-03-16 | 2021-04-06 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and device for real-time network event processing |
JP2019516167A (ja) * | 2016-03-23 | 2019-06-13 | フォグホーン システムズ, インコーポレイテッドFoghorn Systems, Inc. | リアルタイムデータフロープログラミング言語のためのツールおよび方法 |
US10140201B2 (en) * | 2016-12-19 | 2018-11-27 | Bank Of America Corporation | Software defect detection tool |
US10860545B2 (en) * | 2017-03-24 | 2020-12-08 | Microsoft Technology Licensing, Llc | Measuring usage of computing resources |
US10725979B2 (en) | 2017-03-24 | 2020-07-28 | Microsoft Technology Licensing, Llc | Measuring usage of computing resources by storing usage events in a distributed file system |
WO2018191879A1 (en) | 2017-04-19 | 2018-10-25 | Ebay Inc. | Consistency mitigation techniques for real-time streams |
US11258682B2 (en) | 2017-08-03 | 2022-02-22 | Chicago Mercantile Exchange Inc. | Compressed message tracing and parsing |
EP3679473B1 (en) * | 2017-09-21 | 2022-06-15 | Huawei Cloud Computing Technologies Co., Ltd. | A system and method for stream processing |
US11831343B2 (en) * | 2017-10-30 | 2023-11-28 | AtomBeam Technologies Inc. | System and method for data compression with encryption |
US11811428B2 (en) * | 2017-10-30 | 2023-11-07 | AtomBeam Technologies Inc. | System and method for data compression using genomic encryption techniques |
US12040820B2 (en) | 2017-10-30 | 2024-07-16 | AtomBeam Technologies Inc. | System and method for data compression with homomorphic encryption |
US11182434B2 (en) | 2017-11-15 | 2021-11-23 | Sumo Logic, Inc. | Cardinality of time series |
US11042534B2 (en) | 2017-11-15 | 2021-06-22 | Sumo Logic | Logs to metrics synthesis |
US10877691B2 (en) * | 2017-12-29 | 2020-12-29 | Intel Corporation | Stream classification based on logical regions |
US10691485B2 (en) | 2018-02-13 | 2020-06-23 | Ebay Inc. | Availability oriented durability technique for distributed server systems |
WO2019198221A1 (ja) * | 2018-04-13 | 2019-10-17 | 三菱電機株式会社 | データ処理装置、データ処理方法及びプログラム |
US11093506B1 (en) * | 2018-06-01 | 2021-08-17 | Splunk Inc. | Combining data streams generated by instrumented software using metadata correlation |
US11061885B2 (en) * | 2018-06-15 | 2021-07-13 | Intel Corporation | Autonomous anomaly detection and event triggering for data series |
WO2020082354A1 (zh) * | 2018-10-26 | 2020-04-30 | 深圳市欢太科技有限公司 | 一种***状态检测方法、***状态装置及终端设备 |
US10476518B1 (en) * | 2018-12-06 | 2019-11-12 | Nyquist Semiconductor Limited | Hardware friendly data compression |
WO2021054612A1 (ko) * | 2019-09-19 | 2021-03-25 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
US11681721B2 (en) * | 2020-05-08 | 2023-06-20 | Jpmorgan Chase Bank, N.A. | Systems and methods for spark lineage data capture |
CN111930782B (zh) * | 2020-08-11 | 2024-03-15 | 南京国电南自轨道交通工程有限公司 | 两种基于阈值的历史数据采样方法 |
US11086853B1 (en) * | 2020-10-12 | 2021-08-10 | iodyne, LLC | Method and system for streaming data from portable storage devices |
WO2023069310A1 (en) * | 2021-10-18 | 2023-04-27 | Splunk Inc. | Dynamic resolution estimation in metric time series data |
US12013879B2 (en) | 2021-10-18 | 2024-06-18 | Splunk Inc. | Dynamic resolution estimation in metric time series data |
US11874821B2 (en) | 2021-12-22 | 2024-01-16 | Ebay Inc. | Block aggregation for shared streams |
US11853735B1 (en) * | 2023-02-10 | 2023-12-26 | Citibank, N.A. | Systems and methods for continuous integration and continuous deployment pipeline management using pipeline-agnostic non-script rule sets |
Family Cites Families (123)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5872909A (en) | 1995-01-24 | 1999-02-16 | Wind River Systems, Inc. | Logic analyzer for software |
US6097399A (en) | 1998-01-16 | 2000-08-01 | Honeywell Inc. | Display of visual data utilizing data aggregation |
US6408404B1 (en) | 1998-07-29 | 2002-06-18 | Northrop Grumman Corporation | System and method for ensuring and managing situation awareness |
US6301615B1 (en) * | 1998-10-14 | 2001-10-09 | Sun Microsystems, Inc. | Cluster performance monitoring utility |
US7181743B2 (en) | 2000-05-25 | 2007-02-20 | The United States Of America As Represented By The Secretary Of The Navy | Resource allocation decision function for resource management architecture and corresponding programs therefor |
US7389497B1 (en) | 2000-07-06 | 2008-06-17 | International Business Machines Corporation | Method and system for tracing profiling information using per thread metric variables with reused kernel threads |
JP2002278780A (ja) | 2001-03-19 | 2002-09-27 | Toshiba Corp | ネットワークシステムおよび資源分析システム |
US7111282B2 (en) * | 2001-06-12 | 2006-09-19 | Hewlett-Packard Development Company, L.P. | Instrumenting a software program and collecting data from the instrumented software program by type |
US7028225B2 (en) | 2001-09-25 | 2006-04-11 | Path Communications, Inc. | Application manager for monitoring and recovery of software based application processes |
US6988224B2 (en) * | 2002-10-31 | 2006-01-17 | Hewlett-Packard Development Company, L.P. | Measurement apparatus |
US7269824B2 (en) | 2003-02-13 | 2007-09-11 | Path Reliability, Inc. | Software behavior pattern recognition and analysis |
US7624174B2 (en) * | 2003-05-22 | 2009-11-24 | Microsoft Corporation | Self-learning method and system for detecting abnormalities |
JP2004348670A (ja) | 2003-05-26 | 2004-12-09 | Mitsubishi Electric Corp | ログ仲介システム |
KR100485702B1 (ko) * | 2003-05-29 | 2005-04-28 | 삼성전자주식회사 | 지지대를 갖는 박막 벌크 음향 공진기 및 그 제조방법 |
US7392370B2 (en) * | 2004-01-14 | 2008-06-24 | International Business Machines Corporation | Method and apparatus for autonomically initiating measurement of secondary metrics based on hardware counter values for primary metrics |
US7886281B2 (en) * | 2004-03-30 | 2011-02-08 | Symantec Corporation | System and methods for cross-tier transaction tracing |
US20050223368A1 (en) * | 2004-03-30 | 2005-10-06 | Tonic Solutions, Inc. | Instrumented application for transaction tracing |
US7400578B2 (en) * | 2004-12-16 | 2008-07-15 | International Business Machines Corporation | Method and system for throttling network transmissions using per-receiver bandwidth control at the application layer of the transmitting server |
US8396886B1 (en) * | 2005-02-03 | 2013-03-12 | Sybase Inc. | Continuous processing language for real-time data streams |
US7890507B2 (en) | 2005-02-25 | 2011-02-15 | International Business Machines Corporation | System and method of joining data obtained from horizontally and vertically partitioned heterogeneous data stores using string-based location transparent search expressions |
US20060293777A1 (en) * | 2005-06-07 | 2006-12-28 | International Business Machines Corporation | Automated and adaptive threshold setting |
EP1780955A1 (en) | 2005-10-28 | 2007-05-02 | Siemens Aktiengesellschaft | Monitoring method and apparatus of processing of a data stream with high rate/flow |
US8117175B1 (en) * | 2005-11-30 | 2012-02-14 | At&T Intellectual Property Ii, L.P. | Methods and apparatus for querying multiple data streams |
JP2007165962A (ja) | 2005-12-09 | 2007-06-28 | Matsushita Electric Ind Co Ltd | ストリームデータ処理装置 |
US8402443B2 (en) * | 2005-12-12 | 2013-03-19 | dyna Trace software GmbH | Method and system for automated analysis of the performance of remote method invocations in multi-tier applications using bytecode instrumentation |
US8176480B1 (en) * | 2006-02-27 | 2012-05-08 | Symantec Operating Corporation | Adaptive instrumentation through dynamic recompilation |
US7716530B2 (en) * | 2006-02-28 | 2010-05-11 | Microsoft Corporation | Thread interception and analysis |
JP4528273B2 (ja) | 2006-03-17 | 2010-08-18 | 三菱電機株式会社 | 制御ノード装置及びデータ管理方法及びプログラム |
US8739143B2 (en) | 2007-01-31 | 2014-05-27 | Hewlett-Packard Development Company, L.P. | Profiling metrics for computer programs |
US7979245B1 (en) | 2006-05-17 | 2011-07-12 | Quest Software, Inc. | Model-based systems and methods for monitoring computing resource performance |
EP1870829B1 (en) * | 2006-06-23 | 2014-12-03 | Microsoft Corporation | Securing software by enforcing data flow integrity |
US8407699B2 (en) | 2008-03-10 | 2013-03-26 | Citrix Systems, Inc. | System and method for managing code isolation |
JP4933222B2 (ja) | 2006-11-15 | 2012-05-16 | 株式会社日立製作所 | インデックス処理方法及び計算機システム |
US8032875B2 (en) * | 2006-11-28 | 2011-10-04 | Oracle America, Inc. | Method and apparatus for computing user-specified cost metrics in a data space profiler |
CN101193055A (zh) | 2006-11-30 | 2008-06-04 | 中兴通讯股份有限公司 | 间接实时流量控制数据发送方法 |
US8136124B2 (en) * | 2007-01-18 | 2012-03-13 | Oracle America, Inc. | Method and apparatus for synthesizing hardware counters from performance sampling |
CN100461132C (zh) * | 2007-03-02 | 2009-02-11 | 北京邮电大学 | 基于源代码静态分析的软件安全代码分析器及其检测方法 |
US20080270848A1 (en) * | 2007-04-26 | 2008-10-30 | Carli Connally | Method and Apparatus for Displaying Pin Result Data |
US9047412B2 (en) * | 2007-05-06 | 2015-06-02 | Dynatrace Corporation | System and method for extracting instrumentation relevant inheritance relationships for a distributed, inheritance rule based instrumentation system |
US8095917B2 (en) * | 2007-06-04 | 2012-01-10 | Microsoft Corporation | Debugger for virtual intermediate language operations |
US8504733B1 (en) | 2007-07-31 | 2013-08-06 | Hewlett-Packard Development Company, L.P. | Subtree for an aggregation system |
US7698603B2 (en) | 2007-09-07 | 2010-04-13 | Microsoft Corporation | Test results management |
US8356289B2 (en) * | 2008-03-26 | 2013-01-15 | Avaya Inc. | Efficient encoding of instrumented data in real-time concurrent systems |
JP5198929B2 (ja) | 2008-04-25 | 2013-05-15 | 株式会社日立製作所 | ストリームデータ処理方法及び計算機システム |
US20090287729A1 (en) * | 2008-05-16 | 2009-11-19 | Microsoft Corporation | Source code coverage testing |
US8676841B2 (en) * | 2008-08-29 | 2014-03-18 | Oracle International Corporation | Detection of recurring non-occurrences of events using pattern matching |
US8381039B1 (en) | 2008-10-20 | 2013-02-19 | Amazon Technologies, Inc. | Storage of mass data for monitoring |
JP4659877B2 (ja) | 2008-12-03 | 2011-03-30 | 株式会社日立製作所 | ストリームデータ処理制御方法、ストリームデータ処理装置及びストリームデータ処理制御プログラム |
JP5310094B2 (ja) * | 2009-02-27 | 2013-10-09 | 日本電気株式会社 | 異常検出システム、異常検出方法および異常検出用プログラム |
US8601458B2 (en) * | 2009-05-14 | 2013-12-03 | International Business Machines Corporation | Profile-driven data stream processing |
US8854992B2 (en) | 2009-07-09 | 2014-10-07 | Motorola Mobility Llc | Artificial delay inflation and jitter reduction to improve TCP throughputs |
US8381284B2 (en) | 2009-08-21 | 2013-02-19 | Mcafee, Inc. | System and method for enforcing security policies in a virtual environment |
US9529694B2 (en) * | 2009-09-14 | 2016-12-27 | Oracle International Corporation | Techniques for adaptive trace logging |
US8327059B2 (en) | 2009-09-30 | 2012-12-04 | Vmware, Inc. | System and method to enhance memory protection for programs in a virtual machine environment |
JP5990466B2 (ja) * | 2010-01-21 | 2016-09-14 | スビラル・インコーポレーテッド | ストリームに基づく演算を実装するための汎用複数コアシステムのための方法および装置 |
JP5534869B2 (ja) | 2010-03-03 | 2014-07-02 | 積水化学工業株式会社 | 計測管理システム及び管理サーバ |
US8484243B2 (en) | 2010-05-05 | 2013-07-09 | Cisco Technology, Inc. | Order-independent stream query processing |
JP5478722B2 (ja) | 2010-06-18 | 2014-04-23 | 三菱電機株式会社 | データ処理装置及びデータ処理方法及びプログラム |
US8615597B2 (en) * | 2010-06-30 | 2013-12-24 | Telcordia Technologies, Inc. | Optimizing evaluation patterns and data acquisition for stream analytics in resource-constrained wireless environments |
EP2538632B1 (en) * | 2010-07-14 | 2014-04-02 | Google Inc. | Method and receiver for reliable detection of the status of an RTP packet stream |
US8260826B2 (en) | 2010-09-23 | 2012-09-04 | Hewlett-Packard Development Company, L.P. | Data processing system and method |
US20130226909A1 (en) | 2010-10-06 | 2013-08-29 | Hitachi, Ltd. | Stream Data Processing Method and Device |
US20120158925A1 (en) * | 2010-12-17 | 2012-06-21 | Microsoft Corporation | Monitoring a model-based distributed application |
US8468461B2 (en) * | 2011-03-05 | 2013-06-18 | Flowatch Llc | Form-based user-configurable processing plant management system and method |
WO2012128388A1 (ja) | 2011-03-23 | 2012-09-27 | 日本電気株式会社 | 運用管理システム、運用管理方法、及びプログラム |
US9274919B2 (en) | 2011-04-29 | 2016-03-01 | Dynatrace Software Gmbh | Transaction tracing mechanism of distributed heterogenous transactions having instrumented byte code with constant memory consumption and independent of instrumented method call depth |
JP5699789B2 (ja) | 2011-05-10 | 2015-04-15 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム及び情報処理システム |
EP2707812A1 (en) * | 2011-05-10 | 2014-03-19 | Telefonaktiebolaget LM Ericsson (PUBL) | Optimised data stream management system |
US9465631B2 (en) * | 2011-09-30 | 2016-10-11 | Microsoft Technology Licensing, Llc | Automatic caching of partial results while editing software |
US9208218B2 (en) | 2011-10-19 | 2015-12-08 | Zalag Corporation | Methods and apparatuses for generating search expressions from content, for applying search expressions to content collections, and/or for analyzing corresponding search results |
WO2013101214A1 (en) | 2011-12-30 | 2013-07-04 | Intel Corporation | Optional logging of debug activities in a real time instruction tracing log |
US8699339B2 (en) | 2012-02-17 | 2014-04-15 | Apple Inc. | Reducing interarrival delays in network traffic |
US9454462B2 (en) * | 2012-03-16 | 2016-09-27 | International Business Machines Corporation | Run-time instrumentation monitoring for processor characteristic changes |
US9442824B2 (en) * | 2012-03-16 | 2016-09-13 | International Business Machines Corporation | Transformation of a program-event-recording event into a run-time instrumentation event |
US9465716B2 (en) * | 2012-03-16 | 2016-10-11 | International Business Machines Corporation | Run-time instrumentation directed sampling |
WO2013147817A1 (en) | 2012-03-29 | 2013-10-03 | Intel Corporation | Architecture and method for managing interrupts in a virtualized environment |
US20130275814A1 (en) | 2012-04-12 | 2013-10-17 | Shiva Prasad Nayak | Adaptive system monitoring |
EP2845121B1 (en) | 2012-04-30 | 2020-10-14 | WebTrends, Inc. | Method and system that streams real-time, processed data from remote processor-controlled appliances |
JP5505464B2 (ja) | 2012-06-08 | 2014-05-28 | 沖電気工業株式会社 | センサデータ提供システム、ゲートウェイ及び抽象化センサデータ生成方法 |
WO2013186831A1 (ja) | 2012-06-11 | 2013-12-19 | 株式会社日立製作所 | ストリームデータ処理方法、ストリームデータ処理装置及びプログラム |
US8914317B2 (en) * | 2012-06-28 | 2014-12-16 | International Business Machines Corporation | Detecting anomalies in real-time in multiple time series data with automated thresholding |
US9185235B2 (en) | 2012-08-02 | 2015-11-10 | Ab Initio Technology Llc | Aggregating data in a mediation system |
US9063788B2 (en) * | 2012-08-27 | 2015-06-23 | International Business Machines Corporation | Stream processing with runtime adaptation |
US9953059B2 (en) * | 2012-09-28 | 2018-04-24 | Oracle International Corporation | Generation of archiver queries for continuous queries over archived relations |
US9563663B2 (en) * | 2012-09-28 | 2017-02-07 | Oracle International Corporation | Fast path evaluation of Boolean predicates |
US9185114B2 (en) | 2012-12-05 | 2015-11-10 | Symantec Corporation | Methods and systems for secure storage segmentation based on security context in a virtual environment |
JP6011639B2 (ja) | 2012-12-28 | 2016-10-19 | 富士通株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
US9229839B2 (en) | 2013-01-09 | 2016-01-05 | Microsoft Technology Licensing, Llc | Implementing rate controls to limit timeout-based faults |
US20150234897A1 (en) | 2013-01-10 | 2015-08-20 | Hitachi, Ltd. | Time series data processing apparatus and method, and storage medium |
US10298444B2 (en) | 2013-01-15 | 2019-05-21 | Oracle International Corporation | Variable duration windows on continuous data streams |
US8954546B2 (en) * | 2013-01-25 | 2015-02-10 | Concurix Corporation | Tracing with a workload distributor |
US9135145B2 (en) | 2013-01-28 | 2015-09-15 | Rackspace Us, Inc. | Methods and systems of distributed tracing |
US20130283102A1 (en) | 2013-02-12 | 2013-10-24 | Concurix Corporation | Deployment of Profile Models with a Monitoring Agent |
US10613965B2 (en) * | 2013-03-14 | 2020-04-07 | Adobe Inc. | Method and system of visually combining profiling data from instrumentation and sampling |
US9665474B2 (en) | 2013-03-15 | 2017-05-30 | Microsoft Technology Licensing, Llc | Relationships derived from trace data |
US9471656B2 (en) | 2013-03-15 | 2016-10-18 | Uda, Llc | Massively-parallel system architecture and method for real-time extraction of high-value information from data streams |
CN109629953A (zh) | 2013-05-15 | 2019-04-16 | 麦格纳覆盖件有限公司 | 用于操作车辆的闭合板的方法和*** |
US9542291B2 (en) | 2013-05-24 | 2017-01-10 | Software Ag | Self-monitoring event-based system and method |
US9292328B2 (en) | 2013-05-24 | 2016-03-22 | Bromium, Inc. | Management of supervisor mode execution protection (SMEP) by a hypervisor |
US9578372B2 (en) | 2013-09-27 | 2017-02-21 | Cisco Technology, Inc. | Delay tolerant decoder |
WO2015060844A1 (en) | 2013-10-23 | 2015-04-30 | Hewlett-Packard Development Company, L.P. | Tracking a status of a process |
KR20160075704A (ko) | 2013-10-24 | 2016-06-29 | 카세일즈.컴 엘티디 | 멀티패싯 검색 쿼리들을 구현하기 위한 시스템 및 방법 |
WO2015176048A1 (en) | 2014-05-15 | 2015-11-19 | Lynx Software Technologies, Inc. | Aspects of hardware virtualization, hypervisors, code detection |
US9479414B1 (en) | 2014-05-30 | 2016-10-25 | Dell Software Inc. | System and method for analyzing computing performance |
US9244978B2 (en) * | 2014-06-11 | 2016-01-26 | Oracle International Corporation | Custom partitioning of a data stream |
US9454497B2 (en) | 2014-08-15 | 2016-09-27 | Intel Corporation | Technologies for secure inter-virtual-machine shared memory communication |
CA3177882A1 (en) | 2014-10-08 | 2016-04-14 | Splunk Inc. | Real-time reporting based on instrumentation of software |
US9804951B2 (en) | 2014-10-08 | 2017-10-31 | Signalfx, Inc. | Quantization of data streams of instrumented software |
WO2016057211A1 (en) | 2014-10-08 | 2016-04-14 | Signalfx, Inc. | Real-time reporting based on instrumentation of software |
US9804830B2 (en) | 2014-12-19 | 2017-10-31 | Signalfx, Inc. | Anomaly detection using a data stream processing language for analyzing instrumented software |
WO2016100534A1 (en) | 2014-12-19 | 2016-06-23 | Signalfx, Inc. | Data stream processing language for analyzing instrumented software |
US9858411B2 (en) | 2014-12-19 | 2018-01-02 | Intel Corporation | Execution profiling mechanism |
US10394692B2 (en) | 2015-01-29 | 2019-08-27 | Signalfx, Inc. | Real-time processing of data streams received from instrumented software |
US9715410B2 (en) | 2015-01-30 | 2017-07-25 | Red Hat Israel, Ltd. | Protected virtual machine function access |
US10691476B2 (en) | 2015-06-27 | 2020-06-23 | Mcafee, Llc | Protection of sensitive data |
US10210038B2 (en) * | 2015-10-08 | 2019-02-19 | Lightbend, Inc. | Tuning context-aware rule engine for anomaly detection |
US9880871B2 (en) | 2016-02-23 | 2018-01-30 | Red Hat Israel, Ltd. | Protection from guest interrupts in a virtual machine function |
US9892020B1 (en) | 2016-03-11 | 2018-02-13 | Signalfx, Inc. | User interface for specifying data stream processing language programs for analyzing instrumented software |
US10303899B2 (en) | 2016-08-11 | 2019-05-28 | Intel Corporation | Secure public cloud with protected guest-verified host control |
KR102511451B1 (ko) | 2016-11-09 | 2023-03-17 | 삼성전자주식회사 | 리치 실행 환경에서 보안 어플리케이션을 안전하게 실행하는 컴퓨팅 시스템 |
EP3343366B1 (en) | 2016-12-27 | 2020-12-30 | OpenSynergy GmbH | System and method for scheduling a plurality of guest systems and/or threads |
US10860718B2 (en) | 2017-07-28 | 2020-12-08 | Mcafee, Llc | Protecting computer systems used in virtualization environments against fileless malware |
US11171983B2 (en) | 2018-06-29 | 2021-11-09 | Intel Corporation | Techniques to provide function-level isolation with capability-based security |
-
2015
- 2015-12-15 US US14/970,450 patent/US9804830B2/en active Active
- 2015-12-15 US US14/970,451 patent/US9760353B2/en active Active
- 2015-12-15 US US14/970,454 patent/US9846574B2/en active Active
- 2015-12-16 CN CN202110472032.1A patent/CN113220724B/zh active Active
- 2015-12-16 CA CA2969131A patent/CA2969131C/en active Active
- 2015-12-16 CA CA3058839A patent/CA3058839A1/en active Pending
- 2015-12-16 EP EP21209283.7A patent/EP3982265A1/en active Pending
- 2015-12-16 JP JP2017532956A patent/JP6793900B2/ja active Active
- 2015-12-16 EP EP15870999.8A patent/EP3234776B1/en active Active
- 2015-12-16 CN CN201580069546.5A patent/CN107111527B/zh active Active
- 2015-12-16 AU AU2015364688A patent/AU2015364688B2/en active Active
-
2017
- 2017-09-07 US US15/697,451 patent/US10949180B2/en active Active
- 2017-12-18 US US15/845,993 patent/US10409568B2/en active Active
-
2019
- 2019-08-21 US US16/547,559 patent/US11709661B2/en active Active
-
2020
- 2020-01-15 JP JP2020004714A patent/JP6889289B2/ja active Active
-
2021
- 2021-02-12 US US17/175,330 patent/US11733982B1/en active Active
- 2021-03-10 AU AU2021201512A patent/AU2021201512B2/en active Active
- 2021-05-20 JP JP2021085282A patent/JP7437351B2/ja active Active
-
2023
- 2023-03-07 AU AU2023201395A patent/AU2023201395B2/en active Active
- 2023-06-08 US US18/331,571 patent/US12039307B1/en active Active
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6889289B2 (ja) | 計測手段が組み込まれたソフトウェアを分析するためのデータストリーム処理言語 | |
JP7121075B2 (ja) | 計測手段が組み込まれたソフトウェアから受信されるデータストリームのリアルタイム処理 | |
US20160103757A1 (en) | Quantization of Data Streams of Instrumented Software | |
JP7391137B2 (ja) | ソフトウェアの計測に基づいたリアルタイム報告 | |
US11836526B1 (en) | Processing data streams received from instrumented software using incremental finite window double exponential smoothing | |
WO2016100534A1 (en) | Data stream processing language for analyzing instrumented software |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200214 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200214 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20200720 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210420 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210520 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6889289 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |