JP2017084188A - 操作再生プログラム、操作再生装置及び操作再生方法 - Google Patents
操作再生プログラム、操作再生装置及び操作再生方法 Download PDFInfo
- Publication number
- JP2017084188A JP2017084188A JP2015213394A JP2015213394A JP2017084188A JP 2017084188 A JP2017084188 A JP 2017084188A JP 2015213394 A JP2015213394 A JP 2015213394A JP 2015213394 A JP2015213394 A JP 2015213394A JP 2017084188 A JP2017084188 A JP 2017084188A
- Authority
- JP
- Japan
- Prior art keywords
- displayed
- target object
- recording
- record information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 33
- 230000008569 process Effects 0.000 claims description 22
- 230000008859 change Effects 0.000 claims description 7
- 238000011835 investigation Methods 0.000 abstract 1
- 230000006870 function Effects 0.000 description 14
- 238000001514 detection method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 230000008929 regeneration Effects 0.000 description 3
- 238000011069 regeneration method Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001172 regenerating effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Debugging And Monitoring (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
[記録装置と再生装置]
以下に図面を参照して実施形態について説明する。図1は、操作内容の記録と再生について説明する図である。
次に、本実施形態の記録装置100による操作記録情報200の記録と、再生装置300による操作記録情報200に基づく再生について説明する。図2(a)は、記録装置100による操作記録情報200の記録の一例を説明する図であり、図2(b)は、再生装置300による操作記録情報200に基づく再生の一例を説明する図である。
次に、図2(b)に示す再生処理時の不具合について説明する。記録装置100と再生装置300とでは、一方の画面には、あるファイルが存在しているが、他方の画面にはそのファイルが存在していない場合のように、環境が同一ではないということがある。よって、操作記録情報200に記録されたとおりに、対象となるオブジェクトを選択して記録された操作を行おうとしても、再生装置300では、対象となるオブジェクトが表示されていない場合がある。
次に、図4を参照して本実施形態の記録装置100と再生装置300のハードウェア構成の一例について説明する。図4は、記録装置のハードウェア構成の一例を示す図である。本実施形態の記録装置100と再生装置300のハードウェア構成は、同じであるため、図6では、記録装置のハードウェア構成の一例について説明し、再生装置300のハードウェア構成の説明は省略する。
次に、図5を参照して本実施形態の記録装置100と再生装置300の機能について説明する。図5は、第一の実施形態の記録装置及び再生装置300の機能構成の一例を説明する図である。本実施形態の記録装置100は、操作記録再生処理部110を有する。また、本実施形態の再生装置300は、操作記録再生処理部310を有する。
次に、図6を参照し、本実施形態の記録装置100による操作記録情報200の記録処理について説明する。図6は、記録処理部による操作記録情報の記録処理を示すフローチャートである。
次に、図7、図8を参照して、本実施形態の再生装置300による操作記録情報200の再生の処理について説明する。図7は、一実施形態にかかる操作記録情報に基づく再生処理を説明するフローチャートである。
以下に図面を参照して第二の実施形態について説明する。第二の実施形態は、一台のコンピュータが記録処理部と再生処理部を実現する点が第一の実施形態と相違する。よって、以下の第二の実施形態の説明では、第一の実施形態との相違点について説明し、第一の実施形態と同様の機能構成を有するものには、第一の実施形態の説明で用いた符号と同様の符号を付与し、その説明を省略する。
以下に図面を参照して第三の実施形態について説明する。第三の実施形態は、記録装置100において記録された操作記録情報200が、外部のサーバに格納される点が第一の実施形態と相違する。
(付記1)
表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込み、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索し、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定し、
特定した前記上位階層のオブジェクトの表示を変更し、
前記操作の対象オブジェクトが表示されているかを探索し、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる、
処理をコンピュータに実行させる操作再生プログラム。
(付記2)
前記上位階層のオブジェクトを特定する処理は、スクロール可能なスクロールバーが存在するオブジェクトを探索し、
前記オブジェクトの表示を変更する処理は、表示された前記スクロールバーを移動し、前記操作の対象オブジェクトが表示されているかを探索する、
付記1に記載の操作再生プログラム。
(付記3)
表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込む読込部と、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索する探索部と、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定するオブジェクト特定部と、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる操作発生要求部と、を有し、
前記探索部は、特定した前記上位階層のオブジェクトの表示を変更し、前記操作の対象オブジェクトが表示されているかを探索する、操作再生装置。
(付記4)
前記探索部は、スクロール可能なスクロールバーが存在するオブジェクトを探索して前記上位階層のオブジェクトを特定し、表示された前記スクロールバーを移動して前記上位階層のオブジェクトの表示を変更し、前記操作の対象オブジェクトが表示されているかを探索する、
付記3に記載の操作再生装置。
(付記5)
表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込み、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索し、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定し、
特定した前記上位階層のオブジェクトの表示を変更し、
前記操作の対象オブジェクトが表示されているかを探索し、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる、
処理をコンピュータが実行する操作再生方法。
(付記6)
前記上位階層のオブジェクトを特定する処理は、スクロール可能なスクロールバーが存在するオブジェクトを探索し、
前記オブジェクトの表示を変更する処理は、表示された前記スクロールバーを移動し、前記操作の対象オブジェクトが表示されているかを探索する、
付記5に記載の操作再生方法。
22:操作種類情報
23:オブジェクト内座標情報
24:移動元表示領域情報
25:移動先座標情報
26:移動先表示領域情報
100 記録装置
110、310 操作記録再生処理部
120、320 記録処理部
121 操作検知部
122 割込発生部
123、132、332 オブジェクト特定部
124 操作種類取得部
125 操作記録部
130、330 再生処理部
134、334 操作発生要求部
135、335 探索部
200 操作記録情報
300 再生装置
331 操作記録読込部
400 記録再生システム
410 サーバ
Claims (4)
- 表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込み、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索し、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定し、
特定した前記上位階層のオブジェクトの表示を変更し、
前記操作の対象オブジェクトが表示されているかを探索し、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる、
処理をコンピュータに実行させる操作再生プログラム。 - 前記上位階層のオブジェクトを特定する処理は、スクロール可能なスクロールバーが存在するオブジェクトを探索し、
前記オブジェクトの表示を変更する処理は、表示された前記スクロールバーを移動し、前記操作の対象オブジェクトが表示されているかを探索する、
請求項1に記載の操作再生プログラム。 - 表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込む読込部と、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索する探索部と、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定するオブジェクト特定部と、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる操作発生要求部と、を有し、
前記探索部は、特定した前記上位階層のオブジェクトの表示を変更し、前記操作の対象オブジェクトが表示されているかを探索する、操作再生装置。 - 表示されたオブジェクトに対して行われた操作を前記オブジェクトの階層情報とともに記録した操作記録情報を読み込み、
前記操作記録情報に応じた前記操作の対象オブジェクトが表示されているかを探索し、
前記操作の対象オブジェクトが表示されていない場合、前記対象オブジェクトに対する上位階層のオブジェクトを特定し、
特定した前記上位階層のオブジェクトの表示を変更し、
前記操作の対象オブジェクトが表示されているかを探索し、
探索した結果、前記操作の対象オブジェクトが探索された場合に、前記操作の対象オブジェクトに対して、前記操作記録情報に記録された操作を発生させる、
処理をコンピュータが実行する操作再生方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015213394A JP6528646B2 (ja) | 2015-10-29 | 2015-10-29 | 操作再生プログラム、操作再生装置及び操作再生方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015213394A JP6528646B2 (ja) | 2015-10-29 | 2015-10-29 | 操作再生プログラム、操作再生装置及び操作再生方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017084188A true JP2017084188A (ja) | 2017-05-18 |
JP6528646B2 JP6528646B2 (ja) | 2019-06-12 |
Family
ID=58711181
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015213394A Active JP6528646B2 (ja) | 2015-10-29 | 2015-10-29 | 操作再生プログラム、操作再生装置及び操作再生方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6528646B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021033409A (ja) * | 2019-08-19 | 2021-03-01 | Necフィールディング株式会社 | 業務の自動実行システムおよび方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011076152A (ja) * | 2009-09-29 | 2011-04-14 | Hitachi Solutions Ltd | キャプチャシステム |
JP2015049520A (ja) * | 2013-08-29 | 2015-03-16 | 富士通株式会社 | シナリオ生成プログラム、シナリオ実行プログラム、シナリオ生成方法、シナリオ実行方法、シナリオ生成装置、及びシナリオ実行装置 |
-
2015
- 2015-10-29 JP JP2015213394A patent/JP6528646B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011076152A (ja) * | 2009-09-29 | 2011-04-14 | Hitachi Solutions Ltd | キャプチャシステム |
JP2015049520A (ja) * | 2013-08-29 | 2015-03-16 | 富士通株式会社 | シナリオ生成プログラム、シナリオ実行プログラム、シナリオ生成方法、シナリオ実行方法、シナリオ生成装置、及びシナリオ実行装置 |
Non-Patent Citations (1)
Title |
---|
柿元 宏晃 他: "「Web行動リプレイシステムに基づくWebアプリケーション動作検証システムとその応用」", 2009年度人工知能学会全国大会(第23回)論文集, JPN6019012792, 19 June 2009 (2009-06-19), JP, pages 1 - 4, ISSN: 0004015087 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021033409A (ja) * | 2019-08-19 | 2021-03-01 | Necフィールディング株式会社 | 業務の自動実行システムおよび方法 |
JP7092364B2 (ja) | 2019-08-19 | 2022-06-28 | Necフィールディング株式会社 | 業務の自動実行システムおよび方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6528646B2 (ja) | 2019-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9886188B2 (en) | Manipulating multiple objects in a graphic user interface | |
CN102224486B (zh) | 显示装置以及显示方法 | |
JP2014527251A (ja) | 指向的ユーザジェスチャに基づくコンテンツナビゲーション方向の確立 | |
US20120166522A1 (en) | Supporting intelligent user interface interactions | |
US20150177976A1 (en) | Method and system for scrolling a data set across a screen | |
KR20110090903A (ko) | 윈도우 관련 컨트롤의 노출 및 관리 | |
JP7384260B2 (ja) | 情報処理装置及びプログラム | |
US20140059491A1 (en) | Electronic apparatus to execute application, method thereof, and computer readable recording medium | |
US20130246975A1 (en) | Gesture group selection | |
JP2006235832A (ja) | 処理装置、情報処理方法、およびプログラム | |
US20190171702A1 (en) | Controlling Digital Input | |
US10976895B2 (en) | Electronic apparatus and controlling method thereof | |
JP6528646B2 (ja) | 操作再生プログラム、操作再生装置及び操作再生方法 | |
KR20130126614A (ko) | 애플리케이션 파일 시스템 액세스 | |
JP2022173048A (ja) | 自動文書スクロールを備えるロボティックプロセスオートメーション(rpa) | |
JP6797524B2 (ja) | 操作記録再生プログラム、操作再生プログラム、操作記録再生システム及び操作記録再生方法 | |
US9733800B2 (en) | Document management system and document management method | |
JP6927340B2 (ja) | 操作記録プログラム、操作記録方法、操作記録装置、操作再生プログラム、操作再生方法及び操作再生装置 | |
JP6547584B2 (ja) | 操作記録再生プログラム、操作再生プログラム、操作記録再生方法及び操作記録再生システム | |
JP6813265B2 (ja) | 操作記録再生プログラム、操作記録プログラム、操作記録再生方法及び操作記録再生装置 | |
JP6677019B2 (ja) | 情報処理装置、情報処理プログラムおよび情報処理方法 | |
US11704014B1 (en) | Supporting micro swipes for generating custom user interface responses | |
JP6561775B2 (ja) | 操作記録再生プログラム、操作再生プログラム、操作再生方法及び操作記録再生装置 | |
JP2015007844A (ja) | ユーザインタフェース装置、ユーザインタフェース方法およびプログラム | |
WO2020210977A1 (zh) | 局部选取轨迹和轨迹拆合的方法、电子设备、存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180706 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190322 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190416 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190429 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6528646 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |