JP6967615B2 - 分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器 - Google Patents
分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器 Download PDFInfo
- Publication number
- JP6967615B2 JP6967615B2 JP2019568703A JP2019568703A JP6967615B2 JP 6967615 B2 JP6967615 B2 JP 6967615B2 JP 2019568703 A JP2019568703 A JP 2019568703A JP 2019568703 A JP2019568703 A JP 2019568703A JP 6967615 B2 JP6967615 B2 JP 6967615B2
- Authority
- JP
- Japan
- Prior art keywords
- server
- inquiry
- index
- master control
- engine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0654—Management of faults, events, alarms or notifications using network fault recovery
- H04L41/0668—Management of faults, events, alarms or notifications using network fault recovery by dynamic selection of recovery network elements, e.g. replacement by the most appropriate element after failure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
- H04L67/5682—Policies or rules for updating, deleting or replacing the stored data
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本特許願は2017年7月5日に提出した、願番号が201710540135.0、発明名称が「分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器」の中国特許願の優先権を主張し、本願の全内容は引用によって本明細書に組み込まれている。
Claims (12)
- 分散型検索方法であって、
複数のプロキシーサーバーのうちの少なくとも1つの第1プロキシーサーバーが問い合わせサーバーからの問い合わせ要求を受信すると、前記問い合わせ要求に対応する属性情報を取得するステップと、
前記第1プロキシーサーバーが前記属性情報に基づいて設定管理サーバーに問い合わせて、前記属性情報に対応する機器情報を取得するステップと、
前記第1プロキシーサーバーが前記機器情報に対応する少なくとも2つのエンジンサーバーに前記問い合わせ要求を送信するステップと、
前記第1プロキシーサーバーが、前記少なくとも2つのエンジンサーバーが前記問い合わせ要求に基づいて戻した第1問い合わせ結果を取得するステップと、
前記第1プロキシーサーバーが少なくとも2つの前記第1問い合わせ結果を予め設定されたルールにしたがって第2問い合わせ結果として併合するステップと、
前記第1プロキシーサーバーが前記第2問い合わせ結果を前記問い合わせサーバーに送信するステップとを含み、
前記複数のプロキシーサーバーから、少なくとも1つのサービスタイプが前記問い合わせ要求とマッチングするプロキシーサーバーを前記第1プロキシーサーバーとして選択するステップ、または
予め設定されたルールにしたがって前記複数のプロキシーサーバーから少なくとも1つを前記第1プロキシーサーバーとして選択するステップをさらに含む分散型検索方法。 - 前記少なくとも2つのエンジンサーバーが前記問い合わせ要求に基づいて戻した前記第1問い合わせ結果を取得するステップは、
前記第1プロキシーサーバーが予め設定されたカットオフパラメータを満たす前記第1問い合わせ結果を取得するステップを含むことを特徴とする請求項1に記載の方法。 - 前記予め設定されたルールは、ランダムルールとポーリングルールを含むことを特徴とする請求項1に記載の方法。
- インデックスの更新方法であって、
マスター制御サーバーが設定管理サーバーから分割ルールを取得するステップと、
前記マスター制御サーバーが前記分割ルールをインデックス作成サーバーに送信することで、前記インデックス作成サーバーが前記分割ルールに基づいて作成対象のインデックスデータを分割するステップと、
前記マスター制御サーバーが前記分割した結果を特徴付けるインデックス設定情報を取得するステップと、
前記マスター制御サーバーが前記インデックス設定情報に基づいてインデックスデータを取得するステップと、
前記マスター制御サーバーが前記インデックスデータを複数のエンジンサーバーのうちの、対応する少なくとも2つのエンジンサーバーに記憶するステップとを含むインデックスの更新方法。 - プロキシーサーバーであって、
問い合わせサーバーからの問い合わせ要求を受信するための通信手段と、
前記問い合わせ要求に対応する属性情報を取得し、前記属性情報に基づいて設定管理サーバーに問い合わせて前記属性情報に対応する機器情報を取得し、かつ前記機器情報に対応する少なくとも2つのエンジンサーバーを決定するための処理手段とを備え、
前記通信手段は、さらに、前記少なくとも2つのエンジンサーバーに前記問い合わせ要求を送信して、前記少なくとも2つのエンジンサーバーが前記問い合わせ要求に基づいて戻した第1問い合わせ結果を取得することに用いられ、
前記処理手段は、さらに、少なくとも2つの前記第1問い合わせ結果を予め設定されたルールにしたがって併合し、第2問い合わせ結果を得ることに用いられ、
前記通信手段は、さらに、前記第2問い合わせ結果を前記問い合わせサーバーに送信することに用いられ、
前記プロキシーサーバーは、前記問い合わせ要求のサービスタイプに対応するプロキシーサーバー、または予め設定されたルールに基づいて決定するプロキシーサーバーであるプロキシーサーバー。 - マスター制御サーバーであって、
設定管理サーバーから分割ルールを取得するためのマスター制御モジュールと、
前記分割ルールをインデックス作成サーバーに送信することで、前記インデックス作成サーバーが前記分割ルールに基づいて作成対象のインデックスデータを分割し、かつ前記分割した結果を特徴付けるインデックス設定情報を取得するための通知モジュールとを備え、
前記マスター制御モジュールは、さらに、前記インデックス設定情報に基づいてインデックスデータを取得し、かつ前記インデックスデータを複数のエンジンサーバーのうちの、対応する少なくとも2つのエンジンサーバーに記憶することに用いられるマスター制御サーバー。 - 前記マスター制御サーバーは、さらに、複数のクライアントモジュールを備え、前記複数のクライアントモジュールは複数のエンジンサーバーと一対一で対応し、
前記マスター制御モジュールは、第1クライアントモジュールが第1インデックスデータを取得するように、前記インデックス設定情報に基づいて指示し、前記第1クライアントモジュールは、前記インデックス設定情報に含まれた第1分割結果に対応する前記複数のクライアントモジュールのうちのクライアントモジュールであり、
前記第1クライアントモジュールは、前記マスター制御モジュールの指示に基づいて前記インデックスデータを取得し、かつ前記インデックスデータを対応するエンジンサーバーに記憶することを特徴とする請求項6に記載のマスター制御サーバー。 - 分散型検索システムであって、
分割ルールを含む設定情報と、複数のエンジンサーバーの情報を特徴付ける機器情報とを管理するための設定管理サーバーと、
端末装置の問い合わせ要求を取得するための問い合わせサーバーと、
複数のプロキシーサーバーと、
それぞれ、前記分割ルールを満たすインデックスデータを記憶するための複数のエンジンサーバーとを備え、
前記複数のプロキシーサーバーのうちの少なくとも1つの第1プロキシーサーバーは、前記問い合わせサーバーからの前記問い合わせ要求を受信した後、前記問い合わせ要求の属性情報に基づいて前記設定管理サーバーに問い合わせることにより、前記複数のエンジンサーバーのうちの少なくとも2つの第1エンジンサーバーを決定し、かつ前記少なくとも2つの第1エンジンサーバーに前記問い合わせ要求を送信し、
前記少なくとも2つの第1エンジンサーバーのそれぞれは、前記問い合わせ要求を受信することに応答して第1問い合わせ結果をフィードバックし、
前記少なくとも1つの第1プロキシーサーバーは、少なくとも2つの前記第1問い合わせ結果を第2問い合わせ結果として併合し、かつ前記問い合わせサーバーに送信することで、前記問い合わせサーバーが前記第2問い合わせ結果を前記端末装置に戻し、
前記問い合わせサーバーは、サービスタイプが前記問い合わせ要求のサービスタイプとマッチングする前記複数のプロキシーサーバーのうちの前記第1プロキシーサーバーに前記問い合わせ要求を送信する、または
前記問い合わせサーバーは、予め設定されたルールにしたがって前記プロキシーサーバーから少なくとも1つを前記第1プロキシーサーバーとして選択し、かつ前記第1プロキシーサーバーに前記問い合わせ要求を送信する分散型検索システム。 - 前記設定管理サーバーから前記分割ルールを取得するためのマスター制御サーバーと、
前記マスター制御サーバーにより送信された前記分割ルールに基づいて作成対象のインデックスデータを分割し、かつ前記分割した結果を特徴付けるインデックス設定情報を前記マスター制御サーバーに送信するためのインデックス作成サーバーとを、さらに、備え、
前記マスター制御サーバーは、前記インデックス設定情報に基づいてインデックスデータを取得し、かつ前記インデックスデータを対応する前記複数のエンジンサーバーのうちの少なくとも2つのエンジンサーバーに記憶することを特徴とする請求項8に記載のシステム。 - 前記第1エンジンサーバーは、予め設定されたカットオフパラメータに基づいて前記第1プロキシーサーバーに前記第1問い合わせ結果をフィードバックすることを特徴とする請求項8に記載のシステム。
- コンピューター機器であって、メモリ、プロセッサ、及びメモリに記憶され、プロセッサに運転可能なコンピュータープログラムを備えるコンピューター機器であって、前記プロセッサが前記プログラムを実行すると、請求項1〜3のいずれか一項に記載の分散型検索方法のステップを実装することを特徴とするコンピューター機器。
- コンピューター機器であって、メモリ、プロセッサ、及びメモリに記憶され、プロセッサに運転可能なコンピュータープログラムを備えるコンピューター機器であって、前記プロセッサが前記プログラムを実行すると、請求項4に記載のインデックスの更新方法のステップを実装することを特徴とするコンピューター機器。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710540135.0 | 2017-07-05 | ||
CN201710540135.0A CN107273540B (zh) | 2017-07-05 | 2017-07-05 | 分布式搜索及索引更新方法、***、服务器及计算机设备 |
PCT/CN2017/120018 WO2019007010A1 (zh) | 2017-07-05 | 2017-12-29 | 分布式搜索及索引更新方法、***、服务器及计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020523700A JP2020523700A (ja) | 2020-08-06 |
JP6967615B2 true JP6967615B2 (ja) | 2021-11-17 |
Family
ID=60071122
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019568703A Active JP6967615B2 (ja) | 2017-07-05 | 2017-12-29 | 分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20200210496A1 (ja) |
JP (1) | JP6967615B2 (ja) |
CN (1) | CN107273540B (ja) |
CA (2) | CA3184577A1 (ja) |
TW (1) | TWI740029B (ja) |
WO (1) | WO2019007010A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107273540B (zh) * | 2017-07-05 | 2021-09-24 | 北京三快在线科技有限公司 | 分布式搜索及索引更新方法、***、服务器及计算机设备 |
CN109255072B (zh) * | 2018-08-15 | 2023-04-14 | 腾讯科技(深圳)有限公司 | 信息召回方法及装置、计算机存储介质、电子设备 |
CN109409924B (zh) * | 2018-09-03 | 2023-04-18 | 平安科技(深圳)有限公司 | 账户评分***、方法、服务器和计算机可读存储介质 |
CN109918472A (zh) * | 2019-02-27 | 2019-06-21 | 北京百度网讯科技有限公司 | 存储和查询数据的方法、装置、设备和介质 |
CN111405039A (zh) * | 2020-03-16 | 2020-07-10 | 深圳市网心科技有限公司 | 一种数据透传方法、装置、***和客户端及服务器 |
CN111417119A (zh) * | 2020-03-16 | 2020-07-14 | 纳瓦电子(上海)有限公司 | 无线级联的方法 |
CN111858585A (zh) * | 2020-06-30 | 2020-10-30 | 深圳幂度信息科技有限公司 | 区块链策略处理装置、计算机可读存储介质及终端设备 |
CN111931033A (zh) * | 2020-08-11 | 2020-11-13 | 深圳市欢太科技有限公司 | 一种检索方法、检索装置及服务器 |
CN113761079A (zh) * | 2021-01-21 | 2021-12-07 | 北京沃东天骏信息技术有限公司 | 数据访问方法、***和存储介质 |
CN113438304B (zh) * | 2021-06-23 | 2023-04-07 | 平安消费金融有限公司 | 基于数据库集群的数据查询方法、装置、服务器及介质 |
CN113535730A (zh) * | 2021-07-21 | 2021-10-22 | 挂号网(杭州)科技有限公司 | 搜索引擎的索引更新方法及***、电子设备、存储介质 |
CN113641796A (zh) * | 2021-08-30 | 2021-11-12 | 平安医疗健康管理股份有限公司 | 数据搜索方法、***及存储介质 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1305271C (zh) * | 2004-04-29 | 2007-03-14 | 上海交通大学 | 基于代理映射的网络安全隔离与信息交换***及方法 |
US8880489B2 (en) * | 2005-08-04 | 2014-11-04 | Hewlett-Packard Development Company, L.P. | Discovery across multiple registries |
CN102375853A (zh) * | 2010-08-24 | 2012-03-14 | ***通信集团公司 | 分布式数据库***、在其中建立索引的方法和查询方法 |
CN101950300B (zh) * | 2010-09-20 | 2013-07-24 | 华南理工大学 | 一种分布式搜索引擎***及其实现方法 |
CN102033912A (zh) * | 2010-11-25 | 2011-04-27 | 北京北纬点易信息技术有限公司 | 一种分布式数据库访问方法及*** |
US9774676B2 (en) * | 2012-05-21 | 2017-09-26 | Google Inc. | Storing and moving data in a distributed storage system |
US10956667B2 (en) * | 2013-01-07 | 2021-03-23 | Google Llc | Operational transformations proxy for thin clients |
CN104978337A (zh) * | 2014-04-08 | 2015-10-14 | 张军 | 一种基于软件定义网络的分布式视频搜索引擎框架 |
CN105320527A (zh) * | 2014-06-12 | 2016-02-10 | 中兴通讯股份有限公司 | 基于zookeeper分布式搜索引擎的配置文件更新方法、装置及*** |
US9760591B2 (en) * | 2015-05-14 | 2017-09-12 | Walleye Software, LLC | Dynamic code loading |
CN105187551A (zh) * | 2015-09-29 | 2015-12-23 | 成都四象联创科技有限公司 | 基于云平台的分布式计算方法 |
CN105978948B (zh) * | 2016-04-27 | 2019-05-24 | 努比亚技术有限公司 | 一种云服务的方法和*** |
CN106776694A (zh) * | 2016-11-11 | 2017-05-31 | 张军 | 一种基于软件定义的网络分布式图片搜索引擎框架 |
CN107273540B (zh) * | 2017-07-05 | 2021-09-24 | 北京三快在线科技有限公司 | 分布式搜索及索引更新方法、***、服务器及计算机设备 |
-
2017
- 2017-07-05 CN CN201710540135.0A patent/CN107273540B/zh active Active
- 2017-12-29 CA CA3184577A patent/CA3184577A1/en active Pending
- 2017-12-29 US US16/622,298 patent/US20200210496A1/en not_active Abandoned
- 2017-12-29 JP JP2019568703A patent/JP6967615B2/ja active Active
- 2017-12-29 WO PCT/CN2017/120018 patent/WO2019007010A1/zh active Application Filing
- 2017-12-29 CA CA3065118A patent/CA3065118C/en active Active
-
2018
- 2018-03-30 TW TW107111376A patent/TWI740029B/zh not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
CN107273540A (zh) | 2017-10-20 |
US20200210496A1 (en) | 2020-07-02 |
TW201907324A (zh) | 2019-02-16 |
TWI740029B (zh) | 2021-09-21 |
CN107273540B (zh) | 2021-09-24 |
CA3065118A1 (en) | 2019-01-10 |
WO2019007010A1 (zh) | 2019-01-10 |
CA3065118C (en) | 2024-03-26 |
JP2020523700A (ja) | 2020-08-06 |
CA3184577A1 (en) | 2019-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6967615B2 (ja) | 分散型検索及びインデックスの更新方法、システム、サーバー並びにコンピューター機器 | |
CN107508795B (zh) | 跨容器集群的访问处理装置及方法 | |
US8190630B2 (en) | Data search device, data search system, data search method and data search program | |
CN109871224A (zh) | 一种基于用户标识的灰度发布方法、***、介质及设备 | |
JP6641067B1 (ja) | 検出システム、方法および関連装置 | |
CN102201010A (zh) | 无共享架构的分布式数据库***及其实现方法 | |
JP2012038152A (ja) | 接続管理システム、及びシンクライアントシステムにおける接続管理サーバの連携方法 | |
CN110413845B (zh) | 基于物联网操作***的资源存储方法及装置 | |
CN102404387A (zh) | 一种用于与其他节点进行信息同步的方法、装置和设备 | |
US9197715B2 (en) | Information processing apparatus and data control method | |
US8984100B2 (en) | Data downloading method, terminal, server, and system | |
CN116701330A (zh) | 物流信息共享方法、装置、设备及存储介质 | |
US20220166842A1 (en) | Data distribution method and electronic device | |
CN111339130A (zh) | 一种数据查询方法、相关设备及可读存储介质 | |
CN111666265B (zh) | 一种数据管理方法、装置、服务器及存储介质 | |
CN110597808B (zh) | 分布式数据库表连接方法、装置、***、服务器及介质 | |
CN109981725B (zh) | 一种跨安全域的通信方法、服务器和可读存储介质 | |
CN104376014A (zh) | 一种结构化p2p网络中的资源发布及查询方法 | |
US10334023B2 (en) | Content distribution method, system and server | |
CN2929830Y (zh) | 一种搜索引擎服务器和搜索*** | |
CN103685367A (zh) | 离线下载***和方法 | |
CN117499017B (zh) | 区块链网络传输方法、***及存储介质和终端设备 | |
CN113242307B (zh) | 服务请求处理方法、装置、服务器及存储介质 | |
CN107846290B (zh) | 一种拓补关系管理方法和管理设备 | |
KR100931201B1 (ko) | 검색 시스템에서의 지능형 브로커 장치 및 이를 이용한검색방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191213 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210506 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211019 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211025 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6967615 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |