JP7281401B2 - 仮想又は拡張現実表示を使用して産業保守を遂行するための方法及びシステム - Google Patents

仮想又は拡張現実表示を使用して産業保守を遂行するための方法及びシステム Download PDF

Info

Publication number
JP7281401B2
JP7281401B2 JP2019539884A JP2019539884A JP7281401B2 JP 7281401 B2 JP7281401 B2 JP 7281401B2 JP 2019539884 A JP2019539884 A JP 2019539884A JP 2019539884 A JP2019539884 A JP 2019539884A JP 7281401 B2 JP7281401 B2 JP 7281401B2
Authority
JP
Japan
Prior art keywords
components
video content
indicator
component
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019539884A
Other languages
English (en)
Other versions
JP2020507156A (ja
Inventor
スペイド、ランドール
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lonza AG
Original Assignee
Lonza AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lonza AG filed Critical Lonza AG
Publication of JP2020507156A publication Critical patent/JP2020507156A/ja
Application granted granted Critical
Publication of JP7281401B2 publication Critical patent/JP7281401B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B25/00Models for purposes not provided for in G09B23/00, e.g. full-sized devices for demonstration purposes
    • G09B25/02Models for purposes not provided for in G09B23/00, e.g. full-sized devices for demonstration purposes of industrial processes; of machinery
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311Scheduling, planning or task assignment for a person or group

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Description

本PCT国際出願は、2017年1月24に出願された米国仮出願第62/449,803号の優先権及び利益を主張するものであり、その米国仮出願は、その全体において参照により本明細書内に明示的に組み込まれている。
本出願は、一般的には、仮想現実又は拡張現実表示システムなどの、設備(例えば、産業設備)の1つ又は複数の構成要素を描写する視覚的表示システムに関係し、より詳しくは、1つの態様において、産業背景環境において使用されることになる、そのような表示を提供するためのシステム及び方法に関係する。
薬物又は生物学的製品を製造することに関わるものなどの産業設備は、パイプ、保持タンク、濾過器、バルブ等々のような、数千点の機器を内包することがある。それらの構成要素の多くは、それらの存続期間中に、検査、モニタリング、インベントリ分析、保守、若しくは取り替えを要することがあり、及び/又は、ほとんど若しくは全く気付かれることなく、故障若しくは機能不全であることがある。
そのようなシステムの保守は、いくつもの問題点をもたらす。第1に、問題点になっている構成要素の位置を突き止めること、及び、その構成要素が正しい構成要素であるということを確認することでさえ、十分なサイズ及び/又は複雑度の設備においては困難であることがある。人員は、構成要素の位置を突き止めるための地図又は指図を提供されることがあるが、そのような資料を解釈することが、ヒューマン・エラーのリスクをもたらす。さらに、遂行されることになる手順は、2つ以上の位置においての、2つ以上の構成要素を包含し、又は、それらの構成要素に影響を及ぼし、別の層の複雑度を加えることがある。第2に、手順それ自体は、承認されるプロセスにより定められ得る、及び、ISO9001などの品質管理標準により律され得る、いろいろなステップを必然的に含むことがある。精度が、遵守、効率、及び安全の理由のために重要である。その理由のために、手順を履行するための具体的な、詳細な指図が、物理的チェックリストの形式で人員に提供されることがある。それにもかかわらず、そのような指図は、不明確又は非直感的であることがあり、誤解釈されることがあり、エラー又は安全懸念につながる。いくつかの用例において、医薬及び/又はバイオテクノロジー産業の中では、紙が製造空間内で許可されず、そのことは、技術員に、意味のある、及び正確な指図を提供するときに難題を加える。
米国特許第6,040,841号 米国特許第9,285,592号 米国公報第2013/0280797号 米国公報第2012/0077429号 米国公報第2011/0280797号 米国公報第2009/0305626号 米国特許第8,298,054号 米国特許第7,629,167号 米国特許第5,656,491号 米国特許出願公開第2016/0097074号
本開示は、拡張現実又は仮想現実表示を含む、設備(例えば、産業設備などの生産設備)の1つ又は複数の構成要素を描写する視覚的表示システムをユーザに提示するための方法及びシステムに関係する。表示は、設備内の構成要素に関係のあるタスク(保守、診断、又は識別など)を遂行することの手助けをし得る。表示は、ウェアラブル・デバイス(例えば、ヘッドセット)の一部であり得る。そのようなヘッドセットを着用するユーザは、ユーザの視野内の1つ又は複数の構成要素に対する、情報又はタスクを提供され得る。
1つの態様によれば、仮想現実又は拡張現実表示を提供する方法が提供される。方法は、デバイスのカメラによって、医薬製品、例えば生物学的製品の処理のための設備の構成要素の描写を含む、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)を生成するステップと、構成要素(例えば、容器、保持タンクと濾過器との間のパイプ)を検出又は選択するステップと、構成要素(例えば、容器、パイプ、保持タンク、又は濾過器)と関連付けられるインジケータを含む、第2のビデオ・コンテンツを生成するステップであって、第1のビデオ・コンテンツ及び第2のビデオ・コンテンツは、仮想現実又は拡張現実表示を提供する、生成するステップとを含む。
1つの実施例によれば、表示は、拡張現実表示である。別の実施例によれば、表示は、拡張現実表示システムにより提供される。さらに別の実施例によれば、表示は、仮想現実表示である。さらに別の実施例によれば、表示は、仮想現実表示システムにより提供される。別の実施例によれば、インジケータは、表1から選択される。
さらなる実施例によれば、インジケータは、構成要素のアイデンティティ(identity)、例えば、構成要素、例えばポンプのタイプ、シリアル番号、部品番号、又は、構成要素の他の識別子と関連付けられる。その上さらなる実施例によれば、方法は、ビデオ・コンテンツ、例えば、第2のインジケータ、例えばインジケータ形式表1を含む第2のビデオ・コンテンツを生成するステップを含む。さらなる実施例によれば、方法は、ビデオ・コンテンツ、例えば、第2の、第3の、第4の、第5の、又は後続のインジケータ、例えば表1からのインジケータを含む第2のビデオ・コンテンツを生成するステップを含む。
別の実施例によれば、インジケータは、構成要素、又は、その構成要素の一部分の、機能、条件、又はステータスに対する値を含む。さらなる実施例によれば、値は、現在若しくは実時間値、来歴的若しくは過去値、又は、あらかじめ選択された値(例えば、機能、条件、又はステータスに対する、最大又は最小値(例えば、設置以来、指定された時間期間内、又は、あらかじめ決定された事象(例えば、接続されるバルブを最後に開いたこと、最後の検査値)以来などの、あらかじめ選択された時間フレーム内で発生する、あらかじめ選択された値)を含む。別の実施例によれば、インジケータに対する値は、参照値と比較され、又は、参照値とともに提示される(例えば、圧力が、圧力に対するあらかじめ決定された値(例えば、圧力に対するあらかじめ決定された許容可能な範囲)と比較され、又は、そのあらかじめ決定された値とともに提示される)。別の実施例によれば、構成要素は、表2から選択される。
1つの実施例によれば、方法は、表示デバイス上で、構成要素のすべて又は一部の描写(例えば、第1のビデオ・コンテンツのすべて又は一部)及びインジケータのすべて又は一部の描写(例えば、第2のビデオ・コンテンツのすべて又は一部)を表示するステップをさらに含む。別の実施例によれば、方法は、構成要素及びインジケータのすべて又は一部の描写を含む表示を成立させるステップをさらに含む。さらに別の実施例によれば、方法は、第1のビデオ・コンテンツのすべて又は一部、及び、第2のビデオ・コンテンツのすべて又は一部を含む表示を成立させるステップをさらに含む。さらに別の実施例によれば、方法は、表示デバイス上で、ライブの、又は記録された、第2のビデオ・コンテンツ(例えば、第2のビデオ・ストリーム)のすべて又は一部、及び、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)のすべて又は一部を表示するステップであって、第1のビデオ・コンテンツのすべて又は一部は、ライブの、又は記録された、第2のビデオ・コンテンツのすべて又は一部をオーバーレイされる、表示するステップをさらに含む。
1つの実施例によれば、第1のビデオ・コンテンツは、複数の構成要素の描写を含み、表示デバイスにおいて、複数の構成要素のうちの1つの(例えば、オペレータからの)選択を受信することをさらに含む。別の実施例によれば、方法は、位置情報を位置受信器(例えば、GPS)から受信し、位置情報を参照して構成要素を識別するステップをさらに含む。さらに別の実施例によれば、方法は、構成要素の識別を可能とするための、構成要素上の、又は、構成要素の十分近傍の、構成要素識別子(例えば、RFID、バーコード)から、構成要素に関する情報を受信するステップをさらに含む。
1つの実施例によれば、方法は、構成要素に関して遂行されることになる少なくとも1つのアクション項目(例えば、保守、修理、訓練、取り替え、又は、構成要素若しくは第2の構成要素、生産タスクの調整、例えば、プロセス条件の調整)を決定するステップをさらに含む。さらに別の実施例によれば、方法は、少なくとも1つのアクション項目が、インジケータ、又は、インジケータに対する値に応答的であるということを決定するステップ(例えば、最大時間又は最大動作を超えたことを示すインジケータに応じて、構成要素が取り替えられるべきであると決定し、生産プロセスがアクションを要すると決定するステップ)をさらに含む。さらなる実施例によれば、方法は、少なくとも1つのアクション項目が遂行された後に、構成要素を再チェックするステップ、例えば、請求項1)の1つ又は複数のステップを反復するステップを含む。
別の実施例によれば、方法は、システム内に、構成要素に関係付けられる情報、例えば、検査、修理、又は取り替えなどの、推奨される、又はとられるアクションを入れるステップをさらに含む。さらなる実施例によれば、情報は、レコード、例えばデータベース、又はログの形で記録される。
別の態様によれば、表示デバイスが提供される。表示デバイスは、薬物又は生物学的製品の処理のための産業設備の構成要素の描写を含む、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)を受信するように構成されるカメラと、表示デバイスのユーザに可視であるように場所決めされるように構成される表示画面と、薬物又は生物学的製品の処理のための産業設備の構成要素の描写を含む、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)を生成すること、構成要素(例えば、パイプ、保持タンク、又は濾過器)と関連付けられるインジケータを含む、第2のビデオ・コンテンツを生成すること、並びに、第1のビデオ・コンテンツ及び第2のビデオ・コンテンツを、拡張現実又は仮想現実表示として表示することを行うように構成されるプロセッサとを含む。
1つの実施例によれば、デバイスは、第1のビデオ・コンテンツを取り込むように構成されるカメラを含む。さらなる実施例によれば、プロセッサは、構成要素を第1のビデオ・コンテンツ内で検出するように構成される。
1つの実施例によれば、表示デバイスは、着用者の視野内に場所決めされるように構成されるウェアラブル・デバイスである。さらなる実施例によれば、プロセッサは、表示画面上で、構成要素のすべて又は一部の描写(例えば、第1のビデオ・コンテンツのすべて又は一部)及びインジケータのすべて又は一部の描写(例えば、第2のビデオ・コンテンツのすべて又は一部)を表示するように構成される。さらなる実施例によれば、プロセッサは、構成要素及びインジケータのすべて又は一部の描写を含む表示を成立させるように構成される。その上さらなる実施例によれば、プロセッサは、第1のビデオ・コンテンツのすべて又は一部、及び、第2のビデオ・コンテンツのすべて又は一部を含む表示を成立させるように構成される。
別の実施例によれば、プロセッサは、表示画面上で、第2のビデオ・コンテンツ(例えば、第2のビデオ・ストリーム)のすべて又は一部、及び、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)のすべて又は一部を表示することであって、第1のビデオ・コンテンツのすべて又は一部は、第2のビデオ・コンテンツのすべて又は一部をオーバーレイされる、表示することを行うようにさらに構成される。1つの実施例によれば、デバイスは、ユーザ入力を受信するように構成されるユーザ・インターフェイスを含む。さらなる実施例によれば、ユーザ入力は、ユーザのジェスチャであり、ジェスチャは、第1のビデオ・コンテンツ内で検出される。1つの実施例によれば、第1のビデオ・コンテンツは、複数の構成要素の描写を含み、ユーザ・インターフェイスは、複数の構成要素のうちの1つのユーザ選択を受信するように構成される。さらなる実施例によれば、第1のビデオ・コンテンツは、複数の構成要素の描写を含み、ユーザ・インターフェイスは、複数の構成要素のうちの1つのユーザ選択を受信するように構成される。別の実施例によれば、ユーザ・インターフェイスは、インジケータとのユーザ相互作用を受信するように構成され、プロセッサは、ユーザ相互作用に応答してインジケータを修正するようにさらに構成される。
別の実施例によれば、デバイスは、位置情報を取得するように構成される位置受信器(例えば、GPS)を含み、プロセッサは、位置情報を参照して構成要素を識別するようにさらに構成される。1つの実施例によれば、デバイスは、構成要素上の、又は、構成要素の近傍の、シグナリング・デバイスからの近接信号を受信するように構成される無線受信器(例えば、RFID)を含み、プロセッサは、近接信号を参照して構成要素を識別するようにさらに構成される。別の実施例によれば、デバイスは、ネットワークを経て少なくとも1つのコンピュータと通信するように構成されるネットワーク・インターフェイスを含む。さらに別の実施例によれば、デバイスは、第1のビデオ・コンテンツの一部分、及びインジケータのうちの少なくとも1つを記憶するように構成されるメモリを含む。
1つの実施例によれば、デバイスは、ジャイロスコープ、加速度計、及びコンパスのうちの少なくとも1つをさらに含む。別の実施例によれば、デバイスは、ユーザの目、顔、又は頭に対する保護構成要素を含む。さらに別の実施例によれば、デバイスは、ユーザが、ユーザの目、顔、又は頭に対する保護具を着用している間、ユーザにフィットするように構成される。別の実施例によれば、デバイスは、ユーザが自給式呼吸システムを着用している間、ユーザにフィットするように構成される。
別の態様によれば、視覚的コンテンツを表示する方法が提供される。方法は、表示デバイスのユーザに、薬物又は生物学的製品の処理のための産業設備の構成要素の描写を含む、第1のビデオ・コンテンツ(例えば、第1のビデオ・ストリーム)、及び、構成要素(例えば、容器、パイプ、保持タンク、又は濾過器)と関連付けられるインジケータを含む、第2のビデオ・コンテンツから成立させられる表示を表示するステップであって、第1のビデオ・コンテンツ及び第2のビデオ・コンテンツは、拡張現実表示を提供する、表示するステップと、表示デバイスのユーザ・インターフェイスを経てユーザ入力を受信するステップとを含む。
1つの実施例によれば、表示は、拡張現実表示である。別の実施例によれば、表示は、仮想現実表示である。さらに別の実施例によれば、ユーザ入力を受信するステップは、ユーザのジェスチャを第1のビデオ・コンテンツ内で検出するステップを含む。1つの実施例によれば、方法は、インジケータに対する値(例えば、構成要素がx時間の動作に達したということを指示する値)に応じて、構成要素又は第2の構成要素に対するさらなるインジケータを創出するステップをさらに含む。別の実施例によれば、方法は、さらなるインジケータを異なるユーザと関連付ける入力を受信するステップをさらに含む。
1つの実施例によれば、方法は、インジケータ、又は、インジケータに対する値に応じて、信号をエンティティ(例えば、システム・オペレータ、又は保守エンジニア、又は設備管理者)に送出するステップをさらに含む。別の実施例によれば、方法は、メモリ内に記憶されることになる、第1のビデオ・コンテンツ及び/又は第2のビデオ・コンテンツの、いくらか又はすべてを取り込むステップをさらに含む。
1つの実施例によれば、方法は、第1のビデオ・コンテンツ内で、事象(流体又は気体の流出、警報の存在)を検出するステップと、事象に関係するさらなるインジケータを創出するステップとをさらに含む。さらなる実施例によれば、方法は、事象に関する信号をエンティティ(例えば、システム・オペレータ、又は保守エンジニア、又は設備管理者)に送信するステップを含む。1つの実施例によれば、方法は、デバイスのネットワーク・インターフェイスを経て、構成要素に関する情報を受信するステップをさらに含む。
別の実施例によれば、インジケータは、構成要素に対して遂行されることになるアクション項目に関する情報を含む。さらなる実施例によれば、アクション項目は、第2のビデオ・コンテンツ内のタスク・リストの一部として提示される。別の実施例によれば、アクション項目は、構成要素を必然的に含む、保守タスク又は産業プロセスのうちの少なくとも1つに関係する。さらに別の実施例によれば、タスク・リストは、構成要素に関係するアクション項目、及び、別の構成要素に関係するアクション項目を含む。別の実施例によれば、ユーザ入力は、アクション項目に関してとられるアクションを指示する。
さらに別の実施例によれば、第2のビデオ・コンテンツは、構成要素の位置への方向を提供するさらなるインジケータを含む。その上さらなる実施例によれば、第2のビデオ・コンテンツのいくらか又はすべては、構成要素、インジケータ、又は、インジケータの値の特性に対応する色を帯びた様態で表示される。別の実施例によれば、特性は、構成要素のタイプ、構成要素の識別子、構成要素により格納される、若しくは送られる材料の識別子、又は、構成要素により格納される、若しくは送られる材料の温度である。
少なくとも1つの実施例の様々な態様が、一定の縮尺で描かれることを意図されない、付随する図を参照して下記で論考される。図は、様々な態様及び実施例の、例解及びさらなる理解を提供するように含まれ、本明細書内に組み込まれ、本明細書の一部を組成するが、何らかの個別の実施例の制限の規定としては意図されない。図面は、本明細書の残りとともに、説明及び主張される、態様及び実施例の、原理及び動作を解説する働きをする。図において、様々な図において例解される各々の同一の、又はほぼ同一の構成要素は、同類の数表示により表される。明確さの目的のため、あらゆる構成要素が、あらゆる図において標示されるとは限らないことがある。
1つ又は複数の実施例による、仮想現実又は拡張現実表示などの視覚的表示を提供するための表示デバイスのブロック線図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 1つ又は複数の実施例による、表示デバイスのユーザ・インターフェイスの表現の図である。 本発明の態様及び実施例が実現され得る、コンピュータ・システムの1つの実例のブロック線図である。
本開示の態様は、設備の1つ又は複数の構成要素を描写する視覚的表示システム(例えば、拡張現実又は仮想現実表示)をユーザに提示して、ユーザが、設備内の構成要素に関係のある、検査、モニタリング、インベントリ分析、保守、診断、又は識別などのタスクを遂行することを支援するための方法及びシステムに関係する。1つの実施例において、設備は、産業設備などの生産設備である。表示は、ウェアラブル・デバイス(例えば、ヘッドセット)の一部であり得る。そのようなヘッドセットを着用するユーザは、産業設備を見回すことができ、ユーザの視野、可変であり得る域内の1つ又は複数の構成要素に対する、情報又はタスクを提供され得る。
1つの態様又は動作モードにおいて、表示は、仮想現実表示であり得るものであり、3次元視覚的コンテンツが、生成され、ユーザに表示され、コンテンツのビューは、デバイスの場所によって変化する。別の態様又は動作モードにおいて、表示は、拡張現実表示であり得るものであり、デバイスにより取り込まれるビデオ・コンテンツが、表示され、コンテキスト固有の生成される視覚的コンテンツをオーバーレイされる。そのような拡張又は仮想現実表示を創出するためのシステム及び方法は、2000年3月21日に発行された「METHOD AND SYSTEM FOR VIRTUAL CINEMATOGRAPHY」という名称の米国特許第6,040,841号において、及び、2016年3月15日に発行された「WEARABLE DEVICE WITH INPUT AND OUTPUT STRUCTURES」という名称の米国特許第9,285,592号において論考されており、それらの米国特許の各々の内容は、すべての目的のために、それらの米国特許の全体において本明細書により組み込まれている。
1つの実例において、デバイスを着用する保守人員は、構成要素の視覚的表現、構成要素来歴を詳述するドキュメント、及び/又は、構成要素に関する保守手順を完了するためのタスクの視覚的リストを提示され得る。ユーザがリスト上のタスクを完了する際、リストは、完了されたタスクを除去するために(自動的に、又は、ジェスチャなどのユーザからの相互作用によってのいずれかで)更新され得る。
別の実例において、産業設備内の1つ又は複数の構成要素を調べる人員は、アイデンティティ情報、又は、構成要素の年数、設置された日付、製造者、取り替えユニットの入手可能性、予想されるライフ・サイクル、機能、条件、若しくはステータスと関連付けられる情報を含む、構成要素に関する情報を提示され得る。そのような情報は、構成要素内の材料の温度、構成要素を通るフロー・レート、又は、構成要素内の圧力を含み得る。構成要素を必然的に含む近時の問題点若しくは事象、又は検査結果などの、他の情報が提供され得る。そのような情報は、表示内の構成要素の真上にテキストの形の値(例えば、温度)をオーバーレイすることを、オーバーレイ上で開かれ表示され得るファイル/ドキュメントの視覚的表現により行うことによってなどで、テキストの形で提示され得るものであり、又は、値による色を帯びた様態で構成要素に濃淡付けすること(例えば、構成要素を、その内側の材料の温度による赤の濃淡を帯びた様態で表示すること)によってなどで、グラフィカルに提示され得る。
さらに別の実例において、機能不全又は他の問題点に現在遭遇している、1つ又は複数の構成要素を調べる人員は、機能不全に関する情報を提示され得るものであり、アラート条件を創出する、他のものに告知する、又は、他の形で機能不全に対処するためのインターフェイスをさらに提示され得る。
これらの実例のいずれにおいても、ユーザは、手順、条件、機能不全、又は、構成要素との相互作用の他の態様をドキュメント化する機会を提示され得る。例えば、ユーザは、構成要素を視認する間に、ビデオを記録する、及び/又は、写真を取り込む機会を提供され得る。このコンテンツは、手順の完了をドキュメント化するために使用され得るものであり、又は、構成要素に関する1つ若しくは複数の問題点を、ドキュメント化若しくは診断することの目的のために、記憶され得る、若しくは、他のものに提供され得る。
いくつかの実施例による、産業設備内のユーザに拡張現実又は仮想現実表示情報を提示するための表示デバイス100のブロック線図が、図1において示される。表示デバイスは、表示デバイス100のユーザに仮想現実又は拡張現実表示を提供するように構成される、少なくとも1つの表示画面110を含む。表示は、産業設備内の1つ若しくは複数の構成要素の、ビデオ若しくは写真を含み得るものであり、又は、1つ若しくは複数の構成要素のコンピュータ・グラフィック(例えば、3次元表現)を含み得る。
少なくとも1つのカメラ130が、仮想現実又は拡張現実表示を生成することにおいての使用のために、ビデオ・ストリーム又は写真を取り込むために設けられ得る。例えば、1つ又は複数の構成要素について含む、産業設備のビデオが、拡張現実表示の一部として表示されるために取り込まれ得る。いくつかの実施例において、2つの表示画面110、及び、2つのカメラ130が設けられ得る。各々の表示画面110は、ユーザの各々の目を覆って配設され得る。各々のカメラ130は、ユーザの各々の目の相対的な視点からのビデオ・ストリーム又は写真コンテンツを取り込むことができ、コンテンツは、3次元表示に近似するように、それぞれの表示画面110上に表示され得る。少なくとも1つのカメラ130は、様々な分解能において、又は、異なるフレーム・レートにおいて画像を取り込むように構成され得る。例えば、セル・フォン又はウェブカメラにおいて使用されるものなどの、小さいフォーム-ファクタを伴う多くのビデオ・カメラが、デバイス100の実施例内へと組み込まれ得る。
プロセッサ120が、少なくとも1つのカメラ130からビデオ・ストリーム又は写真を取り込み、少なくとも1つの表示画面110がビデオ・コンテンツをユーザに表示することを引き起こすために設けられる。プロセッサ120は、計算を遂行するように構成される算術論理ユニット(ALU:arithmetic logic unit)(示されない)と、データ及び命令の一時的記憶のためのいくつものレジスタ(示されない)と、デバイス100の動作を制御するための制御ユニット(示されない)とを内包する。Digital Equipment、MIPS、IBM、Motorola、NEC、Intel、Cyrix、AMD、Nexgen、及び他のものからのものを含む、種々のプロセッサの任意のものが使用され得る。例解を容易にするために、1つのプロセッサ120を伴って示されるが、デバイス100は、代替的に、複数個の処理ユニットを含み得る。
プロセッサ120は、コンピュータ・ビジョン、深層学習、又は、他の技法を使用して、ビデオ・ストリームの画像内で、1つ又は複数の構成要素を検出するように構成され得る。プロセッサ120は、GPSデータ、RFIDデータ、又は、他のデータへの参照を為して、デバイス100に近接する、及び/又は、少なくとも1つのカメラ130の視野内の構成要素を識別し得る。いくつかの実施例において、プロセッサ120は、さらには、ビデオ・ストリーム内の1つ又は複数の、バーコード及び/又はQRコード(登録商標)を識別し、バーコード内に符号化される識別子を使用して、関連付けられる構成要素を識別し得る。
メモリ140が、少なくとも1つのカメラ130からの取り込まれるコンテンツのいくらか又はすべてを記憶するために、及び、産業設備、又は、その産業設備内の1つ若しくは複数の構成要素に関する情報を記憶するために設けられる。メモリ140は、主メモリ及び2次記憶機構の両方を含み得る。主メモリは、高速ランダム・アクセス・メモリ(RAM:random access memory)及び読み取り専用メモリ(ROM:read-only memory)を含み得る。主メモリは、さらには、任意の追加的又は代替的な、高速メモリ・デバイス又はメモリ回路網を含むことができる。ROM、光学若しくは磁気ディスク、有機メモリ、又は、任意の他の揮発性若しくは不揮発性大容量記憶システムなどの、2次記憶機構は、長期記憶に適する。
少なくとも1つのカメラ130から取り込まれるビデオ・ストリームは、丸ごと、又は、一部において、メモリ内に記憶され得る。例えば、ユーザは、関心(又は、予想される関心)のビデオ・ストリームの一部分を(開始/停止記録ボタンの使用によってなどで)メモリ140に選択的に記録することにより記憶し得る。他の実施例において、ビデオ・ストリームの近時の一部分(例えば、最後の10秒、30秒、60秒、その他)が、サーキュラ・バッファによってなどで、ローリングを基盤として、メモリ140内に記憶され得る。
ネットワーク・インターフェイス150が、デバイス100と、サーバ、他のデバイス、又は同類のものを含む他のシステムとの間の通信を可能とするために設けられる。いくつかの実施例において、ネットワーク・インターフェイス150は、プロセッサ120が産業設備の制御システムと通信することを可能とし得る。プロセッサ120は、制御システムが制御システムの構成要素の機能を使用可能にする、使用不能にする、又は、他の形で修正することを引き起こすことによってなどで、制御システムと相互作用する所定の権利を有し得る。
ネットワーク・インターフェイス150は、可能性のあるものの中でも、Bluetooth(登録商標)無線技術(Bluetooth低エネルギーを含む)、IEEE802.11(任意のIEEE802.11改訂を含む)で記述される通信プロトコル、セルラー技術(GSM、CDMA、UMTS、EVDO、WiMAX、又はLTEなど)、又はZigbee(登録商標)技術などの、1つ又は複数のプロトコルを使用して、ワイヤレス通信を創出するように構成され得る。他の実施例において、有線接続が提供され得る。
いくつかの実施例において、ビデオ・ストリームは、連続的に(例えば、実時間、又は、ほぼ実時間で)サーバ又は他のシステムに、ネットワーク・インターフェイス150を経て送信され得るものであり、そのことは、他のものが、ユーザが見ている、又は行っていることを、実時間で、又は、後程に、のいずれかで見ることを可能とする。ビデオ・ストリームを記憶システムに送信することは、そのビデオ・ストリームが、監査の間などの、後程の使用のための記録として、又は、遵守若しくは保守記録の一部として、再検討される、注釈付けされる、及び、他の形で保存されることを可能とし得る。
位置センサ160(例えば、GPS受信器)が、プロセッサ120が表示デバイス100の現在の位置を決定することを可能とするために設けられ得る。産業設備の中の位置及び/又は構成要素の座標は知られ得るものであり、デバイス100の現在の位置を決定するためのGPS受信器の使用は、それゆえに、デバイス100に近接する構成要素の識別を可能とし得る。リーダ170(例えば、RFIDリーダ)が、さらには、プロセッサ120が1つ又は複数の信号から現在の位置を検出することを可能とするために設けられ得る。いくつかの実施例において、個々の構成要素は、デバイス100に近接するときに、構成要素に関する情報を提供するように構成される送信器(例えば、RFIDチップ)を設けられ得る。少なくとも1つの加速度計、少なくとも1つのジャイロスコープ、及びコンパスを含む、他のセンサ(示されない)が設けられ得るものであり、それらの加速度計、ジャイロスコープ、及びコンパスの個々の、又は組合された出力は、デバイス100の向き、動き、及び/又は位置を決定するために使用され得る。
いくつかの実施例において、プロセッサ120は、ユーザにより為される、及び、ビデオ・ストリーム内に取り込まれるジェスチャを検出するように構成される。例えば、プロセッサ120は、ユーザの腕及び/又は手のうちの1つ又は複数が、スワイプ、タップ、ドラッグ、ひねり、押し、引き、ズーム-イン(例えば、指を外に広げることによる)、ズーム-アウト(指を内に引き寄せることによる)、又は同類のものを含むが、それらに制限されない、任意の数のあらかじめ規定された、又は、ユーザに規定されたジェスチャの形で動いたということを検出することができる。ジェスチャは、それらが、下記でさらに説明されることになる、表示又は表示コンテンツのジェスチャ領域内で遂行されるときに検出され得るものであり、ジェスチャ領域は、表示若しくは表示コンテンツのサブ領域であることがあり、又は、表示若しくは表示コンテンツの実質的にすべてをカバーすることがある。
そのようなジェスチャに応答して、デバイス100は、表示画面110上の1つ又は複数の要素に対して、対応するアクションをとり得る。他の実施例において、ユーザは、デバイス100上の物理的又は仮想ボタンをクリックすることにより、デバイス100と相互作用することができる。
デバイス100が産業設備内で使用されるとき、表示画面は、デバイス100の付近の構成要素の表現を、構成要素の年数、設置された日付、製造者、取り替えユニットの入手可能性、予想されるライフ・サイクル、機能、条件、又はステータスを含む、それらの構成要素に関する、オーバーレイされる情報とともに示すことができる。デバイス100の表示画面110上に表示される例示的な表示コンテンツ200の例解が、図2において示される。表示コンテンツ200は、構成要素210及び220、それぞれ保持タンク及びパイプの表現を含む。構成要素210、220は、第1のビデオ・コンテンツ領域内に表示され得るものであり、産業設備の現在の領域内の構成要素210、220の、ビデオ若しくは写真画像として(拡張現実表示の事例において)、又は、3次元表現として外観を呈し得る。
それぞれ構成要素210、220に対応するインジケータ212、222が、各々の構成要素210、220に関する情報を提供するためにオーバーレイされる。インジケータ212、222は、第1のビデオ・コンテンツ領域にオーバーレイする第2のビデオ・コンテンツ領域として表示され得る。第2のビデオ・コンテンツ領域は、部分的に透明であり得るものであり、そのことによって、第1のビデオ・コンテンツ領域は、視覚的表示要素が第2のビデオ・コンテンツ領域上に配設される所を除いて可視であり、その事例において、それらの視覚的表示要素は、第1のビデオ・コンテンツ領域の、下にある一部分を覆い隠し得る。第2のビデオ・コンテンツ領域、及び/又は、その領域上の視覚的表示要素は、さらには、部分的に透明であり得るものであり、そのことは、第1のビデオ・コンテンツ領域が、第2のビデオ・コンテンツ領域の背後で、いくらかの程度見られることを可能とする。
インジケータ212、222は、各々の構成要素に対する名前、番号、シリアル番号、又は、他の称呼などの識別する情報を含む、構成要素212、222に関する情報を含む。いくつかの実施例において、インジケータ212、222は、構成要素(例えば、ポンプ)の部品番号若しくはタイプ、又は、構成要素のロット番号を指示し得る。
インジケータ212、222は、大部分又はすべての構成要素に対して表示され得る。例えば、デバイス100のユーザが、産業設備を通って歩き、見回すとき、表示内で可視の各々の構成要素は、関連付けられるインジケータを有し得る。これらの構成要素は、レイヤの形で配置構成され得るものであり、そのことによって、いくつかの事例において、それらの構成要素は、212又は222と同様に、可視レイヤ規定オーバーレイによって、オン及びオフに変えられ得る。他の実施例において、所定の構成要素のみが、インジケータを有し得る。判定基準が、どの構成要素がインジケータを伴って表示されるべきであるかに対して規定され得るものであり、デバイス100の使用より前に、又は、その使用の間に、ユーザによりあらかじめ規定され得る、又はセットされ得る。例えば、インジケータは、所定のタイプの構成要素(例えば、パイプ)に対してのみ、個別の産業プロセスに必然的に含まれる構成要素に対してのみ、又は、保守が現在遂行されている構成要素に対してのみ表示され得る。
いくつかの実施例において、ユーザは、インジケータ212、222を変化させるために、又は、対応する構成要素210、220に関する、異なる若しくは追加的な情報を取得するために、インジケータ212、222と相互作用する機会を提供され得る。相互作用は、ユーザによるジェスチャによって生起し得る。例えば、追加的な表示空間(インジケータ212、222の拡大されたビューなど)が、構成要素、又は、その構成要素の一部分の、値、条件、又はステータスなどの、構成要素210、又は、その構成要素210の中の材料に関する、現在又は来歴的情報を表示することができる。値は、構成要素に対する容認可能な値の範囲の最小及び/又は最大を含み得る。例えば、表示される情報は、正常動作範囲の役割を果たす、最小及び最大温度又は圧力値を含み得るものであり、範囲の外側の値が遭遇されるとき、警報が発し得るものであり、又は、他のアクションがとられ得る。
設置の日付、金融資産番号、構成要素が最後に検査若しくは保守された日付、構成要素が次に検査若しくは保守される予定になっている日付、又は、構成要素が、その存続期間において、若しくは、最も近時の保守事象などの事象以来のいずれかで、動作時間数などの、設置、動作、及び保守情報が、さらには表示され得る。来歴的保守又は難問/問題点に関する情報が、さらには表示され得る。例えば、ユーザは、構成要素に対する保守記録を視認する機会を提供され得る。
情報は、さらには、サード-パーティ供給源から取得され得る。例えば、構成要素に対する取り替え部品(又は、取り替え構成要素それら自体)の入手可能性が、ベンダなどのサード-パーティから取得され、表示され得る。ユーザは、例えば、いつ取り替え部品が在庫ありになると予想されるか、又は、現在ベンダにおいて在庫ありの取り替え部品の数に関して通知され得る。
表示コンテンツ200の別のビュー300が、図3において示される。このビューにおいて、ユーザは、「クリック」ジェスチャを遂行することによってなどで、インジケータ212と相互作用した。応答して、インジケータ212は、拡大されたインジケータ214の一部として、構成要素210に関する追加的な情報を提供するために拡大されている。拡大されたインジケータ214は、構成要素210の内側の材料の現在の温度、構成要素210の内側の材料の温度の1日平均、構成要素210が設置されてからの動作時間数、及び、構成要素210が最後に検査された日付に対する値を示す。
インジケータ212、及び/又は、拡大されたインジケータ214は、エルゴノミクス、可視性、及び他の要因によって決定される、構成要素210の表示される位置に相対的な場所において表示され得る。例えば、インジケータ212、及び/又は、拡大されたインジケータ214は、構成要素210、並びに、インジケータ212、及び/又は、拡大されたインジケータ214の両方が同時的に視認されることを可能とするために、構成要素210の1つの側部に、又は、構成要素210の上方若しくは下方に表示され得る。別の実例において、インジケータ212、及び/又は、拡大されたインジケータ214は、構成要素210の真上の不透明又は半透明オーバーレイとして表示され得る。別の実例において、インジケータ212は、構成要素210の真上のオーバーレイとして表示され得るが、ユーザによる相互作用を基に、拡大されたインジケータ214が、構成要素210の1つの側部に、又は、構成要素210の上方若しくは下方に表示され得る。この手法は、インジケータ212が、ユーザがおそらくは多くの構成要素の間を動く際、構成要素210と密接に視覚的に関連付けられることを可能とする。拡大されたインジケータ214に移行することは、構成要素210が関心のものであるということを指示し、しかしながら、ユーザが、構成要素210、及び、拡大されたインジケータ214を同時的に視認することを望むことがあるということを意味する。
ユーザは、表示コンテンツ200の外観をカスタマイズするために、ジェスチャの使用によって、又は、他の形で、インジケータ212、222、及び/又は、拡大されたインジケータ214を動かすことを許され得る。例えば、ユーザは、「ドラッグ」ジェスチャを拡大されたインジケータ214上で遂行し、拡大されたインジケータ214を上、下、左、又は右に動かすことができる。表示コンテンツ200は3次元であるので、ユーザは、拡大されたインジケータ214を、それをユーザの方に「引くこと」により、より近くに外観を呈するようにドラッグすることができ、又は、拡大されたインジケータ214を、それが構成要素210に相対的にさらに離れて外観を呈するように、離れるように「押す」ことができる。インジケータ212、及び/又は、拡大されたインジケータ214は、コネクタ、又は、他の視覚的関連付け手がかりにより、構成要素210にグラフィカルに接続され得る。インジケータ212、222、及び/又は、拡大されたインジケータ214が構成要素210に相対的に動かされる際、コネクタは、視覚的接続を連続的に維持するために、再度サイズ設定され、再度向きを設定される。インジケータ212、222、及び/又は、拡大されたインジケータ214が、それらにおいて視覚的にフィットすることになるより多い情報を表示することを要される状況において、インジケータ212、222、及び/又は、拡大されたインジケータ214は、スクローリング機能性を有し得る。
インジケータ212、222、及び/又は、拡大されたインジケータ214は、構成要素又はその性能、構成要素内の材料、及び、構成要素により、又は構成要素上で遂行されるプロセスに関する、現在及び/又は来歴的情報を含み得る。例示的なインジケータが、表1において提供される。
Figure 0007281401000001
構成要素は、表2において列挙される、後に続くものを含み得るが、それに制限されない。
Figure 0007281401000002
表示コンテンツ200のさらに別のビュー400が、図4において示される。このビューにおいて、ユーザは、タスク・リスト408を伴う表示コンテンツ200を提示される。タスク・リスト408は、ユーザが完了することを望み得る、タスク410から418などの1つ又は複数のタスクを内包する。タスクは、生産タスク、保守タスク、検査/監査タスク、インベントリ・タスク、又は同類のもののうちの、1つ又は複数に関係付けられ得る。タスク・リスト408が表示されるとき、インジケータ212、222、及び/又は、拡大されたインジケータ214は、タスク・リスト408に関連性のある構成要素に対してのみ表示され得る。いくつかの実施例において、ユーザは、タスク・リスト408及び/又はタスク410から418を選択し、それぞれ、タスク・リスト408、及び/又は、選択されるタスク410から418に関連性のある、インジケータ212、222、及び/又は、拡大されたインジケータ214のみが表示されることを引き起こすことができる。
1つ又は複数のタスク410から418がユーザにより完了される際、ユーザは、タスクのステータスを、それを完了とマーキングすることによってなどで、更新することができる。例えば、ユーザは、「スワイプ」ジェスチャをタスク410上で遂行し、そのタスク410が消滅する、又は、他の形でリストから除去されることを引き起こすことができる。タスク・リスト408内の残っているタスク412から418は、上の方に動くことができる。別の実例において、ユーザは、「クリック」ジェスチャをタスク410上で遂行し、そのタスク410が完了とマーキングされることを引き起こすことができ、そのことは、タスク410の隣のチェック・マーク、タスク410のグレー・アウトすること若しくは他の視覚的に強調しないこと、又は、他の形により、視覚的に表され得る。1つ又は複数のタスクが完了されたということの告知が、ネットワーク・インターフェイス150を経て、コンピュータ化された保守管理システム又は他のビジネス・ソフトウェア・システムに、追跡のために送信され得る。
タスク・リスト408は、ジェスチャを個別のタスク上で遂行するユーザが、タスクに関する追加的な情報を伴う拡大されたビューを創出するということにおいて、拡大可能であり得る。そのような追加的な情報は、タスクに対する、より詳細な指図(タスクに対して必要な任意のプリ-ステップ、サブ-ステップ、又はポスト-ステップを含む)、安全情報、いつタスクが、関係付けられる構成要素に関して最後に遂行されたかに関係する来歴的情報、又は同類のものを含み得る。
タスク・リスト408及び/又は個々のタスク410から418は、ユーザ又は他の人員によって、或いは、スケジューリングされた保守、又は、対処されることを必要とする観測された問題点若しくは条件によって自動的に、のいずれかで、デバイス100上へとあらかじめロードされ得る。タスク・リスト408及び/又はタスク410から418は、さらには、ネットワーク・インターフェイス150を経てデバイス100にアップロードされ得る。
他の実施例において、タスク・リスト408及び/又は個々のタスク410から418は、使用の間にユーザにより実時間で創出及び/又は修正され得る。いくつかの実施例において、口頭コマンドが、デバイス100により受信及び処理され得るものであり、そのことは、ユーザが、タスク・リスト408上のタスクを、動的に創出する、修正する、又は、完了とマーキングすることを可能とする。
表示コンテンツ200のさらに別のビュー500が、図5において示される。このビューにおいて、ユーザは、再び、タスク・リストを伴う表示コンテンツ200を提示される。この実例において、しかしながら、リスト上の第1のタスク、タスク510は、表示コンテンツ200内で現在可視でない、「保持_タンク_249」と呼ばれる構成要素(示されない)に関係する。例えば、構成要素は、表示の縁部から外れていることがあり、又は、設備のまるで異なる部分内にあることがある。方向インジケータ520が、それゆえに、ユーザを構成要素の方向に導くために使用され、その構成要素の位置は、デバイス100内に、中に記憶され、又は、位置センサ160及び/若しくはリーダ170により決定され得る。いくつかの実例において、方向インジケータ520は、図5において見られるように、一連の線又は矢印であり得る。他の実例において、構成要素の方向を指し示す表示の領域が、輝く、脈動する、又は、他の形で外観を変化させることがある。さらに他の実例において、オーディオ指示又は他のコマンド(話される方向など)が、イヤピースを通して、又は、他の形で与えられ得る。
いくつかの実施例において、オーバーレイ、又は、他のグラフィカル特徴部が、構成要素、又は、内側の材料に関する追加的な情報を伝えるために、構成要素に関係のある様態で示され得る。表示コンテンツ200の別のビュー600が、図6において示される。このビューにおいて、表示コンテンツは、構成要素210、220に関する追加的な、又は強化された情報を提供する、いくつものグラフィカル・データ特徴部610、620を示す。グラフィカル・データ特徴部610、620は、拡張現実表示においてのオーバーレイとして、又は、仮想現実表示においての追加的グラフィックスとして表示され得る。
グラフィカル・データ特徴部610は、構成要素210である保持タンク内に格納される材料に関する、1つ又は複数のまとまりの情報を提供する。例えば、グラフィカル・データ特徴部610の寸法は、保持タンク内の流体の体積を指示し得る。換言すれば、グラフィカル・データ特徴部610の1つ又は複数の寸法(例えば、高さ)は、タンク内の流体のレベルに対応し得るものであり、グラフィカル・データ特徴部610の上部は、構成要素210内の流体の表面に近似する場所において表示される。この様式において、ユーザは、どれほど多くの流体が構成要素210内に残っているかを直感的に、及び迅速に「見る」ことができる。
グラフィカル・データ特徴部610の他の態様が、追加的な情報を指示し得る。例えば、グラフィカル・データ特徴部610は、構成要素210(又は、内側の材料)が注意又は保守を要するということを指示するために、輝く、閃光を発する、脈動する、又は、他の形で外観を変化させることがある。別の実例として、グラフィカル・データ特徴部610は、その色により、又は、他の形で、内側の材料の性質に関する情報を指示し得る。例えば、構成要素210が水を保持するならば、グラフィカル・データ特徴部610は、青く外観を呈することがある。気体を指示する黄、酸素を指示する緑、及び同類のものなどの、他の色関連付けが使用され得る。別の実例として、取り扱い又は安全特性が、グラフィカル・データ特徴部610の色により指示され得る。例えば、健康に有害な材料は、青であるグラフィカル・データ特徴部610により指示され得るものであり、可燃性材料は、赤いグラフィカル・データ特徴部610により指示され得るものであり、反応性材料は、黄色いグラフィカル・データ特徴部610により指示され得るものであり、腐食性材料は、白いグラフィカル・データ特徴部610により指示され得る、等々である。他の共通又はカスタム配色が、ユーザによりあらかじめ規定され得る、及び/又は、カスタマイズされ得る。
他の実施例において、グラフィカル・データ特徴部は、対応する構成要素と異なるようにサイズ設定又は形状設定されないことがある。例えば、構成要素全体が、構成要素に関する情報を提供するために、オーバーレイ又は色付けされることがある。
表示コンテンツ200の別のビュー700が、図7において示される。この実例において、グラフィック・データ特徴部710は、表示コンテンツ200内の構成要素210の区域と同一の広がりをもつ。構成要素210全体が、識別、安全懸念を具象すること、タスクを遂行すること、その他の目的のために、構成要素710への注意を引き付けるために、グラフィック・データ特徴部710により視覚的に強調され得る。例えば、グラフィック・データ特徴部710は、構成要素210全体が、輝く、閃光を発する、脈動する、又は、他の形で外観を変化させるように外観を呈することを引き起こし得る。
グラフィック・データ特徴部(例えば、グラフィック・データ特徴部610、710)は、外観を変化させて、関連付けられる構成要素が、非機能性の、又は、機能不全である状態にある、サービスを必要とする、規定された範囲(例えば、温度)の外側で動作している、その他であるということを指示し得る。
図6に戻ると、グラフィカル・データ特徴部は、さらには、構成要素の現在の機能に関する情報を提供することができる。例えば、構成要素220(パイプ)は、構成要素220を通るフローを指示するためにアニメーション化される、一連の矢印、線、又は同類のものであり得る、グラフィック・データ特徴部620をオーバーレイされる。グラフィカル・データ特徴部620は、フローにおいての方向、フロー・レート、及び、乱流の量のような情報を視覚的に指示し得る。例えば、矢印/線のサイズ、又は、アニメーションの速度若しくは強度が、フローの規模を指示し得る。別の実例として、グラフィカル・データ特徴部は、構成要素の内側のモータ又はファンが作動しているということを視覚的に指示し得る。
表示コンテンツ200は、さらには、所定の機能が遂行されることを引き起こすための、1つ又は複数の相互作用的要素を含み得る。
表示コンテンツ200の別のビュー800が、図8において示される。このビューにおいて、いくつものユーザ・インターフェイス・ボタン810から816が、ユーザが、(例えば、表示コンテンツ200内で見られるものの)ピクチャを取り込むこと、ビデオを取り込むこと、別の人物若しくはシステム(制御室など)と通信すること、又は、警報をトリガすること、それぞれを可能とするために設けられる。ボタン810から816は、指を使用してそれらのボタンを「クリックする」ことなどの、表示コンテンツ200においてのジェスチャを遂行するユーザにより活動化され得る。ボタン810から816は、コンテキスト固有であり得るものであり、そのことによって、産業設備を動き回ること、及び/又は、異なる構成要素と相互作用することは、異なる機能性と関連付けられるボタンが外観を呈することを引き起こす。他の実施例において、そのようなタスクは、ジェスチャを遂行するユーザにより遂行され得る。
再び図1を参照すると、プロセッサ120は、ビデオ・ストリーム及び/若しくは写真内に取り込まれる、又は、他の形で、デバイス100のセンサから検出される、1つ又は複数の事象を検出するように構成され得る。例えば、プロセッサ120は、蒸気の破裂、又は、流体の急速な排出などの、爆発又は他の事象を、カメラ130により取り込まれるビデオ・ストリーム内で検出することができる。別の実例として、プロセッサ120は、ジャイロスコープ及び/又は加速度計の出力から、ユーザの平衡若しくは動きが不規則であるということを決定し、又は、従業員が倒れた、及び/若しくは、意識を失ったということさえも決定することができる。別の実例として、プロセッサ120は、1つ又は複数のオーディオ・センサ(例えば、マイクロホン)から、警報が鳴っているということを決定し、又は、ユーザ若しくは他のものが、口調、抑揚、音量、若しくは言葉づかいによって、緊急事態が発生しているおそれがあるということを、叫んでいる、若しくは、他の形で指示しているということを決定することができる。そのような決定を為すと、プロセッサ120は、警報が鳴ることを引き起こすことができ、監視若しくは管理職員、緊急事態人員、又は他のものに(例えば、ネットワーク・インターフェイス150を経て)連絡することができ、ビデオ・ストリームを記録すること、又は、他の形で、現在の事象をドキュメント化することを始めることができ、或いは、1つ若しくは複数の構成要素に関するアクションを自動的にとる、又は、ユーザにそのように行うように促すことができる。
パイプ構成要素のバルブが破裂してしまい、そのことが、極めて熱い蒸気が、高いレートでパイプから噴出することを引き起こし、人員を危険に晒すシナリオを考える。プロセッサ120は、例えば、ビデオ・ストリームを、蒸気漏れの知られている視覚的特性と比較すること、及び/又は、1つ若しくは複数のマイクロホンからのオーディオ入力を、蒸気漏れの知られているオーディオ特性と比較することにより、事象をビデオ・ストリーム及び/又はオーディオ・ストリーム内で検出することができる。応答して、プロセッサ120は、産業設備内の警報が鳴ることを引き起こすことができ、ドキュメント化及び後程の分析のために、事象のビデオ及び/又はオーディオを記録することを始めることができ、並びに、産業設備の制御システムが、例えば、パイプ上の上流バルブを閉め切り、以て、修理が為され得るまで漏れを停止することにより、事象に対処することを引き起こすことができる。
デバイス100は、1つ又は複数の商業的実施例の形で提供され得る。例えば、本明細書において説明される構成要素及び機能性は、丸ごと、又は、一部において、仮想若しくは拡張現実グラス(例えば、Microsoft Corporation、Redmond、Washingtonにより供されるMicrosoft Hololens、又は、Mountain View、CaliforniaのGoogleにより供されるGoogle Glass)、ヘッドセット、又はヘルメットにより遂行され得る。
デバイス100は、産業設備内で着用されるタイプの保護装具内へと組み込まれ得る、又は、その保護装具と共存可能であるように設計され得る。例えば、デバイス100は、レスピレータに取り外し可能に取り付けられるように設計され得るものであり、そのことによって、レスピレータ及びデバイス100の両方は、安全及び快適に着用され得る。別の実例において、デバイス100は、ユーザが安全帽又は他のかぶりものを着用することを妨げることなく、快適及びセキュアにユーザにフィットするように設計され得る。
他の実施例において、デバイス100は、モバイル・フォン又はタブレット・デバイス上の、ハードウェア及び/又はソフトウェアとして提供され得る。例えば、ユーザは、デバイス100を1つ又は複数の構成要素にかざすことができ、そのことによって、デバイス100(例えば、タブレット・デバイス)のカメラは、構成要素の方に向きを設定される。カメラにより取り込まれる写真及び/又はビデオは、本明細書において説明される表示を形成するために使用され得る。
実例コンピュータ・システム
図9は、上記で論考された様々な態様及び機能が実践され得る、分散型コンピュータ・システム900のブロック線図である。分散型コンピュータ・システム900は、デバイス100を含む、1つ又は複数のコンピュータ・システムを含み得る。例えば、例解されるように、分散型コンピュータ・システム800は、3つのコンピュータ・システム902、904、及び906を含む。示されるように、コンピュータ・システム902、904、及び906は、通信ネットワーク908により相互接続され、その通信ネットワーク908を通してデータを交換することができる。ネットワーク908は、それを通してコンピュータ・システムがデータを交換することができる、任意の通信ネットワークを含み得る。ネットワーク908を経てデータを交換するために、コンピュータ・システム902、904、及び906、並びにネットワーク908は、中でも、トークン・リング、Ethernet(登録商標)、ワイヤレスEthernet(登録商標)、Bluetooth(登録商標)、無線シグナリング、赤外線シグナリング、TCP/IP、UDP、HTTP、FTP、SNMP、SMS、MMS、SS7、JSON、XML、REST、SOAP、CORBA IIOP、RMI、DCOM、及びウェブ・サービスを含む、様々な方法、プロトコル、及び標準を使用することができる。
いくつかの実施例によれば、3次元合成的視点を生み出すことについて論考される機能及び動作は、コンピュータ・システム902、904、及び906上で、個々に、及び/又は、組合せの形で実行され得る。例えば、コンピュータ・システム902、904、及び906は、例えば、協働ネットワークへの参加をサポートする。1つの代替案において、単一のコンピュータ・システム(例えば、902)が、3次元合成的視点を生成することができる。コンピュータ・システム902、904、及び906は、セルラー電話、スマート・フォン、タブレット、「ファブレット」、その他などのパーソナル・コンピューティング・デバイスを含み得るものであり、さらには、デスクトップ・コンピュータ、ラップトップ・コンピュータ、その他を含み得る。
本明細書において論考される実施例による様々な態様及び機能は、図9において示されるコンピュータ・システム902を含む、1つ又は複数のコンピュータ・システムにおいて実行する、特殊化されたハードウェア又はソフトウェアとして実現され得る。1つの実施例において、コンピュータ・システム902は、上記で論考されたプロセス及び/又は動作を実行するように特別に構成されるパーソナル・コンピューティング・デバイスである。描写されるように、コンピュータ・システム902は、少なくとも1つのプロセッサ910(例えば、シングル・コア又はマルチ-コア・プロセッサ)と、メモリ912と、バス914と、入出力インターフェイス(例えば、916)と、記憶機構918とを含む。1つ又は複数の、マイクロプロセッサ、或いは、他のタイプのコントローラを含み得る、プロセッサ910は、データを操作する一連の命令を遂行することができる。示されるように、プロセッサ910は、相互接続要素(例えば、バス914)により、メモリ912を含む他のシステム構成要素に接続される。
メモリ912及び/又は記憶機構918は、コンピュータ・システム902の動作の間、プログラム及びデータを記憶するために使用され得る。例えば、メモリ912は、ダイナミック・ランダム・アクセス・メモリ(DRAM)又はスタティック・メモリ(SRAM)などの、相対的に高い性能の、揮発性のランダム・アクセス・メモリであり得る。加えて、メモリ912は、フラッシュ・メモリ、ソリッド・ステート、又は相変化メモリ(PCM:phase-change memory)などの、ディスク・ドライブ、又は、他の不揮発性記憶デバイスなどの、データを記憶するための任意のデバイスを含み得る。さらなる実施例において、合成的3次元ビューを生成及び/又はレンダリングすることに関して論考される、機能及び動作は、メモリ912及び/又は記憶機構918からコンピュータ・システム902上で実行されるアプリケーションにおいて実施され得る。例えば、アプリケーションは、ダウンロード及び/又は購入のために「app store」を通して入手可能にされ得る。インストールされる、又は、実行に対して利用可能にされると、コンピュータ・システム902は、合成的3次元ビューを生み出すことと関連付けられる機能を実行するように特別に構成され得る。
コンピュータ・システム902は、さらには、入力デバイス(例えば、画像を取り込むためのカメラ)、出力デバイス、及び組合せ入出力デバイスなどの、1つ又は複数のインターフェイス916を含む。インターフェイス916は、入力を受信すること、出力を提供すること、又は両方を行い得る。記憶機構918は、プロセッサにより実行されることになるプログラムを規定する命令が記憶される、コンピュータ読み取り可能、及び、コンピュータ書き込み可能な不揮発性記憶媒体を含み得る。記憶システム918は、さらには、媒体上に、又は、媒体内に記録される情報を含み得るものであり、この情報は、アプリケーションにより処理され得る。様々な実施例によって使用され得る媒体は、例えば、中でも、光学ディスク、磁気ディスク、又はフラッシュ・メモリ、SSDを含み得る。さらに、態様及び実施例は、個別のメモリ・システム又は記憶システムに対するものではない。
いくつかの実施例において、コンピュータ・システム902は、コンピュータ・システム902内に含まれるハードウェア構成要素(例えば、入出力デバイス、タッチ画面、カメラ、その他)の少なくとも一部分を管理するオペレーティング・システムを含み得る。プロセッサ910などの、1つ又は複数の、プロセッサ又はコントローラは、中でも、Microsoft Corporationから入手可能なWindows(登録商標)ベースのオペレーティング・システム(例えば、Windows(登録商標) NT、ME、XP、Vista、7、8、又はRT)、Apple Computerから入手可能なオペレーティング・システム(例えば、システムXを含むMAC OS)、多くのLinuxベースのオペレーティング・システム・ディストリビューションのうちの1つ(例えば、Red Hat Inc.から入手可能なEnterprise Linuxオペレーティング・システム)、Oracle Corporationから入手可能なSolarisオペレーティング・システム、又は、様々な供給源から入手可能なUNIX(登録商標)オペレーティング・システムであり得る、オペレーティング・システムを実行することができる。パーソナル・コンピューティング・デバイスに対して設計されるオペレーティング・システム(例えば、iOS、Android、その他)を含む、多くの他のオペレーティング・システムが使用され得るものであり、実施例は、任意の個別のオペレーティング・システムに制限されない。
プロセッサ及びオペレーティング・システムは、一体で、アプリケーション(例えば、「app store」から入手可能な「アプリ」)が実行され得るコンピューティング・プラットフォームを規定する。加えて、画像を生成及び操作するための様々な機能が、プログラムされない環境において実現され得る(例えば、ブラウザ・プログラムのウィンドウ内で視認されるときに、グラフィカル-ユーザ・インターフェイスの態様をレンダリングする、又は、他の機能を遂行する、HTML、XML、又は他のフォーマットの形で創出されるドキュメント)。さらに、本発明の態様による様々な実施例は、プログラムされる、若しくはプログラムされない構成要素、又は、それらの任意の組合せとして実現され得る。様々な実施例は、一部において、MATLAB関数、スクリプト、及び/又はバッチ・ジョブとして実現され得る。かくして、本発明は、特定のプログラミング言語に制限されず、任意の適したプログラミング言語が、さらには使用され得る。
コンピュータ・システム902は、実例の方式により、3次元合成的ビューを生み出すための様々な機能が実践され得る、1つのタイプのコンピュータ・システムとして示されるが、態様及び実施例は、図9において示されるコンピュータ・システム上で実現されることに制限されない。様々な態様及び機能は、図9において示されるものと異なるアーキテクチャ又は構成要素を有する、1つ又は複数の、コンピュータ又は同様のデバイス上で実践され得る。
産業用途
デバイス、システム、並びに、そのようなデバイス及びシステムを使用する方法、例えば、視覚的表示システム、例えば、設備の1つ又は複数の構成要素を描写する視覚的表示システム、例えば、拡張現実又は仮想現実表示は、いくつもの産業背景環境において、例えば、医薬製品を生産する産業装置において使用され得る。設備は、生産設備又は産業設備であり得る。設備、例えば産業設備又は装置は、例えば、パイロット、スケール-アップされた、又は、商業的生産のための生産設備であり得る。そのような設備は、原核及び/又は真核細胞系を含む、任意の所望される細胞系を培養するのに適している構成要素を含む産業設備を含む。さらには、含まれるのは、浮遊細胞又は足場依存性(接着)細胞を培養するのに適している、並びに、ポリペプチド製品、核酸製品(例えば、DNA又はRNA)、又は、細胞及び/若しくはウイルス療法において使用されるものなどの、細胞及び/若しくはウイルスなどの、医薬及びバイオ医薬製品の生産のために構成される生産動作に適している、構成要素を含む産業設備である。
実施例において、細胞は、組換え治療又は診断製品などの製品を、発現又は生産する。下記でより詳細に説明されるように、細胞により生産される製品の実例は、抗体分子(例えば、モノクローナル抗体、二重特異性抗体)、抗体模倣物(抗原に特異的に結合する、ただし、例えば、DARPin、affibody、adnectin、又はIgNARなどの抗体に構造的に関係付けられない、ポリペプチド分子)、融合タンパク質(例えば、Fc融合タンパク質、キメラ・サイトカイン)、他の組換えタンパク質(例えば、グリコシル化タンパク質、酵素、ホルモン)、ウイルス治療剤(例えば、抗がん性腫瘍溶解性ウイルス、遺伝子療法及びウイルス免疫療法のためのウイルス・ベクター)、細胞治療剤(例えば、多能性幹細胞、間葉系幹細胞(mesenchymal stem cell)、及び成体幹細胞)、ワクチン若しくは脂質封入粒子(例えば、エキソソーム、ウイルス様粒子)、RNA(例えば、siRNAなど)若しくはDNA(例えば、プラスミドDNAなど)、抗生物質、又はアミノ酸を含むが、それらに制限されない。実施例において、デバイス、設備、及び方法は、バイオシミラーを生産するために使用され得る。
さらには、含まれるのは、真核細胞、例えば、哺乳動物細胞、又は、例えば酵母細胞若しくは糸状菌細胞などの下等真核細胞か、グラム陽性又はグラム陰性細胞などの原核細胞かの、及び/或いは、大きいスケールの様式において真核細胞により合成される、真核又は原核細胞の製品、例えば、タンパク質、ペプチド、抗生物質、アミノ酸、核酸(DNA又はRNAなど)の、生産を可能とする構成要素を含む産業設備である。本明細書において別段に説述されない限り、デバイス、設備、及び方法は、ベンチ-スケール、パイロット-スケール、及びフル生産スケール能力を含むが、それらに制限されない、任意の所望されるボリューム又は生産能力を含むことができる。
なおまた、及び、本明細書において別段に説述されない限り、設備は、撹拌タンク、エアリフト、ファイバ、マイクロファイバ、中空ファイバ、セラミック・マトリックス、流動床、固定床、及び/又は噴流床バイオリアクタを含むが、それらに制限されない、任意の適したリアクタを含むことができる。本明細書において使用される際、「リアクタ」は、発酵槽若しくは発酵ユニット、又は、任意の他の反応容器を含むことができ、用語「リアクタ」は、「発酵槽」と交替可能に使用される。例えば、いくつかの態様において、実例バイオリアクタ・ユニットは、後に続くもののうちの1つ若しくは複数、又はすべてを遂行することができる:栄養素及び/若しくは炭素源の送り込み、適した気体(例えば、酸素)の注入、発酵若しくは細胞培養培地の入口及び出口フロー、気相及び液相の分離、温度の維持、酸素及びCO2レベルの維持、pHレベルの維持、かき混ぜ(例えば、撹拌)、並びに/又は、洗浄/殺菌。発酵ユニットなどの実例リアクタ・ユニットは、ユニットの中に複数個のリアクタを内包し得るものであり、例えばユニットは、1、2、3、4、5、10、15、20、25、30、35、40、45、50、60、70、80、90、若しくは100、若しくは、より多いバイオリアクタを、各々のユニット内に有することができ、及び/又は、設備は、設備の中に、単一若しくは複数個のリアクタを有する複数個のユニットを内包し得る。様々な実施例において、バイオリアクタは、バッチ、セミ・フェッド-バッチ、フェッド-バッチ、灌流、及び/又は、連続的な発酵プロセスに適したものであり得る。任意の適したリアクタ直径が使用され得る。実施例において、バイオリアクタは、約100mLから約50,000Lの間の容積を有することができる。非制限的な実例は、100mL、250mL、500mL、750mL、1リットル、2リットル、3リットル、4リットル、5リットル、6リットル、7リットル、8リットル、9リットル、10リットル、15リットル、20リットル、25リットル、30リットル、40リットル、50リットル、60リットル、70リットル、80リットル、90リットル、100リットル、150リットル、200リットル、250リットル、300リットル、350リットル、400リットル、450リットル、500リットル、550リットル、600リットル、650リットル、700リットル、750リットル、800リットル、850リットル、900リットル、950リットル、1000リットル、1500リットル、2000リットル、2500リットル、3000リットル、3500リットル、4000リットル、4500リットル、5000リットル、6000リットル、7000リットル、8000リットル、9000リットル、10,000リットル、15,000リットル、20,000リットル、及び/又は50,000リットルの容積を含む。加えて、適したリアクタは、マルチ-ユース、シングル-ユース、使い捨て可能、又は、使い捨て不可であり得るものであり、ステンレス鋼(例えば、316L、又は、任意の他の適したステンレス鋼)及びInconelなどの金属合金、プラスチック、並びに/又はガラスを含む、任意の適した材料から形成され得る。
実施例において、及び、本明細書において別段に説述されない限り、設備は、さらには、そのような製品の分離、精製、及び単離のための、動作及び/又は機器などの、別段に述べられていない任意の適したユニット動作及び/又は機器を含むことができる。従前の現場組立設備、モジュール式の、可動型の、及び一時的な設備、又は、任意の他の適した構築物、設備、及び/若しくはレイアウトなどの、任意の適した設備及び環境が使用され得る。例えば、いくつかの実施例において、モジュール式のクリーン-ルームが使用され得る。加えて、及び、別段に説述されない限り、本明細書において説明されるデバイス、システム、及び方法は、単一の位置若しくは設備において、収容及び/若しくは遂行され得るものであり、又は、代替的には、別々の、若しくは複数個の、位置及び/若しくは設備において、収容及び/若しくは遂行され得る。
非制限的な実例の方式により、及び、制限なしに、米国公報第2013/0280797号、第2012/0077429号、第2011/0280797号、第2009/0305626号、並びに、米国特許第8,298,054号、第7,629,167号、及び第5,656,491号は、それらの全体において参照により、本明細書により組み込まれているが、適したものであり得る実例設備、機器、及び/又はシステムを説明している。
実施例において、設備は、真核細胞、例えば哺乳動物細胞である細胞の使用を含むことができる。哺乳動物細胞は、例えば、ヒト又は齧歯動物又はウシの、細胞系又は細胞株であり得る。そのような細胞、細胞系、又は細胞株の実例は、例えば、マウス骨髄腫(NSO)細胞系、チャイニーズ・ハムスター卵巣(CHO:Chinese hamster ovary)細胞系、HT1080、H9、HepG2、MCF7、MDBKジャーカット、NIH3T3、PC12、BHK(ベビー・ハムスター腎臓細胞(baby hamster kidney cell))、VERO、SP2/0、YB2/0、Y0、C127、L細胞、COS、例えばCOS1及びCOS7、QC1-3、HEK-293、VERO、PER.C6、HeLA、EB1、EB2、EB3、腫瘍溶解性又はハイブリドーマ細胞系である。好ましくは、哺乳動物細胞はCHO細胞系である。1つの実施例において、細胞はCHO細胞である。1つの実施例において、細胞は、CHO-K1細胞、CHO-K1 SV細胞、DG44 CHO細胞、DUXB11 CHO細胞、CHOS、CHO GSノック-アウト細胞、CHO FUT8 GSノック-アウト細胞、CHOZN、又はCHO由来細胞である。CHO GSノック-アウト細胞(例えば、GSKO細胞)は、例えば、CHO-K1 SV GSノックアウト細胞である。CHO FUT8ノックアウト細胞は、例えば、Potelligent(登録商標)CHOK1 SV(Lonza Biologics,Inc.)である。真核細胞は、さらには、例えばEBx(登録商標)細胞、EB14、EB24、EB26、EB66、又はEBvl3などの、鳥類細胞、細胞系、又は細胞株であり得る。
1つの実施例において、真核細胞は幹細胞である。幹細胞は、例えば、胚性幹細胞(ESC:embryonic stem cell)、成体幹細胞、誘導多能性幹細胞(iPSC:induced pluripotent stem cell)、組織特異的幹細胞(例えば、造血幹細胞)、及び間葉系幹細胞(MSC)を含む、多能性幹細胞であり得る。
1つの実施例において、細胞は、本明細書において説明される細胞の任意のものの分化した形態である。1つの実施例において、細胞は、培養物内の任意の初代細胞に由来する細胞である。
実施例において、細胞は、ヒト肝細胞、動物肝細胞、又は非実質細胞などの肝細胞である。例えば、細胞は、付着可能な代謝試験用(plateable metabolism qualified)ヒト肝細胞、付着可能な誘導試験用ヒト肝細胞、付着可能なQualyst Transporter Certified(商標)ヒト肝細胞、浮遊試験用ヒト肝細胞(10人のドナー及び20人のドナーのプールされた肝細胞を含む)、ヒト肝クッパー細胞、ヒト肝星細胞、イヌ肝細胞(単一の、及びプールされたビーグル肝細胞を含む)、マウス肝細胞(CD-1及びC57BI/6肝細胞を含む)、ラット肝細胞(Sprague-Dawley、Wistar Han、及びWistar肝細胞を含む)、サル肝細胞(カニクイザル又はアカゲザル肝細胞を含む)、ネコ肝細胞(ドメスティック・ショートヘア肝細胞を含む)、及びウサギ肝細胞(ニュー・ジーランド・ホワイト肝細胞を含む)であり得る。実例肝細胞は、Triangle Research Labs、LLC、6 Davis Drive Research Triangle Park、North Carolina、USA 27709から市販で入手可能である。
1つの実施例において、真核細胞は、例えば、酵母細胞(例えば、Pichia属(例えば、Pichia pastoris、Pichia methanolica、Pichia kluyveri、及びPichia angusta)、Komagataella属(例えば、Komagataella pastoris、Komagataella pseudopastoris、又はKomagataella phaffii)、Saccharomyces属(例えば、Saccharomyces cerevisae、cerevisiae、Saccharomyces kluyveri、Saccharomyces uvarum)、Kluyveromyces属(例えば、Kluyveromyces lactis、Kluyveromyces marxianus)、Candida属(例えば、Candida utilis、Candida cacaoi、Candida boidinii)、Geotrichum属(例えば、Geotrichum fermentans)、Hansenula polymorpha、Yarrowia lipolytica、又はSchizosaccharomyces pombeなどの下等真核細胞である。好まれるのは、Pichia pastoris種である。Pichia pastoris株に対する実例は、X33、GS115、KM71、KM71H、及びCBS7435である。
1つの実施例において、真核細胞は、真菌細胞(例えば、Aspergillus(A.niger、A.fumigatus、A.orzyae、A.nidulaなど)、Acremonium(A.thermophilumなど)、Chaetomium(C.thermophilumなど)、Chrysosporium(C.thermophileなど)、Cordyceps(C.militarisなど)、Corynascus、Ctenomyces、Fusarium(F.oxysporumなど)、Glomerella(G.graminicolaなど)、Hypocrea(H.jecorinaなど)、Magnaporthe(M.orzyaeなど)、Myceliophthora(M.thermophileなど)、Nectria(N.heamatococcaなど)、Neurospora(N.crassaなど)、Penicillium、Sporotrichum(S.thermophileなど)、Thielavia(T.terrestris、T.heterothallicaなど)、Trichoderma(T.reeseiなど)、又はVerticillium(V.dahliaなど))である。
1つの実施例において、真核細胞は、昆虫細胞(例えば、Sf9、Mimic(商標)Sf9、Sf21、High Five(商標)(BT1-TN-5B1-4)、又はBT1-Ea88細胞)、藻類細胞(例えば、Amphora、Bacillariophyceae、Dunaliella、Chlorella、Chlamydomonas、Cyanophyta(シアノバクテリア)、Nannochloropsis、Spirulina、又はOchromonas属のもの)、又は、植物細胞(例えば、単子葉植物(例えば、トウモロコシ、イネ、コムギ、又はSetaria)からの、若しくは、双子葉植物(例えば、キャッサバ、ジャガイモ、ダイズ、トマト、タバコ、アルファルファ、Physcomitrella patens、又はArabidopsis)からの細胞である。
1つの実施例において、細胞は、バクテリア又は原核細胞である。
実施例において、原核細胞は、桿菌(Bacillus)、Streptomyces Streptococcus、Staphylococcus、又はLactobacillusなどのグラム陽性細胞である。使用され得る桿菌は、例えば、B.subtilis、B.amyloliquefaciens、B.licheniformis、B.natto、又はB.megateriumである。実施例において、細胞は、B.subtilis 3NA及びB.subtilis 168などのB.subtilisである。桿菌は、例えば、Bacillus Genetic Stock Center、Biological Sciences 556、484 West 12th Avenue、Columbus OH 43210-1214から取得可能である。
1つの実施例において、原核細胞は、Salmonella菌種、又は、例えばTG1、TG2、W3110、DH1、DHB4、DH5a、HMS 174、HMS174(DE3)、NM533、C600、HB101、JM109、MC4100、XL1-Blue、及びOrigamiなどの大腸菌(Escherichia coli)、並びに、例えばBL-21若しくはBL21(DE3)などの大腸菌B株に由来するものなどの、グラム陰性細胞であり、それらのすべては、市販で入手可能である。
適した宿主細胞は、例えば、DSMZ(Deutsche Sammlung von Mikroorganismen and Zellkulturen GmbH、Braunschweig、ドイツ)又はAmerican Type Culture Collection(ATCC)などの培養物収集機関から、市販で入手可能である。
実施例において、培養された細胞は、治療使用のため、タンパク質、例えば、抗体、例えば、モノクローナル抗体、及び/又は、組換えタンパク質を生産するために使用される。実施例において、培養された細胞は、ペプチド、アミノ酸、脂肪酸、又は、他の有用な生化学的中間物若しくは代謝物を生産する。例えば、実施例において、約4000ダルトンから約140,000ダルトンより大であるまでの分子量を有する分子が生産され得る。実施例において、これらの分子は、ある範囲の複雑度を有することができ、グリコシル化を含む翻訳後修飾を含むことができる。
実施例において、タンパク質は、例えば、BOTOX、Myobloc、Neurobloc、Dysport(又は、他のボツリヌス神経毒の血清型)、アルグルコシダーゼ・アルファ、ダプトマイシン、YH-16、絨毛ゴナドトロピン・アルファ、フィルグラスチム、セトロレリックス、インターロイキン-2、アルデスロイキン、テセロイキン、デニロイキン・ジフチトクス、インターフェロン・アルファ-n3(注射)、インターフェロン・アルファ-n1、DL-8234、インターフェロン、Suntory(ガンマ-1a)、インターフェロン・ガンマ、チモシン・アルファ1、タソネルミン、DigiFab、ViperaTAb、EchiTAb、CroFab、ネシリチド、アバタセプト、アレファセプト、Rebif、エプトテルミンアルファ、テリパラチド(骨粗鬆症)、注射可能なカルシトニン(骨疾患)、カルシトニン(鼻、骨粗鬆症)、エタネルセプト、ヘモグロビン・グルタマー250(ウシ)、ドロトレコギン・アルファ、コラゲナーゼ、カルペリチド、組換えヒト上皮成長因子(局所ゲル、創傷治癒)、DWP401、ダルベポエチン・アルファ、エポエチン・オメガ、エポエチン・ベータ、エポエチン・アルファ、デシルジン、レピルジン、ビバリルジン、ノナコグ・アルファ、Mononine、エプタコグ・アルファ(活性化)、組換え第VIII因子+VWF、Recombinate、組換え第VIII因子、第VIII因子(組換え)、アルフマート(Alphnmate)、オクトコグ・アルファ、第VIII因子、パリフェルミン、Indikinase、テネクテプラーゼ、アルテプラーゼ、パミテプラーゼ、レテプラーゼ、ナテプラーゼ、モンテプラーゼ、フォリトロピン・アルファ、rFSH、hpFSH、ミカファンギン、ペグフィルグラスチム、レノグラスチム、ナルトグラスチム、セルモレリン、グルカゴン、エキセナチド、プラムリンチド、イミグルセラーゼ、ガルスルファーゼ、Leucotropin、モルグラモスチム、酢酸トリプトレリン、ヒストレリン(皮下インプラント、Hydron)、デスロレリン、ヒストレリン、ナファレリン、リュープロリド徐放性デポー剤(ATRIGEL)、リュープロリド・インプラント(DUROS)、ゴセレリン、Eutropin、KP-102プログラム、ソマトロピン、メカセルミン(成長不全)、エンフビルチド、Org-33408、インスリン・グラルギン、インスリン・グルリシン、インスリン(吸入)、インスリン・リスプロ、インスリン・デテミル、インスリン(バッカル、RapidMist)、メカセルミン・リンファベート、アナキンラ、セルモロイキン、99mTc-アプシチド注射、ミエロピド、Betaseron、酢酸グラチラマ、ゲポン(Gepon)、サルグラモスチム、オプレルベキン、ヒト白血球由来アルファ・インターフェロン、ビリベ(Bilive)、インスリン(組換え)、組換えヒト・インスリン、インスリン・アスパルト、メカセルミン、Roferon-A、インターフェロン-アルファ2、Alfaferone、インターフェロン・アルファコン-1、インターフェロン・アルファ、Avonex’組換えヒト黄体形成ホルモン、ドルナーゼ・アルファ、トラフェルミン、ジコノチド、タルチレリン、ジボテルミンアルファ、アトシバン、ベカプレルミン、エプチフィバチド、Zemaira、CTC-111、Shanvac-B、HPVワクチン(4価)、オクトレオチド、ランレオチド、アンセスチム、アガルシダーゼ・ベータ、アガルシダーゼ・アルファ、ラロニダーゼ、酢酸プレザチド銅(局所ゲル)、ラスブリカーゼ、ラニビズマブ、Actimmune、PEG-Intron、Tricomin、組換え屋内塵性ダニ・アレルギー脱感作注射、組換えヒト副甲状腺ホルモン(PTH:parathyroid hormone)1-84(皮下、骨粗鬆症)、エポエチン・デルタ、トランスジェニック・アンチトロンビンIII、Granditropin、Vitrase、組換えインスリン、インターフェロン-アルファ(経口薬用ドロップ)、GEM-21S、バプレオチド、イデュルスルファーゼ、オマパトリラート、組換え血清アルブミン、セルトリズマブ・ペゴル、グルカルピダーゼ、ヒト組換えC1エステラーゼ阻害剤(血管性浮腫)、ラノテプラーゼ、組換えヒト成長ホルモン、エンフビルチド(針なし注射、Biojector2000)、VGV-1、インターフェロン(アルファ)、ルシナクタント、アビプタジル(aviptadil)(吸入、肺疾患)、イカチバント、エカランチド、オミガナン(omiganan)、Aurograb、酢酸ペキシガナン(pexigananacetate)、ADI-PEG-20、LDI-200、デガレリクス、シントレデキン・ベスドトクス(cintredelinbesudotox)、Favld、MDX-1379、ISAtx-247、リラグルチド、テリパラチド(骨粗鬆症)、チファコギン(tifacogin)、AA4500、T4N5リポソーム・ローション、カツマキソマブ、DWP413、ART-123、Chrysalin、デスモテプラーゼ、アメジプラーゼ(amediplase)、コリフォリトロピン・アルファ、TH-9507、テデュグルチド、Diamyd、DWP-412、成長ホルモン(徐放性注射)、組換えG-CSF、インスリン(吸入、AIR)、インスリン(吸入、Technosphere)、インスリン(吸入、AERx)、RGN-303、DiaPep277、インターフェロン・ベータ(C型肝炎ウイルス感染(HCV:hepatitis C viral infection))、インターフェロン・アルファ-n3(経口)、ベラタセプト、経皮インスリン・パッチ、AMG-531、MBP-8298、Xerecept、オペバカン(opebacan)、AIDSVAX、GV-1001、LymphoScan、ランピルナーゼ、Lipoxysan、ルスプルチド、MP52(ベータ-リン酸三カルシウム担体、骨再生)、黒色腫ワクチン、シプロイセル(sipuleucel)-T、CTP-37、Insegia、ビテスペン、ヒト・トロンビン(凍結、外科的出血)、トロンビン、TransMID、アルフィメプラーゼ、Puricase、テルリプレシン(静脈注射用、肝腎症候群)、EUR-1008M、組換えFGF-I(注射可能、血管疾患)、BDM-E、ロチガプチド、ETC-216、P-113、MBI-594AN、デュラマイシン(吸入、嚢胞性線維症)、SCV-07、OPI-45、エンドスタチン、アンジオスタチン、ABT-510、ボーマン・バーク阻害剤濃縮物(Bowman Birk Inhibitor Concentrate)、XMP-629、99mTc-Hynic-アネキシンV、カハラリドF、CTCE-9908、テベレリクス(延長放出)、オザレリクス、ロミデプシン、BAY-504798、インターロイキン4、PRX-321、Pepscan、イボクタデキン、rhラクトフェリン、TRU-015、IL-21、ATN-161、シレンジタイド、Albuferon、Biphasix、IRX-2、オメガ・インターフェロン、PCK-3145、CAP-232、パシレオチド、huN901-DMI、卵巣がん免疫治療ワクチン、SB-249553、Oncovax-CL、OncoVax-P、BLP-25、CerVax-16、マルチ-エピトープ・ペプチド黒色腫ワクチン(MART-1、gp100、チロシナーゼ)、ネミフィチド、rAAT(吸入)、rAAT(皮膚科学的)、CGRP(吸入、喘息)、ペグスネルセプト、チモシンベータ4、プリチデプシン、GTP-200、ラモプラニン、GRASPA、OBI-1、AC-100、サケ・カルシトニン(経口、eligen)、カルシトニン(経口、骨粗鬆症)、エキサモレリン、カプロモレリン、Cardeva、ベラフェルミン、131I-TM-601、KK-220、T-10、ウラリチド、デペレスタット、hematide、Chrysalin(局所)、rNAPc2、組換え第V111因子(PEG化リポソーム製剤)、bFGF、PEG化組換えスタフィロキナーゼ変異体、V-10153、SonoLysis Prolyse、NeuroVax、CZEN-002、膵島細胞新生療法、rGLP-1、BIM-51077、LY-548806、エキセナチド(制御放出、Medisorb)、AVE-0010、GA-GCB、アボレリン、ACM-9604、酢酸リナクロチド(linaclotid eacetate)、CETi-1、Hemospan、VAL(注射可能)、速効性インスリン(注射可能、Viadel)、鼻腔内インスリン、インスリン(吸入)、インスリン(経口、eligen)、組換えメチオニル・ヒト・レプチン、ピトラキンラ皮下注射、湿疹)、ピトラキンラ(吸入乾燥粉末、喘息)、Multikine、RG-1068、MM-093、NBI-6024、AT-001、PI-0824、Org-39141、Cpn10(自己免疫疾患/炎症)、タラクトフェリン(局所)、rEV-131(眼科)、rEV-131(呼吸器疾患)、経口組換えヒト・インスリン(糖尿病)、RPI-78M、オプレルベキン(経口)、CYT-99007 CTLA4-Ig、DTY-001、バラテグラスト、インターフェロン・アルファ-n3(局所)IRX-3、RDP-58、Tauferon、胆汁酸塩刺激リパーゼ(bile salt stimulated lipase)、Merispase、アルカリ・フォスファターゼ、EP-2104R、Melanotan-II、ブレメラノチド、ATL-104、組換えヒト・マイクロプラスミン、AX-200、SEMAX、ACV-1、Xen-2174、CJC-1008、ダイノルフィンA、SI-6603、LAB GHRH、AER-002、BGC-728、マラリア・ワクチン(ビロソーム、PeviPRO)、ALTU-135、パルボウイルスB19ワクチン、インフルエンザ・ワクチン(組換えノイラミニダーゼ)、マラリア/HBVワクチン、炭疽ワクチン、Vacc-5q、Vacc-4x、HIVワクチン(経口)、HPVワクチン、Tat Toxoid、YSPSL、CHS-13340、PTH(1-34)、リポソーム・クリーム(Novasome)、Ostabolin-C、PTHアナログ(局所、乾癬)、MBRI-93.02、MTB72Fワクチン(結核)、MVA-Ag85Aワクチン(結核)、FARA04、BA-210、組換えペストFIVワクチン、AG-702、OxSODrol、rBetV1、Der-p1/Der-p2/Der-p7アレルゲン標的化ワクチン(塵性ダニ・アレルギー)、PR1ペプチド抗原(白血病)、変異体rasワクチン、HPV-16 E7リポペプチド・ワクチン、ラビリンシン(labyrinthin)ワクチン(腺がん)、CMLワクチン、WT1-ペプチド・ワクチン(がん)、IDD-5、CDX-110、Pentrys、Norelin、CytoFab、P-9808、VT-111、イクロカプチド、テルベルミン(皮膚科学、糖尿病性足部潰瘍)、ルピントリビル、レティキュロース(reticulose)、rGRF、HA、アルファ-ガラクトシダーゼA、ACE-011、ALTU-140、CGX-1160、アンジオテンシン治療ワクチン、D-4F、ETC-642、APP-018、rhMBL、SCV-07(経口、結核)、DRF-7295、ABT-828、ErbB2-特異的免疫毒素(抗がん)、DT3SSIL-3、TST-10088、PRO-1762、Combotox、コレシストキニン-B/ガストリン受容体結合ペプチド、111In-hEGF、AE-37、トラスツズマブ-DM1、アンタゴニストG、IL-12(組換え)、PM-02734、IMP-321、rhIGF-BP3、BLX-883、CUV-1647(局所)、L-19ベースの放射免疫治療(がん)、Re-188-P-2045、AMG-38
6、DC/1540/KLHワクチン(がん)、VX-001、AVE-9633、AC-9301、NY-ESO-1ワクチン(ペプチド)、NA17.A2ペプチド、黒色腫ワクチン(パルス抗原治療剤)、前立腺がんワクチン、CBP-501、組換えヒト・ラクトフェリン(ドライ・アイ)、FX-06、AP-214、WAP-8294A(注射可能)、ACP-HIP、SUN-11031、ペプチドYY[3-36](肥満、鼻腔内)、FGLL、アタシセプト、BR3-Fc、BN-003、BA-058、ヒト副甲状腺ホルモン1-34(鼻、骨粗鬆症)、F-18-CCR1、AT-1100(セリアック病/糖尿病)、JPD-003、PTH(7-34)リポソーム・クリーム(Novasome)、デュラマイシン(眼科、ドライ・アイ)、CAB-2、CTCE-0214、グリコPEG化エリスロポエチン、EPO-Fc、CNTO-528、AMG-114、JR-013、第XIII因子、アミノカンジン、PN-951、716155、SUN-E7001、TH-0318、BAY-73-7977、テベレリクス(即時放出)、EP-51216、hGH(制御放出、Biosphere)、OGP-I、シフビルチド、TV4710、ALG-889、Org-41259、rhCC10、F-991、チモペンチン(肺疾患)、r(m)CRP、肝選択的インスリン、スバリン(subalin)、L19-IL-2融合タンパク質、エラフィン、NMK-150、ALTU-139、EN-122004、rhTPO、トロンボポエチン受容体アゴニスト(血小板減少性の病気)、AL-108、AL-208、神経成長因子アンタゴニスト(疼痛)、SLV-317、CGX-1007、INNO-105、経口テリパラチド(eligen)、GEM-OS1、AC-162352、PRX-302、LFn-p24融合ワクチン(Therapore)、EP-1043、S肺炎小児ワクチン、マラリア・ワクチン、髄膜炎菌B群ワクチン、新生児B群連鎖球菌ワクチン、炭疽ワクチン、HCVワクチン(gpE1+gpE2+MF-59)、中耳炎療法、HCVワクチン(コア抗原+ISCOMATRIX)、hPTH(1-34)(経皮性、ViaDerm)、768974、SYN-101、PGN-0052、アビスクミン、BIM-23190、結核ワクチン、マルチ-エピトープ・チロシナーゼ・ペプチド、がんワクチン、エンカスチム(enkastim)、APC-8204、GI-5005、ACC-001、TTS-CD3、血管標的化されたTNF(固形腫瘍)、デスモプレシン(バッカル制御放出)、オネルセプト、及び、TP-9201である。
いくつかの実施例において、ポリペプチドは、アダリムマブ(HUMIRA)、インフリキシマブ(REMICADE(商標))、リツキシマブ(RITUXAN(商標)/MAB THERA(商標))、エタネルセプト(ENBREL(商標))、ベバシズマブ(AVASTIN(商標))、トラスツズマブ(HERCEPTIN(商標))、ペグフィルグラスチム(NEULASTA(商標))、又は、バイオシミラー及びバイオベターを含む、任意の他の適したポリペプチドである。
他の適したポリペプチドは、下記で、及び、米国特許出願公開第2016/0097074号の表1において列挙されるものである。
Figure 0007281401000003

Figure 0007281401000004

Figure 0007281401000005

Figure 0007281401000006

Figure 0007281401000007

Figure 0007281401000008

Figure 0007281401000009
実施例において、ポリペプチドは、表4において示されるような、ホルモン、凝血/凝固因子、サイトカイン/成長因子、抗体分子、融合タンパク質、タンパク質ワクチン、又はペプチドである。
Figure 0007281401000010

Figure 0007281401000011
実施例において、タンパク質は、表5において示されるような、多重特異性タンパク質、例えば、二重特異性抗体である。
Figure 0007281401000012

Figure 0007281401000013

Figure 0007281401000014

Figure 0007281401000015

Figure 0007281401000016

Claims (22)

  1. 仮想現実又は拡張現実表示を提供する方法であって、
    デバイスのカメラによって、医薬製品の処理のための設備の描写を含む、第1のビデオ・コンテンツを生成するステップであって、前記設備の前記描写は、複数の構成要素を含む、生成するステップと、
    前記複数の構成要素を検出するステップであって、プロセッサが、前記第1のビデオ・コンテンツに含まれる前記複数の構成要素を検出する、検出するステップと、
    検出された前記複数の構成要素と関連付けられる少なくとも1つの第1のインジケータを含む、第2のビデオ・コンテンツを生成するステップであって、前記少なくとも1つの第1のインジケータを含む前記第2のビデオ・コンテンツは、前記第1のビデオ・コンテンツをオーバーレイし、前記第1のビデオ・コンテンツ及び前記第2のビデオ・コンテンツは、仮想現実又は拡張現実表示を提供する、生成するステップと、
    ユーザ・インターフェイスから、前記検出された前記複数の構成要素のうちの1つと関連付けられるインジケータを選択するためのユーザ入力を受信するステップであって、前記ユーザ入力は、前記カメラにより取り込まれ、前記第1のビデオ・コンテンツ内で検出可能なジェスチャである、受信するステップと
    を含み、
    さらに、選択された前記インジケータに応じて少なくとも1つのアクション項目を決定し、前記選択された前記インジケータに応じて前記アクション項目についての情報を受信し、前記少なくとも1つのアクション項目を実行するステップを含み、
    前記仮想現実又は拡張現実表示は、前記デバイスの位置に応じて変化し、
    前記少なくとも1つのインジケータは、前記検出された前記複数の構成要素のうちの少なくとも1つの来歴的保守情報に少なくとも部分的に基づいて、前記複数の構成要素のうちの少なくとも1つが注意又は保守を必要とすることを示すように外観を変化させる、方法。
  2. 前記少なくとも1つのインジケータは、(i)少なくとも1つの前記構成要素のアイデンティティ又はタイプ、(ii)少なくとも1つの前記構成要素の保守又は取り替えに関係付けられる情報、(iii)少なくとも1つの前記構成要素に機能的に連結される第2の構成要素に関係付けられる情報、(iv)少なくとも1つの前記構成要素の機能、条件、又はステータスに関係付けられる、情報又は値、(v)少なくとも1つの前記構成要素のサービス・ライフに関係付けられる情報、(vi)少なくとも1つの前記構成要素の年数に関係付けられる情報、(vii)少なくとも1つの前記構成要素が設置された日付に関係付けられる情報、(viii)少なくとも1つの前記構成要素の製造者に関係付けられる情報、(ix)少なくとも1つの前記構成要素に対する取り替え品の入手可能性に関係付けられる情報、(x)少なくとも1つの前記構成要素に対する前記取り替え品の位置と関連付けられる情報、(xi)少なくとも1つの前記構成要素の予想されるライフ・サイクルに関係付けられる情報、(xii)少なくとも1つの前記構成要素の温度に関係付けられる情報、(xiii)少なくとも1つの前記構成要素内の材料の温度に関係付けられる情報、(xiv)少なくとも1つの前記構成要素を通るフロー・レートに関係付けられる情報、(xv)少なくとも1つの前記構成要素内の圧力に関係付けられる情報、及び、(xvi)少なくとも1つの前記構成要素の事象又は検査に関係付けられる情報のうちの、1つ又は複数と関連付けられる、請求項1に記載の方法。
  3. 少なくとも第2のインジケータを含む第3のビデオ・コンテンツを生成するステップをさらに含む、請求項1に記載の方法。
  4. 少なくとも1つの前記構成要素の前記機能、前記条件、又は前記ステータスに関係付けられる前記値は、現在若しくは実時間値、来歴的若しくは過去値、又は、あらかじめ選択された値を含む、請求項2に記載の方法。
  5. 少なくとも1つの前記構成要素は、(i)タンク、(ii)蒸発器、(iii)パイプ、(iv)遠心機、(v)濾過器、(vi)圧搾機、(vii)ミキサ、(viii)コンベヤ、(ix)リアクタ、(x)ボイラ、(xi)発酵槽、(xii)ポンプ、(xiii)凝縮器、(xiv)スクラバ、(xv)バルブ、(xvi)分離器、(xvii)ゲージ、(xviii)乾燥機、(xix)熱交換器、(xx)調理器、(xxi)レギュレータ、(xxii)デカンタ、(xxiii)カラム、(xxiv)冷凍機、(xxv)クロマトグラフィ・スキッド、(xxvi)インキュベータ、又は、(xxvii)フロー・プレートである、請求項1に記載の方法。
  6. 表示デバイス上で、(i)少なくとも1つの前記構成要素及び(ii)前記インジケータのうちの1つ又は複数について、すべて又は一部の描写を表示するステップをさらに含む、請求項1に記載の方法。
  7. 表示デバイスであって、
    薬物又は生物学的製品の処理のための産業設備の描写を含む、第1のビデオ・コンテンツと関連付けられる画像を受信し取り込むように構成されるカメラであって、前記産業設備の前記描写は、複数の構成要素を含む、カメラと、
    前記表示デバイスのユーザに可視であるように場所決めされるように構成される表示画面と、
    前記表示デバイスを制御するためのユーザ入力を受信するように構成されたユーザ・インターフェイスであって、前記ユーザ入力は、前記カメラにより取り込まれ、前記第1のビデオ・コンテンツ内で検出可能である、ユーザ・インターフェイスと、
    少なくとも1つのプロセッサであって、
    薬物又は生物学的製品の前記処理のための前記産業設備の描写を含む、前記第1のビデオ・コンテンツを生成することであって、前記描写は、前記複数の構成要素を含む、生成すること、
    前記第1のビデオ・コンテンツ内の前記複数の構成要素を検出すること、
    前記複数の構成要素と関連付けられる少なくとも1つのインジケータを含む、第2のビデオ・コンテンツを生成することであって、前記少なくとも1つのインジケータを含む前記第2のビデオ・コンテンツは、前記第1のビデオ・コンテンツをオーバーレイする、生成すること、並びに、
    前記第1のビデオ・コンテンツ及び前記第2のビデオ・コンテンツを、拡張現実又は仮想現実表示として表示すること
    を行うように構成される少なくとも1つのプロセッサと
    を備え、
    前記ユーザ入力は、検出された前記複数の構成要素のうちの1つと関連付けられるインジケータを選択すること、選択された前記インジケータに応じて少なくとも1つのアクション項目を決定すること、前記選択された前記インジケータに応じて前記アクション項目についての情報を受信すること、及び前記少なくとも1つのアクション項目を実行することを含み、
    前記仮想現実又は拡張現実表示は、前記表示デバイスの位置に応じて変化し、
    前記少なくとも1つのインジケータは、前記検出された前記複数の構成要素のうちの少なくとも1つの来歴的保守情報に少なくとも部分的に基づいて、前記複数の構成要素のうちの少なくとも1つが注意又は保守を必要とすることを示すように外観を変化させる、表示デバイス。
  8. 前記表示デバイスは、着用者又はユーザの視野内に場所決めされるように構成されるウェアラブル・デバイスである、請求項7に記載のデバイス。
  9. 位置情報を取得するように構成される位置受信器をさらに備え、前記少なくとも1つのプロセッサは、少なくとも一部において前記位置情報に基づいて少なくとも1つの前記構成要素を識別するようにさらに構成される、請求項7に記載のデバイス。
  10. 少なくとも1つの前記構成要素上の、又は、少なくとも1つの前記構成要素の近傍の、シグナリング・デバイスからの近接信号を受信するように構成される無線受信器をさらに備え、前記少なくとも1つのプロセッサは、少なくとも一部において前記近接信号に基づいて少なくとも1つの前記構成要素を識別するようにさらに構成される、請求項7に記載のデバイス。
  11. ネットワークを経て少なくとも1つのコンピューティング・デバイスと通信するように構成されるネットワーク・インターフェイスをさらに備える、請求項7に記載のデバイス。
  12. (i)ジャイロスコープ、(ii)加速度計、及び(iii)コンパスのうちの1つ又は複数をさらに備える、請求項7に記載のデバイス。
  13. 視覚的コンテンツを表示する方法であって、
    表示デバイスのユーザに対して複数の構成要素を表示するステップであって、前記複数の構成要素は、(i)カメラにより取り込まれた画像を含む、第1のビデオ・コンテンツであって、薬物又は生物学的製品の処理のための産業設備の描写を含み、前記産業設備の前記描写は、前記複数の構成要素を含み、プロセッサが、前記第1のビデオ・コンテンツ内の前記複数の構成要素を検出する、第1のビデオ・コンテンツ、及び、(ii)前記複数の構成要素と関連付けられる少なくとも1つのインジケータを含む、第2のビデオ・コンテンツであって、第1のインジケータを含む前記第2のビデオ・コンテンツは、前記第1のビデオ・コンテンツ領域をオーバーレイする、第2のビデオ・コンテンツから成立し、前記第1のビデオ・コンテンツ及び前記第2のビデオ・コンテンツは、拡張現実表示及び/又は仮想現実表示を提供する、表示するステップと、
    検出された前記複数の構成要素のうちの1つと関連するインジケータを選択するためのユーザ入力を、前記表示デバイスのユーザ・インターフェイスを経て受信し、選択された前記インジケータに応じて少なくとも1つのアクション項目を決定し、前記選択された前記インジケータに応じて前記アクション項目についての情報を受信し、前記少なくとも1つのアクション項目を実行するステップであって、前記ユーザ入力は、前記カメラにより取り込まれ、前記第1のビデオ・コンテンツ内で検出可能なジェスチャである、ステップと
    を含み、
    前記仮想現実又は拡張現実表示は、前記表示デバイスの位置に応じて変化し、
    前記少なくとも1つのインジケータは、前記検出された前記複数の構成要素のうちの少なくとも1つの来歴的保守情報に少なくとも部分的に基づいて、前記複数の構成要素のうちの少なくとも1つが注意又は保守を必要とすることを示すように外観を変化させる、方法。
  14. 前記ユーザ入力は、さらなるインジケータを異なるユーザと関連付けることを含む、請求項13に記載の方法。
  15. 前記インジケータに基づいて、又は、前記インジケータと関連付けられる値に基づいて、信号をエンティティに送出するステップをさらに含む、請求項13に記載の方法。
  16. 前記第1のビデオ・コンテンツ内で、少なくとも1つの前記構成要素と関連付けられる事象を検出するステップと、
    前記事象に関係するさらなるインジケータを創出するステップと
    をさらに含む、請求項13に記載の方法。
  17. 前記インジケータは、少なくとも1つの前記構成要素と関連付けられて遂行されることになるアクション項目に関係付けられる情報を含む、請求項13に記載の方法。
  18. 前記アクション項目は、前記第2のビデオ・コンテンツ内のタスク・リスト内で提示される、請求項17に記載の方法。
  19. 前記アクション項目は、少なくとも1つの前記構成要素を必然的に含む、(i)保守タスク及び(ii)産業プロセスのうちの1つ又は複数に関係する、請求項17に記載の方法。
  20. 前記第2のビデオ・コンテンツは、少なくとも1つの前記構成要素の位置への方向を提供するさらなるインジケータを含む、請求項13に記載の方法。
  21. 前記第2のビデオ・コンテンツのいくらか又はすべては、少なくとも1つの前記構成要素、前記インジケータ、又は、前記インジケータの値の特性に対応する色を帯びた様態で表示される、請求項13に記載の方法。
  22. 前記特性は、少なくとも1つの前記構成要素のタイプ、少なくとも1つの前記構成要素の識別子、少なくとも1つの前記構成要素により格納される、若しくは送られる材料の識別子、又は、少なくとも1つの前記構成要素により格納される、若しくは送られる前記材料の温度である、請求項21に記載の方法。
JP2019539884A 2017-01-24 2018-01-23 仮想又は拡張現実表示を使用して産業保守を遂行するための方法及びシステム Active JP7281401B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762449803P 2017-01-24 2017-01-24
US62/449,803 2017-01-24
PCT/US2018/014865 WO2018140404A1 (en) 2017-01-24 2018-01-23 Methods and systems for using a virtual or augmented reality display to perform industrial maintenance

Publications (2)

Publication Number Publication Date
JP2020507156A JP2020507156A (ja) 2020-03-05
JP7281401B2 true JP7281401B2 (ja) 2023-05-25

Family

ID=62906621

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019539884A Active JP7281401B2 (ja) 2017-01-24 2018-01-23 仮想又は拡張現実表示を使用して産業保守を遂行するための方法及びシステム

Country Status (7)

Country Link
US (1) US20180211447A1 (ja)
EP (1) EP3574494A4 (ja)
JP (1) JP7281401B2 (ja)
KR (1) KR102464296B1 (ja)
CN (1) CN110249379B (ja)
IL (1) IL268039B2 (ja)
WO (1) WO2018140404A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11474496B2 (en) * 2017-04-21 2022-10-18 Rockwell Automation Technologies, Inc. System and method for creating a human-machine interface
US10546428B2 (en) * 2018-02-13 2020-01-28 Lenovo (Singapore) Pte. Ltd. Augmented reality aspect indication for electronic device
EP3803223B1 (en) * 2018-05-29 2022-11-30 Belimo Holding AG A method and a mobile communication device for controlling an hvac component in a building
CN109246195B (zh) * 2018-08-13 2023-11-24 孙琤 一种融合增强现实、虚拟现实的管网智能管控方法及***
WO2020163218A1 (en) * 2019-02-04 2020-08-13 Beam Therapeutics Inc. Systems and methods for implemented mixed reality in laboratory automation
KR102158637B1 (ko) * 2019-05-01 2020-09-22 (주)영우산업 화학공정사고 안전교육장치
US11157762B2 (en) 2019-06-18 2021-10-26 At&T Intellectual Property I, L.P. Surrogate metadata aggregation for dynamic content assembly
CN111061149B (zh) * 2019-07-01 2022-08-02 浙江恒逸石化有限公司 基于深度学习预测控制优化的循环流化床节煤降耗的方法
CN110719510A (zh) * 2019-09-20 2020-01-21 中国第一汽车股份有限公司 一种车机音视频同步播放方法
WO2021096915A1 (en) * 2019-11-11 2021-05-20 Aveva Software, Llc Computerized system and method for an extended reality (xr) progressive visualization interface
GB201919334D0 (en) 2019-12-26 2020-02-05 Augmenticon Gmbh Pharmaceutical manufacturing process control
GB201919333D0 (en) 2019-12-26 2020-02-05 Augmenticon Gmbh Pharmaceutical manufacturing process support
US11894130B2 (en) 2019-12-26 2024-02-06 Augmenticon Gmbh Pharmaceutical manufacturing process control, support and analysis
CN113079311B (zh) * 2020-01-06 2023-06-27 北京小米移动软件有限公司 图像获取方法及装置、电子设备、存储介质
US20230104230A1 (en) * 2020-03-09 2023-04-06 Hyundai Doosan Infracore Co., Ltd. Method and device for providing construction machinery maintenance manual by using augmented reality
US11469840B1 (en) * 2020-12-23 2022-10-11 Meta Platforms, Inc. Systems and methods for repairing a live video recording
US11836872B1 (en) 2021-02-01 2023-12-05 Apple Inc. Method and device for masked late-stage shift
CN112941141A (zh) * 2021-03-01 2021-06-11 牡丹江师范学院 一种抑制稻瘟菌生长及阻断其黑色素分泌的真菌

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011198150A (ja) 2010-03-19 2011-10-06 Fujifilm Corp ヘッドマウント型拡張現実映像提示装置及びその仮想表示物操作方法
JP2012022668A (ja) 2010-06-17 2012-02-02 Ns Solutions Corp 情報処理装置、情報処理方法及びプログラム
JP2013242648A (ja) 2012-05-18 2013-12-05 Yokogawa Electric Corp 情報表示装置及び情報表示システム
JP2014164482A (ja) 2013-02-25 2014-09-08 Tokyo Electron Ltd 支援情報表示方法、基板処理装置の保守支援方法、支援情報表示制御装置、基板処理システム及びプログラム
JP2014224799A (ja) 2013-03-15 2014-12-04 フィッシャー−ローズマウント システムズ,インコーポレイテッド プロセスプラントにおけるモバイル制御デバイスの位置を判定するための方法及び装置
WO2015030264A1 (ja) 2013-08-30 2015-03-05 国立大学法人山梨大学 クリック動作検出装置,方法およびプログラム

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10144076A1 (de) * 2001-09-07 2003-03-27 Daimler Chrysler Ag Vorrichtung und Verfahren zur Früherkennung und Vorhersage von Aggregateschädigungen
US7126558B1 (en) * 2001-10-19 2006-10-24 Accenture Global Services Gmbh Industrial augmented reality
US7232063B2 (en) * 2003-06-09 2007-06-19 Fujitsu Transaction Solutions Inc. System and method for monitoring and diagnosis of point of sale devices having intelligent hardware
US8346577B2 (en) * 2009-05-29 2013-01-01 Hyperquest, Inc. Automation of auditing claims
US7784353B1 (en) * 2009-07-08 2010-08-31 Feldmeier Robert H Sanitary diaphragm pressure gauge adapter
US8830267B2 (en) * 2009-11-16 2014-09-09 Alliance For Sustainable Energy, Llc Augmented reality building operations tool
WO2011122610A1 (ja) * 2010-03-30 2011-10-06 新日鉄ソリューションズ株式会社 情報処理装置、情報処理方法及びプログラム
US8982156B2 (en) * 2010-06-10 2015-03-17 Sartorius Stedim Biotech Gmbh Assembling method, operating method, augmented reality system and computer program product
US9443225B2 (en) * 2011-07-18 2016-09-13 Salesforce.Com, Inc. Computer implemented methods and apparatus for presentation of feed items in an information feed to be displayed on a display device
SG11201400429RA (en) * 2011-09-08 2014-04-28 Paofit Holdings Pte Ltd System and method for visualizing synthetic objects withinreal-world video clip
US20130066897A1 (en) * 2011-09-08 2013-03-14 Microsoft Corporation User Interfaces for Life Cycle Inventory and Assessment Data
CN103176686A (zh) * 2011-12-26 2013-06-26 宇龙计算机通信科技(深圳)有限公司 移动终端和触摸屏解锁方法
US9170648B2 (en) * 2012-04-03 2015-10-27 The Boeing Company System and method for virtual engineering
CN103472909B (zh) * 2012-04-10 2017-04-12 微软技术许可有限责任公司 用于头戴式、增强现实显示器的逼真遮挡
EP2850609A4 (en) * 2012-05-16 2017-01-11 Mobile Augmented Reality Ltd. Imagine A system worn by a moving user for fully augmenting reality by anchoring virtual objects
US10824310B2 (en) * 2012-12-20 2020-11-03 Sri International Augmented reality virtual personal assistant for external representation
US20160132046A1 (en) * 2013-03-15 2016-05-12 Fisher-Rosemount Systems, Inc. Method and apparatus for controlling a process plant with wearable mobile control devices
US20140329592A1 (en) * 2013-05-06 2014-11-06 Cadillac Jack Electronic gaming system with flush mounted display screen
US9709978B2 (en) * 2013-05-09 2017-07-18 Rockwell Automation Technologies, Inc. Using cloud-based data for virtualization of an industrial automation environment with information overlays
FR3008210B1 (fr) * 2013-07-03 2016-12-09 Snecma Procede et systeme de realite augmentee pour la supervision
US20160217623A1 (en) * 2013-09-30 2016-07-28 Pcms Holdings, Inc. Methods, apparatus, systems, devices, and computer program products for providing an augmented reality display and/or user interface
US10163264B2 (en) * 2013-10-02 2018-12-25 Atheer, Inc. Method and apparatus for multiple mode interface
US10203762B2 (en) * 2014-03-11 2019-02-12 Magic Leap, Inc. Methods and systems for creating virtual and augmented reality
US20150262133A1 (en) * 2014-03-12 2015-09-17 Solar Turbines Incorporated Method and system for providing an assessment of equipment in an equipment fleet
WO2015157862A1 (en) * 2014-04-14 2015-10-22 Tremolant Inc. Augmented reality communications
US20150302650A1 (en) * 2014-04-16 2015-10-22 Hazem M. Abdelmoati Methods and Systems for Providing Procedures in Real-Time
US10613627B2 (en) * 2014-05-12 2020-04-07 Immersion Corporation Systems and methods for providing haptic feedback for remote interactions
US9342743B2 (en) * 2014-06-02 2016-05-17 Tesa Sa Method for supporting an operator in measuring a part of an object
US10170018B2 (en) * 2014-07-31 2019-01-01 Peter M. Curtis Cloud based server to support facility operations management
US9412205B2 (en) * 2014-08-25 2016-08-09 Daqri, Llc Extracting sensor data for augmented reality content
US20160140868A1 (en) * 2014-11-13 2016-05-19 Netapp, Inc. Techniques for using augmented reality for computer systems maintenance
US10950051B2 (en) * 2015-03-27 2021-03-16 Rockwell Automation Technologies, Inc. Systems and methods for presenting an augmented reality
US10083532B2 (en) * 2015-04-13 2018-09-25 International Business Machines Corporation Sychronized display of street view map and video stream
US10311460B2 (en) * 2016-04-12 2019-06-04 Peter Jenson Method and program product for loyalty rewards programs
CN106101689B (zh) * 2016-06-13 2018-03-06 西安电子科技大学 利用手机单目摄像头对虚拟现实眼镜进行增强现实的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011198150A (ja) 2010-03-19 2011-10-06 Fujifilm Corp ヘッドマウント型拡張現実映像提示装置及びその仮想表示物操作方法
JP2012022668A (ja) 2010-06-17 2012-02-02 Ns Solutions Corp 情報処理装置、情報処理方法及びプログラム
JP2013242648A (ja) 2012-05-18 2013-12-05 Yokogawa Electric Corp 情報表示装置及び情報表示システム
JP2014164482A (ja) 2013-02-25 2014-09-08 Tokyo Electron Ltd 支援情報表示方法、基板処理装置の保守支援方法、支援情報表示制御装置、基板処理システム及びプログラム
JP2014224799A (ja) 2013-03-15 2014-12-04 フィッシャー−ローズマウント システムズ,インコーポレイテッド プロセスプラントにおけるモバイル制御デバイスの位置を判定するための方法及び装置
WO2015030264A1 (ja) 2013-08-30 2015-03-05 国立大学法人山梨大学 クリック動作検出装置,方法およびプログラム

Also Published As

Publication number Publication date
KR102464296B1 (ko) 2022-11-04
IL268039B1 (en) 2023-04-01
IL268039B2 (en) 2023-08-01
CN110249379A (zh) 2019-09-17
JP2020507156A (ja) 2020-03-05
KR20190105021A (ko) 2019-09-11
EP3574494A1 (en) 2019-12-04
IL268039A (en) 2019-09-26
CN110249379B (zh) 2024-01-23
EP3574494A4 (en) 2021-03-24
US20180211447A1 (en) 2018-07-26
WO2018140404A1 (en) 2018-08-02

Similar Documents

Publication Publication Date Title
JP7281401B2 (ja) 仮想又は拡張現実表示を使用して産業保守を遂行するための方法及びシステム
Nielsen Production of biopharmaceutical proteins by yeast: advances through metabolic engineering
JP2019533850A (ja) 生物製剤バッチ処方における例外再検討
EP3368176A2 (en) A manufacturing facility for the production of biopharmaceuticals
An et al. Expression of a functional recombinant human basic fibroblast growth factor from transgenic rice seeds
WO2020041454A1 (en) A process for creating reference data for predicting concentrations of quality attributes
EP3692358A1 (en) Automated control of cell culture using raman spectroscopy
JP2020512736A (ja) ワイヤレス・センサ情報監視
JP2019518470A (ja) 直径可変型バイオリアクタ
AU2017230823A1 (en) Customizable facility
WO2018148346A1 (en) Cell culture system and method
JP7335873B2 (ja) バイオリアクターシステムにおいて使用するための灌流装置
Behera Biopharmaceuticals: challenges and opportunities
Noseda et al. Development of a cost-effective process for the heterologous production of SARS-CoV-2 spike receptor binding domain using Pichia pastoris in stirred-tank bioreactor
WO2020219479A1 (en) Continuous blade impeller
Kleinberg et al. Current and future considerations for the new classes of biologicals
JP2020513818A (ja) 自動バッチ・データ分析
CN110418849A (zh) 分析多个细胞和检测生物产品制造中的蛋白质序列变体的方法
WO2020167568A1 (en) Buffer formulation method and system
JP2020505059A (ja) 単クローン性を評価するための方法
EP3535047A1 (en) Method for the reduction of viral titer in pharmaceuticals
JP2019507597A (ja) 改善された発酵プロセス
EP3525904A1 (en) Filter assembly with filter lock design

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211124

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211222

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220523

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230428

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230515

R150 Certificate of patent or registration of utility model

Ref document number: 7281401

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150