JP2001043215A - 文書処理装置、文書処理方法、及び記録媒体 - Google Patents

文書処理装置、文書処理方法、及び記録媒体

Info

Publication number
JP2001043215A
JP2001043215A JP21865299A JP21865299A JP2001043215A JP 2001043215 A JP2001043215 A JP 2001043215A JP 21865299 A JP21865299 A JP 21865299A JP 21865299 A JP21865299 A JP 21865299A JP 2001043215 A JP2001043215 A JP 2001043215A
Authority
JP
Japan
Prior art keywords
video
document
output
data
sentence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP21865299A
Other languages
English (en)
Other versions
JP2001043215A5 (ja
Inventor
Katashi Nagao
確 長尾
Kazuyuki Marukawa
和幸 丸川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP21865299A priority Critical patent/JP2001043215A/ja
Priority to US09/624,580 priority patent/US7610546B1/en
Publication of JP2001043215A publication Critical patent/JP2001043215A/ja
Publication of JP2001043215A5 publication Critical patent/JP2001043215A5/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/438—Presentation of query results
    • G06F16/4387—Presentation of query results by the use of playlists
    • G06F16/4393—Multimedia presentations, e.g. slide shows, multimedia albums
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G06F40/117—Tagging; Marking up; Designating a block; Setting of attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/14—Tree-structured documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/169—Annotation, e.g. comment data or footnotes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4886—Data services, e.g. news ticker for displaying a ticker, e.g. scrolling banner for news, stock exchange, weather data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)
  • Document Processing Apparatus (AREA)

Abstract

(57)【要約】 【課題】 文書データに関連したビデオデータ出力によ
る情報提示の実現。 【解決手段】 各電子文書データにおいてビデオデータ
指定情報（ビデオタグ）が付されていることに応じて、
その電子文書データに関連するビデオデータを判別し、
電子文書データに対応して、電子文書データの出力と同
時又は個別に、その関連するビデオデータを出力する。
これにより文書の提示だけでなく、その文書内容と関連
する映像をユーザーに提示できるようにする。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は電子文書処理に関
し、特に電子文書データと関連するビデオデータを出力
することのできる文書処理装置に関するものである。
【０００２】
【従来の技術】従来、インターネットにおいて、ウィン
ドウ形式でハイパーテキスト型情報を提供するアプリケ
ーションサービスとしてＷＷＷ（World Wide Web）が提
供されている。
【０００３】ＷＷＷは、文書の作成、公開または共有化
の文書処理を実行し、新しいスタイルの文書の在り方を
示したシステムである。しかし、文書の実際上の利用の
観点からは、文書の内容に基づいた文書の分類や要約と
いった、ＷＷＷを越える高度な文書処理が求められてい
る。このような高度な文書処理には、文書の内容の機械
的な処理が不可欠である。
【０００４】しかしながら、文書の内容の機械的な処理
は、以下のような理由から依然として困難である。第１
に、ハイパーテキストを記述する言語であるＨＴＭＬ
（Hyper Text Markup Language）は、文書の表現につい
ては規定するが、文書の内容についてはほとんど規定し
ない。第２に、文書間に構成されたハイパーテキストの
ネットワークは、文書の読者にとって文書の内容を理解
するために必ずしも利用しやすいものではない。第３
に、一般に文章の著作者は読者の便宜を念頭に置かずに
著作するが、文書の読者の便宜が著作者の便宜と調整さ
れることはない。
【０００５】このように、ＷＷＷは新しい文書の在り方
を示したシステムであるが、文書を機械的に処理しない
ので、高度な文書処理をおこなうことができなかった。
換言すると、高度な文書処理を実行するためには、文書
を機械的に処理することが必要となる。
【０００６】そこで、文書の機械的な処理を目標とし
て、文書の機械的な処理を支援するシステムが自然言語
研究の成果に基づいて開発されている。自然言語研究に
よる文書処理として、文書の著作者等による文書の内部
構造についての属性情報、いわゆるタグの付与を前提と
した、文書に付与されたタグを利用する機械的な文書処
理が提案されている。
【０００７】
【発明が解決しようとする課題】ところで、近年のコン
ピュータの普及や、ネットワーク化の進展に伴い、文章
処理や、文書の内容に依存した索引などで、テキスト文
書の作成、ラベル付け、変更などをおこなう文書処理の
高機能化が求められている。たとえば、ユーザの要望に
応じた文書の要約や、文書の分類等が望まれる。また、
文書やその要約を表示する文書ビューワや表示部の形態
に適した表示スタイルや、表示とともに行われる読み上
げ機能、さらには文書や画像の表示と読み上げの連動な
ど、よりユーザーにとって好適な処理が求められてい
る。そしてさらに、文書データに関連して動画や静止画
などのビデオデータを出力することができるようにすれ
ば、ユーザーにとって、より多様かつ高度であり、さら
に的確な情報を提供できることが期待されるが、従っ
て、各種の文書処理に加えてビデオデータとの連携化が
望まれている。
【０００８】
【課題を解決するための手段】本発明は、このような事
情に鑑みて提案されたものであって、文書処理装置にお
いて提示する文書データに対応してビデオデータを出力
することができるようにし、ユーザーに対する的確、多
様、高度な情報を提示できるようにすることを目的とす
る。
【０００９】このため本発明の文書処理装置は、電子文
書データに付加された１又は複数のビデオデータ指定情
報を検出し、１又は複数の特定のビデオデータを選択す
るビデオ選択手段と、１又は複数の電子文書データのう
ちの或る電子文書データを提示するために出力制御する
文書出力制御手段と、文書出力制御手段で出力制御され
た電子文書データに対応して、ビデオ選択手段で選択さ
れたビデオデータを出力制御するビデオ出力制御手段と
を備えるようにする。つまり、各電子文書データにおい
てビデオデータ指定情報（タグ）が付されていることに
応じて、その電子文書データに関連するビデオデータを
判別し、電子文書データに対応して、電子文書データの
出力と同時又は個別に、その関連するビデオデータを出
力できるようにする。また、電子文書データ及びビデオ
データを、同時もしくは個別に表示する表示手段を当該
文書処理装置内に備えるようにしてもよい。
【００１０】また上記構成に加えて、文書本文としての
電子文書データから、その要約文としての電子文書デー
タを作成することのできる要約作成手段を備えるように
し、ビデオ出力制御手段は、文書出力制御手段が要約作
成手段により作成された要約文を出力制御する際に、ビ
デオ選択手段で選択されたビデオデータを出力制御する
ようにする。つまり要約文の提示とともに、関連するビ
デオデータを提示する。
【００１１】また文書出力制御手段は、電子文書データ
が部分毎の切換表示もしくは移動表示（テロップ表示）
されるように、電子文書データを出力制御するととも
に、ビデオ出力制御手段は、文書出力制御手段の制御に
よる電子文書データ出力の進行に対応したタイミング
で、出力するビデオデータを切り換えるように制御す
る。つまり本文又は要約文としての電子文書データのテ
ロップ表示の進行に対応して、ビデオデータが切り換え
られていくようにする。
【００１２】また上記構成に加えて、電子文書データが
読み上げ音声として出力されるように制御する音声出力
制御手段を備え、ビデオ出力制御手段は、音声出力制御
手段により電子文書データが読み上げ音声として出力制
御される際に、ビデオ選択手段で選択されたビデオデー
タを出力制御するようにする。つまり本文又は要約文と
しての電子文書データの読み上げとともに、関連するビ
デオデータを提示する。
【００１３】またビデオ出力制御手段は、音声出力制御
手段の制御による読み上げ音声出力の進行に対応したタ
イミングで、出力するビデオデータを切り換えるように
制御する。つまり本文又は要約文としての電子文書デー
タの読み上げの進行に対応して、ビデオデータが切り換
えられていくようにする。
【００１４】本発明の文書処理方法は、電子文書データ
に付加された１又は複数のビデオデータ指定情報を検出
し、１又は複数の特定のビデオデータを選択するビデオ
選択手順と、１又は複数の電子文書データのうちの或る
電子文書データを提示するために出力制御する文書出力
制御手順と、文書出力制御手順で出力制御された電子文
書データに対応して、ビデオ選択手順で選択されたビデ
オデータを出力制御するビデオ出力制御手順とが行われ
るようにする。また、文書本文としての電子文書データ
から、その要約文としての電子文書データを作成するこ
とのできる要約作成手順を有するようにし、ビデオ出力
制御手順では、要約作成手順で作成された要約文が文書
出力制御手順において出力制御される際に、ビデオ選択
手順で選択されたビデオデータを出力するようにする。
また、文書出力制御手順では、電子文書データが部分毎
の切換表示もしくは移動表示（テロップ表示）されるよ
うに、電子文書データを出力制御するとともに、ビデオ
出力制御手順では、文書出力制御手順での制御による電
子文書データ出力の進行に対応したタイミングで、出力
するビデオデータを切り換えるように制御する。また電
子文書データが読み上げ音声として出力されるように制
御する音声出力制御手順を有するようにし、ビデオ出力
制御手順では、音声出力制御手順での制御により電子文
書データが読み上げ音声として出力される際に、ビデオ
選択手順で選択されたビデオデータが出力されるように
制御する。またビデオ出力制御手順では、音声出力制御
手順の制御による読み上げ音声出力の進行に対応したタ
イミングで、出力するビデオデータを切り換えるように
制御する。
【００１５】また本発明の記録媒体は、以上のような各
手順を有する動作制御プログラムが記録されているもの
とする。
【００１６】
【発明の実施の形態】以下、本発明の実施の形態につい
て次の順序で説明する。 １．文書処理装置の構成 ２．文書データ構造 ３．文書データに対する手動分類処理 ３−１ 処理手順 ３−２ インデックス作成 ３−３ 文書閲覧／分類作成／分類操作 ３−４ 分類モデル作成／登録 ４．文書データに対する自動分類処理 ４−１ 処理手順 ４−２ 自動分類 ５．読み上げ処理 ６．要約作成／表示処理 ７．ビデオファイルの出力処理 ７−１ ビデオファイル及びタグ ７−２ ビデオ出力処理 ７−３ 要約出力時のビデオ出力処理 ７−４ 読み上げ時のビデオ出力処理 ７−５ 各種のビデオ出力形態 ８．文書処理装置の機能ブロック構成
【００１７】１．文書処理装置の構成 本発明の実施の形態としての文書処理装置１は、図１に
示すように、制御部１１およびインターフェース１２を
備える本体１０と、ユーザからの入力を受けて本体１０
に送る入力部２０と、外部との信号の送受信を行う通信
部２１と、本体１０からの出力を表示する表示部３０
と、記録媒体３２に対して情報を記録／再生する記録／
再生部３１と、音声出力部３３と、ＨＤＤ（ハードディ
スクドライブ）３４を有している。
【００１８】本体１０は、制御部１１およびインターフ
ェース１２を有し、この文書処理装置１の主要な部分を
構成している。制御部１１は、この文書処理装置１にお
ける処理を実行するＣＰＵ１３と、揮発性のメモリであ
るＲＡＭ１４と、不揮発性のメモリであるＲＯＭ１５と
を有している。ＣＰＵ１３は、たとえばＲＯＭ１５に記
録された手順にしたがって、必要な場合にはデータを一
時的にＲＡＭ１４に格納して、プログラムを実行するた
めの制御をおこなう。この制御部１１の動作としては、
詳しくはそれぞれ後述していくが、供給された文書デー
タに関する分類処理、要約作成処理、読み上げ動作のた
めの音声読み上げ用ファイルの生成処理、及びこれらの
処理に必要な文書解析などがある。さらに、文書データ
に関連するビデオデータの出力制御処理も行う。そして
これらの動作のために必要なプログラムやアプリケーシ
ョンソフトが、ＲＯＭ１５や、ＨＤＤ３４、あるいは記
録媒体３２に記憶されている。なお、制御部１１が用い
る文書処理プログラムは上記のようにあらかじめＲＯＭ
１５に格納されたり、あるいは、記録媒体３２やＨＤＤ
３４から取り込むことが考えられるが、例えば通信部２
１を介してインターネット等のネットワークから、外部
サーバ等が提供する文書処理プログラムをダウンロード
することも考えられる。
【００１９】インターフェース１２は、制御部１１、入
力部２０、通信部２１、表示部３０、記録／再生部３
１、音声出力部３３、ＨＤＤ３４に接続される。そして
インターフェース１２は、制御部１１の制御の下に、入
力部２０からのデータの入力、通信部２１との間のデー
タの入出力、表示部３０へのデータの出力、記録／再生
部３１に対するデータの入出力、音声出力部３３へのデ
ータの出力、ＨＤＤ３４に対するデータの入出力の各動
作を行う。具体的には制御部１１と上記各部の間でのデ
ータの入出力のタイミングを調整したり、データの形式
を変換することなどを行う。
【００２０】入力部２０は、この文書処理装置１に対す
るユーザの入力を受ける部分である。この入力部２０
は、たとえばキーボードやマウスにより構成される。ユ
ーザは、この入力部２０を用い、キーボードによリキー
ワード等の文字を入力したり、マウスにより表示部３０
に表示されている電子文書のエレメントを選択すること
などができる。なお、以下では文書処理装置１で扱う電
子文書を、「文書データ」又は単に「文書」と称するこ
とにする。また「エレメント」とは文書を構成する要素
であって、たとえば文書、文および語が含まれる。
【００２１】通信部２１は、この文書処理装置１に外部
からたとえば通信回線を介して送信される信号を受信し
たり、通信回線に信号を送信する部位である。この通信
部２１は、外部から送信された１又は複数の文書等のデ
ータを受信し、受信したデータを本体１０に送る。もち
ろん通信回線を介して外部装置にデータを送信すること
も行われる。また、文書データに付随して、もしくは独
立して、１又は複数のビデオデータ（ビデオファイル）
が通信部２１により取り込まれることもある。
【００２２】表示部３０は、この文書処理装置１の出力
としての文字や画像情報を表示する部位である。この表
示部３０は、たとえば陰極線管（cathode ray tube；CR
T）や液晶表示装置（Liquid crystal display；LCD）な
どにより構成され、たとえば単数または複数のウィンド
ウを表示し、このウィンドウ上に文字、図形等を表示す
る。
【００２３】記録／再生部３１は、たとえばいわゆるフ
ロッピーディスクのような記録媒体３２に対してデータ
の記録／再生をおこなう。なお、ここでは記録媒体３２
の例としてフロッピーディスク（磁気ディスク）を例を
あげているが、もちろん光ディスク、光磁気ディスク、
メモリカードなど、可搬性メディアであれば記録媒体３
２の例として適用できる。そして記録／再生部３１は、
メディアに応じた記録再生装置（ディスクドライブ、カ
ードドライブなど）であればよい。
【００２４】記録媒体３２が、文書を処理するための文
書処理プログラムが記録されているものである場合は、
記録／再生部３１は、その記録媒体３２から文書処理プ
ログラムを読み出して制御部１１に供給することができ
る。また記録媒体３２に文書データやビデオデータが記
録されていれば、記録／再生部３１でそれを読み出して
制御部１１に供給することができる。即ち文書処理装置
１にとって、通信部２１による文書データ及びビデオデ
ータの受信とは別の、文書データ及びビデオデータの入
力態様となる。さらに、制御部１１は当該文書処理装置
１で処理した文書データを記録／再生部３１において記
録媒体３２に記録させることもできる。
【００２５】音声出力部３３は、文書処理装置１の出力
としての文書を、読み上げ音声として出力する部位であ
る。即ち音声出力部３３は、制御部１１が文書情報（後
述する読み上げ用ファイル）に基づいた音声合成処理に
より生成した音声信号が供給された際に、その音声信号
の出力処理を行うことで、表示部３０とともに文書処理
装置１の出力手段として機能する。
【００２６】ＨＤＤ３４は、文書処理装置１における大
容量の記録領域を提供する。ＨＤＤ３４は、制御部１１
の制御に基づいて情報の記録／再生を行う。このＨＤＤ
３４は、制御部１１で実行される各種処理のためのアプ
リケーションプログラム、例えば音声合成のためのプロ
グラムなどの格納するために用いられたり、例えば当該
文書処理装置１に取り込まれた文書データやビデオデー
タ等を格納しておく部位として用いることなどが可能と
なる。
【００２７】２．文書データ構造 続いて、本例における文書データの構造について説明す
る。本例においては、文書処理は、文書に付与された属
性情報であるタグを参照しておこなわれる。本例で用い
られるタグには、文書の構造を示す統語論的（syntacti
c）タグと、多言語間で文書の機械的な内容理解を可能
にするような意味的（semantic）・語用論的タグとがあ
る。
【００２８】統語論的なタグとしては、文書の内部構造
を記述するものがある。タグ付けによる内部構造は、図
２に示すように、文書、文、語彙エレメント等の各エレ
メントが互いに、通常リンク、参照・被参照リンクによ
りリンクされて構成されている。図中において、白丸
“○”はエレメントを示し、最下位の白丸は文書におけ
る最小レベルの語に対応する語彙エレメントである。ま
た、実線は文書、文、語彙エレメント等のエレメント間
のつながり示す通常リンク（normal link）であり、破
線は参照・被参照による係り受け関係を示す参照リンク
（reference link）である。文書の内部構造は、上位か
ら下位への順序で、文書（documemt）、サブディビジョ
ン（subdivision）、段落（paragraph）、文（sentenc
e）、サブセンテンシャルセグメント（subsentential s
egment）、・・・、語彙エレメントから構成される。こ
のうち、サブディビジョンと段落はオプションである。
【００２９】一方、意味論・語用論的なタグ付けとして
は、多義語の意味のように意味等の情報を記述するもの
がある。本例におけるタグ付けは、ＨＴＭＬ（Hyper Te
xt Markup Language）と同様なＸＭＬ（Extensible Mar
kup Language）の形式によるものである。
【００３０】タグ付けの一例を次に示すが、文書へのタ
グ付けはこの方法に限られない。また、以下では英語と
日本語の文書の例を示すが、タグ付けによる内部構造の
記述は他の言語にも同様に適用することができる。
【００３１】たとえば、“Time flies like an arro
w.”という文については、下記のようなタグ付けをする
ことができる。＜ ＞が、文書に対して付与されたタグ
である。
【００３２】＜文＞＜名詞句 語義＝“time０”＞time
＜／名詞句＞ ＜動詞句＞＜動詞 語義＝“fly１”＞flies＜／動詞＞ ＜副詞句＞＜副詞 語義＝like０＞like＜／副詞＞ ＜
名詞句＞an ＜名詞 語義＝“arrow０”＞arrow＜／名詞＞＜／名詞
句＞ ＜／副詞句＞＜／動詞句＞．＜／文＞
【００３３】ここで＜文＞、＜名詞＞、＜名詞句＞、＜
動詞＞、＜動詞句＞、＜副詞＞、＜副詞句＞は、それぞ
れ文、名詞、名詞句、動詞、動詞句、形容詞／副詞（前
置詞句または後置詞句を含む）、形容詞句／副詞句、を
示している。つまり文の統語構造（syntactic structur
e）を表している。
【００３４】これらのタグは、エレメントの先端の直前
および終端の直後に対応して配置される。エレメントの
終端の直後に配置されるタグは、記号“ ／”によりエ
レメントの終端であることを示している。エレメントと
は統語的構成素、すなわち句、節、および文のことであ
る。なお、語義（word sense）＝“time０”は、語“ti
me”の有する複数の意味、すなわち複数の語義のうちの
第０番目の意味を指している。具体的には、語“time”
には少なくとも名詞、形容詞、動詞の意味があるが、こ
こでは語“time”が名詞（＝第０番目の意味）であるこ
とを示している。同様に、語“オレンジ”は少なくとも
植物の名前、色、果物の意味があるが、これらも語義に
よって区別することができる。
【００３５】本例では、文書データについては、図３に
示すように、表示部３０上のウィンドウ１０１におい
て、その統語構造を表示することができる。このウィン
ドウ１０１においては、右半面１０３に語彙エレメント
が、左半面１０２に文の内部構造がそれぞれ表示されて
いる。
【００３６】例えば図示するようにこのウィンドウ１０
１には、タグ付けにより内部構造が記述された文章「Ａ
氏のＢ会が終わったＣ市で、一部の大衆紙と一般紙がそ
の写真報道を自主規制する方針を紙面で明らかにし
た。」の一部が表示されている。この文書のタグ付けの
例は次のようになる。
【００３７】＜文書＞＜文＞＜副詞句 関係＝“場所”
＞＜名詞句＞＜副詞句 場所＝“Ｃ市”＞ ＜副詞句 関係＝“主語”＞＜名詞句 識別子＝“Ｂ
会”＞＜副詞句 関係＝“所属”＞＜人名 識別子＝
“Ａ氏”＞Ａ氏＜／人名＞の＜／副詞句＞＜組織名識別
子＝“Ｂ会”＞Ｂ会＜／組織名＞＜／名詞句＞が＜／副
詞句＞ 終わった＜／副詞句＞＜地名 識別子＝“Ｃ市”＞Ｃ市
＜／地名＞＜／名詞句＞で、＜／副詞句＞＜副詞句 関
係＝“主語”＞＜名詞句 識別子＝“press” 統語＝“並列”＞＜名詞句＞＜副詞句＞一部の＜／副詞
句＞大衆紙＜／名詞句＞と＜名詞＞一般紙＜／名詞＞＜
／名詞句＞が＜／副詞句＞ ＜副詞句 関係＝“目的語”＞＜副詞句 関係＝“内
容” 主語＝“press”＞ ＜副詞句 関係＝“目的語”＞＜名詞句＞＜副詞句＞＜
名詞 共参照＝“Ｂ会”＞そ＜／名詞＞の＜／副詞句＞
写真報道＜／名詞句＞を＜／副詞句＞ 自主規制する＜／副詞句＞方針を＜／副詞句＞ ＜副詞句 間係＝“位置”＞紙面で＜／副詞句＞明らか
にした。＜／文＞＜／文書＞
【００３８】このようにタグ付されることで、各一対の
タグ＜ ＞〜＜／ ＞によって文書の構造が表現され
る。例えば＜文書＞〜＜／文書＞で１つの文書の範囲が
示され、同様に＜文＞〜＜／文＞で１つの文の範囲が示
される。また例えば、＜名詞句 識別子＝“Ｂ会”＞〜
＜／名詞句＞により、「Ａ氏のＢ会」という部分が「Ｂ
会」を識別子とする名詞句として表現される。即ち上記
タグ付により、図３の左半面１０２に示した文の内部構
造が表現される。
【００３９】さらに、この文書においては、「一部の大
衆紙と一般紙」は、統語＝“並列”というタグにより並
列であることが表されている。並列の定義は、係り受け
関係を共有するということである。特に何も指定がない
場合、たとえば、＜名詞句関係＝ｘ＞＜名詞＞Ａ＜／名
詞＞＜名詞＞Ｂ＜／名詞＞＜／名詞句＞は、ＡがＢに依
存関係があることを表す。関係＝ｘは関係属性を表す。
【００４０】関係属性は、統語、意味、修辞についての
相互関俵を記述する。主語、目的語、間接目的語のよう
な文法機能、動作主、被動作者、受益者などのような主
題役割、および理由、結果などのような修辞関係はこの
関係属性により記述される。本例では、主語、目的語、
間接目的語のような比較的容易な文法機能について関係
属性を記述する。
【００４１】また、この文書においては、“Ａ氏”、
“Ｂ会”、“Ｃ市”のような固有名詞について、地名、
人名、組織名等のタグにより属性が記述されている。こ
れら地名、人名、組織名等のタグが付与されることで、
その語が固有名詞であることが表現される。
【００４２】３．文書データに対する手動分類処理 ３−１ 処理手順 本例の文書処理装置１では、例えば通信部２１（又は記
録／再生部３１）により外部から文書データが取り込ま
れると、その文書データを内容に応じて分類する処理を
行う。なお、以下の説明では、外部からの文書データは
通信部２１を介して取り込まれるとして述べていくが、
その説明は、外部からフロッピーディスク等の可搬性メ
ディアの形態で供給され、記録／再生部３１から文書デ
ータが取り込まれる場合も同様となるものである。
【００４３】分類処理としては、文書データ内容に応じ
てユーザーが手動で分類する手動分類処理と、文書処理
装置１が自動的に分類する自動分類処理がある。これら
の分類処理は、後述する分類モデルに基づいて行われる
わけであるが、文書処理装置１においては、初期状態で
は分類モデルは存在しない。そのため初期状態にある時
点では、手動分類処理として、分類モデルの作成を含む
分類処理が必要になる。そして、分類モデルが生成され
た後においては、入力された文書データに対して自動分
類処理が可能となるものである。まずここでは、最初に
実行することが必要とされる手動分類処理について説明
する。即ちこの手動分類処理とは、初期状態にある文書
処理装置１が外部から送られた文書データを受信した際
に、ユーザーの操作に基づいて、制御部１１が分類モデ
ルの作成及び文書データの分類を行う動作となる。
【００４４】まず手動分類処理としての全体の処理手順
を図４に示す。なお、各処理ステップの詳細な処理につ
いては後述する。
【００４５】図４のステップＦ１１は、文書処理装置１
の受信部２１による文書受信処理を示している。このス
テップＦ１１では、受信部２１は、たとえば通信回線を
介して送信された１又は複数の文書を受信する。受信部
２１は、受信した文書を文書処理装置の本体１０に送
る。制御部１１は供給された１又は複数の文書データを
ＲＡＭ１４又はＨＤＤ３４に格納する。
【００４６】なお、文書受信時には、その文書に関連す
るビデオデータ（動画又は静止画データ）を含むビデオ
ファイルが受信される場合があり（もちろんビデオデー
タのみの受信もあり得る）、１又は複数のビデオファイ
ルが受信された場合は、制御部１１はそのビデオファイ
ルを取り込んでＲＡＭ１４又はＨＤＤ３４に格納する。
ビデオファイルに関する処理については後に詳述する。
【００４７】ステップＦ１２では、文書処理装置１の制
御部１１は、受信部２１から送られた複数の文書の特徴
を抽出し、それぞれの文書の特徴情報すなわちインデッ
クスを作成する。制御部１１は、作成したインデックス
を、たとえばＲＡＭ１４又はＨＤＤ３４に記憶させる。
後述するがインデックスは、その文書に特徴的な、固有
名詞、固有名詞以外の語義などを含むものであり、文書
の分類や検索に利用できるものである。
【００４８】ステップＦ１３の文書閲覧は、ユーザーの
必要に応じて実行される処理である。つまりユーザーの
操作に応じて行われる。なお、このステップＦ１３や次
のステップＦ１４は、ユーザ操作に基づく処理である。
入力された文書データに対しては、ユーザーは所要の操
作を行うことにより、表示部３０の画面上で、その文書
内容を閲覧することができる。そして文書閲覧中は、ユ
ーザーは画面上のアイコン等に対する操作により、例え
ば後述する要約作成などの各種処理を指示できるが、こ
の手動分類処理に関しては、ステップＦ１４として示す
ように、分類項目の作成及び分類操作としての処理に進
むことになる。ステップＦ１４では、ユーザーが分類項
目（なお本明細書では、分類項目のことをカテゴリとも
いう）を設定する操作を行うことに応じて、制御部１１
は分類項目を生成／表示していく。またユーザーが文書
データを、設定された分類項目に振り分けていく操作も
行うことになり、それに応じて制御部１１は文書データ
の振り分け／表示を行うことになる。
【００４９】ステップＦ１５では、制御部１１は、ステ
ップＦ１４でユーザーが行った分類項目作成及び分類操
作に応じて、分類モデルを作成する。分類モデルは、文
書を分類する複数の分類項目（カテゴリ）から構成され
るとともに、各カテゴリに対して各文書のインデックス
（ステップＦ１２で作成した各文書のインデックス）を
対応づけることで、分類状態を規定するデータである。
このような分類モデルを生成したら、ステップＦ１６
で、その分類モデルを登録する。即ち制御部１１は、分
類モデルをたとえばＲＡＭ１４に記憶させることで登録
を行う。以上の図４の処理により、文書処理状態１が初
期状態にある時に入力された１又は複数の各文書データ
について、手動分類及び分類モデルの作成が行われたこ
とになる。この図４のステップＦ１２以下の処理につい
て詳しく述べていく。
【００５０】３−２ インデックス作成 ステップＦ１４では、制御部１１は入力された文書デー
タについてインデックスの作成を行う。まず、或る１つ
の文書データに対して作成されたインデックスの具体例
を示す。
【００５１】＜インデックス 日付＝“AAAA/BB/CC”
時刻＝“DD:EE:FF” 文書アドレス＝“1234”＞ ＜ユーザの操作履歴 最大要約サイズ＝“100”＞ ＜選択 エレメントの数＝“10”＞ピクチャーテル＜／
選択＞ ・・・ ＜／ユーザの操作履歴＞ ＜要約＞減税規模、触れず−Ｘ首相の会見＜／要約＞ ＜語 語義＝“0003” 中心活性値＝“140.6”＞触れ
ず＜／語＞ ＜語 語義＝“0105” 識別子＝“Ｘ” 中心活性値＝
“67.2”＞首相＜／語＞ ＜人名 識別子＝“Ｘ” 語 語義＝“6103” 中心活
性値＝“150.2”＞Ｘ首相＜／語 ／人名＞ ＜語 語義＝“5301” 中心活性値＝“120.6”＞求め
た＜／語＞ ＜語 語義＝“2350” 識別子＝“Ｘ” 中心活性値＝
“31.4”＞首相＜／語＞ ＜語 語義＝“9582” 中心活性値＝“182.3”＞強調
した＜／語＞ ＜語 語義＝“2595” 中心活性値＝“93.6”＞触れる
＜／語＞ ＜語 帝義＝“9472” 中心活性値＝“12.0”＞予告し
た＜／語＞ ＜語 語義＝“4934” 中心活性値＝“46.7”＞触れな
かった＜／語＞ ＜語 語義＝“0178” 中心活性値＝“175.7”＞釈明
した＜／語＞ ＜語 語義＝“7248” 識別子＝“Ｘ” 中心活性値＝
“130.6”＞私＜／語＞ ＜語 語義＝“3684” 識別子＝“Ｘ” 中心活性値＝
“121.9”＞首相＜／語＞ ＜語 語義＝“1824” 中心活性値＝“144.4.”＞訴え
た＜／語＞ ＜語 語義＝“7289” 中心活性値＝“176.8”＞見せ
た＜／語＞ ＜／インデックス＞
【００５２】このインデックスにおいては、＜インデッ
クス＞および＜／インデックス＞は、インデックスの始
端および終端を、＜日付＞および＜時刻＞はこのインデ
ックスが作成された日付および時刻を、＜要約＞および
＜／要約＞はこのインデックスの内容の要約の始端およ
び終端を、それぞれ示している。また、＜語＞および＜
／語＞は語の始端および終端を示している。さらに例え
ば、語義＝“0003”は、第３番目の語義であることを示
している。他についても同様である。上述したように、
同じ語でも複数の意味を持つ場合があるので、それを区
別するために語義ごとに番号が予め決められており、そ
の該当する語義が番号で表されているものである。
【００５３】また、＜ユーザの操作履歴＞および＜／ユ
ーザの操作履歴＞は、ユーザの操作履歴の始端および終
端を、＜選択＞および＜／選択＞は、適訳されたエレメ
ントの始端および終端を、それぞれ示している。最大要
約サイズ＝“100”は、要約の最大のサイズが１００文
字であることを、エレメントの数＝“10”は、選択され
たエレメントの数が１０であることを示している。
【００５４】この例のように、インデックスは、その文
書に特徴的な、固有名詞、固有名詞以外の語義などを含
むものである。例えばこのようなインデックスを作成す
るステップＦ１２の処理を、図５〜図８で説明する。な
お、図５は１つの文書データに対するインデックス作成
処理を示しており、従って複数の文書データについて処
理を行う場合は、各文書データについてこの図５の処理
が行われることになる。また図５のステップＦ３１の詳
細な処理を図７に示し、さらに図７のステップＦ４３の
詳細な処理を図８に示している。
【００５５】上述した図４のステップＦ１２のインデッ
クス作成処理としては、まず図５のステップＦ３１の活
性拡散が行われる。この活性拡散とは、文書データにつ
いて、エレメントの中心活性値を文書の内部構造に基づ
いて拡散することで、中心活性値の高いエレメントと関
わりのあるエレメントにも高い中心活性値を与えるよう
な処理である。即ち、文書を構成する各エレメントに対
して初期値としての中心活性値を与えた後、その中心活
性値を、文書の内部構造、具体的にはリンク構造に基づ
いて拡散する。この中心活性値は、タグ付けによる内部
構造に応じて決定されるので、文書の特徴の抽出等に利
用されるものである。制御部１１は、このステップＦ３
１として、活性拡散を行い、活性拡散の結果として得ら
れた各エレメントの中心活性値を、たとえばＲＡＭ１４
に記憶させることになる。
【００５６】ステップＦ３１の活性拡散について、図６
〜図８で詳しく説明していく。まずエレメントとエレメ
ントのリンク構造の例を図６に示す。図６においては、
文書を構成するエレメントとリンクの構造の一部とし
て、エレメントＥ１、Ｅ２の周辺を示している。Ｅ１〜
Ｅ８はエレメントの例であり、この中でエレメントＥ
１、Ｅ２に注目して説明する。
【００５７】エレメントＥ１の中心活性値はｅ１である
とし、またエレメントＥ２の中心活性値はｅ２であると
する。このエレメントＥ１，Ｅ２は、リンクＬ１２（上
述した通常リンクもしくは参照リンク）にて接続されて
いる。リンクＬ１２のエレメントＥ１に接続する端点を
Ｔ１２、エレメントＥ２に接続する端点をＴ２１とす
る。エレメントＥ１は、さらにエレメントＥ３，Ｅ４，
Ｅ５と、それぞれリンクＬ１３，Ｌ１４，Ｌ１５で接続
されている。各リンクＬ１３，Ｌ１４，Ｌ１５における
エレメントＥ１側の端点をそれぞれＴ１３，Ｔ１４，Ｔ
１５とする。またエレメントＥ２は、エレメントＥ６，
Ｅ７，Ｅ８とも、それぞれリンクＬ２６，Ｌ２７，Ｌ２
８で接続されている。各リンクＬ２６，Ｌ２７，Ｌ２８
におけるエレメントＥ２側の端点をそれぞれＴ２６，Ｔ
２７，Ｔ２８とする。このようなリンク構造の例を用い
ながら、図７、図８の活性拡散処理を説明していく。
【００５８】図７のステップＦ４１で制御部１１は、イ
ンデックス作成対象としての文書データについて活性拡
散を開始するにあたり、まず文書データの全エレメント
について中心活性値の初期設定を行う。中心活性値の初
期値としては、例えば固有名詞や、ユーザーが選択（ク
リック）したエレメント等に高い値を与えるようにす
る。また制御部１１は、参照リンクと通常リンクに関し
て、エレメントを連結するリンクの端点Ｔ(xx)の端点活
性値を０に設定する。制御部１１は、このように付与し
た端点活性値の初期値を、たとえばＲＡＭ１４に記憶さ
せる。
【００５９】ステップＦ４２においては、制御部１１
は、文書を構成するエレメントＥｉを計数するカウンタ
の初期化をおこなう。すなわち、エレメントを計数する
カウンタのカウント値ｉを１に設定する。ｉ＝１の場
合、このカウンタは、第１番目のエレメント（例えば図
６のエレメントＥ１）を参照することになる。
【００６０】ステップＦ４３においては、制御部１１
は、カウンタが参照するエレメントについて、新たな中
心活性値を計算する中心活性値更新処理を実行する。こ
の中心活性値更新処理について、エレメントＥ１につい
ての処理を例に挙げながら、図８で詳しく説明する。こ
の中心活性値更新処理は、エレメントについての端点活
性値を更新し、さらに更新された端点活性値と現在の中
心活性値を用いて、新たな中心活性値を算出する処理と
なる。
【００６１】図８のステップＦ５１では、制御部１１
は、文書を構成するエレメントＥｉ（例えばこの場合Ｅ
１）に一端が接続されたリンクの数を計数するカウンタ
の初期化をおこなう。すなわち、リンクを計数するカウ
ンタのカウント値ｊを１に設定する。ｊ＝１の場合、こ
のカウンタは、エレメントＥｉと接続された第１番目の
リンクＬ（yy）を参照することになる。図６の例では、
エレメントＥ１についての第１のリンクとして例えばリ
ンクＬ１２を参照する。
【００６２】ステップＦ５２で制御部１１は、参照中の
リンク、つまりエレメントＥ１とＥ２を接続するリンク
Ｌ１２について、関係属性のタグを参照することにより
通常リンクであるか否かを判断する。制御部１１は、リ
ンクＬ１２が通常リンクであればステップＦ５３に、一
方リンクＬ１２が参照リンクであればステップＦ５４に
処理を進める。
【００６３】リンクＬ１２が通常リンクと判断されてス
テップＦ５３に進んだ場合は、制御部１１は、エレメン
トＥ１の通常リンクＬ１２に接続された端点Ｔ１２の新
たな端点活性値を計算する処理をおこなう。端点Ｔ１２
の端点活性値ｔ１２は、リンク先のエレメントＥ２の端
点活性値のうち、リンクＬ１２以外のリンクに接続する
すべての端点の各端点活性値（この場合Ｔ２６、Ｔ２
７、Ｔ２８の各端点活性値ｔ２６、ｔ２７，ｔ２８）
と、エレメントＥ２の中心活性値ｅ２を加算し、この加
算で得た値を、文書に含まれるエレメントの総数で除す
ることにより求められる。制御部１１は、この様な演算
を、ＲＡＭ１４から読み出した各端点活性値および各中
心活性値を用いて行うことで、通常リンクと接続された
端点についての新たな端点活性値を算出し、算出した端
点活性値を、ＲＡＭ１４に記憶させる。つまり端点Ｔ１
２の端点活性値ｔ１２を更新する。
【００６４】一方、ステップＦ５２でリンクＬ１２が参
照リンクであると判断され、ステップＦ５４に進んだ場
合は、同じく制御部１１は、通常リンクＬ１２に接続さ
れたエレメントＥ１の端点Ｔ１２の新たな端点活性値を
計算する処理をおこなうことになるが、端点活性値の算
出のための演算は次のようになる。即ちこの場合は、端
点Ｔ１２の端点活性値ｔ１２は、リンク先のエレメント
Ｅ２の端点活性値のうち、リンクＬ１２以外のリンクに
接続するすべての端点の各端点活性値（この場合Ｔ２
６、Ｔ２７、Ｔ２８の各端点活性値ｔ２６、ｔ２７，ｔ
２８）と、エレメントＥ２の中心活性値ｅ２を加算した
値とする。（つまり除算がない点が上記通常リンクの場
合と異なるものとなる）そして制御部１１は、この様な
演算を、ＲＡＭ１４から読み出した各端点活性値および
各中心活性値を用いて行うことで、参照リンクと接続さ
れた端点についての新たな端点活性値を算出し、算出し
た端点活性値を、ＲＡＭ１４に記憶させる。つまり端点
Ｔ１２の端点活性値ｔ１２を更新する。
【００６５】このようなステップＦ５３又はＦ５４の処
理を行なったら、制御部１１はステップＦ５５での判別
処理を介して（判別結果がＮＯであれば）ステップＦ５
７に進み、カウント値ｊをインクリメントしてステップ
Ｆ５２に戻る。即ち続いて、カウント値ｊ＝２とされる
ことにより、エレメントＥ１についての第２のリンク
（例えばリンクＬ１３）が参照されることになるため、
上記同様にステップＦ５２以降の処理でリンクＬ１３に
接続される端点Ｔ１３の端点活性値ｔ１３が算出／更新
されることになる。
【００６６】ステップＦ５５では、制御部１１は、現在
カウント値ｉで参照中のエレメントＥｉ（Ｅ１）につい
て、全てのリンクについての新たな端点活性値が計算さ
れたか否かを判別して処理を分岐するものであるため、
端点活性値の更新処理は、参照中のエレメントＥｉの全
ての端点活性値が更新されるまで行われる。つまりステ
ップＦ５７でカウント値ｊがインクリメントされながら
処理が繰り返されることで、例えばエレメントＥ１につ
いては、端点Ｔ１２，Ｔ１３，Ｔ１４，Ｔ１５について
それぞれ端点活性値ｔ１２，ｔ１３，ｔ１４，ｔ１５が
更新されていき、その全てが更新された時点で、処理は
ステップＦ５５からＦ５６に進むことになる。
【００６７】エレメントＥｉについての全ての端点活性
値が求められたことに応じて、ステップＦ５６では、更
新された端点活性値を用いて、エレメントＥｉの新たな
中心活性値ｅｉを算出する。エレメントＥｉの新たな中
心活性値ｅｉは、エレメントＥｉの現在の中心活性値ｅ
ｉとエレメントＥｉのすべての端点の新たな端点活性値
の和で求められる。例えば図６のエレメントＥ１の場合
は、新たな中心活性値ｅ１(new)は、 ｅ１(new)＝ｅ１＋ｔ１２＋ｔ１３＋ｔ１４＋ｔ１５ となる。
【００６８】制御部１１は、このようにして現在カウン
ト値ｉで参照中のエレメントＥｉの中心活性値ｅｉを算
出する。そして、制御部１１は、計算した新たな中心活
性値ｅｉをＲＡＭ１４に記憶させる。つまりエレメント
Ｅｉの中心活性値ｅｉを更新する。（但しこの時点で
は、後述するステップＦ４５の処理で用いるため、旧中
心活性値も保持しておく）
【００６９】図７のステップＦ４３の中心活性値更新処
理として、以上図８に示したような処理が行われるた
ら、制御部１１の処理は図７のステップＦ４４に進み、
制御部１１は、文書中のすべてのエレメントについて中
心活性値更新処理が完了したか否かを判断する。具体的
には、制御部１１は、カウント値ｉが、文書に含まれる
エレメントの総数に達したか否かを判断する。制御部１
１は、すべてのエレメントについて中心活性値更新処理
が完了していないときは、ステップＦ４７に処理を進
め、カウント値ｉをインクリメントしてステップＦ４３
に戻る。例えば上記のようにエレメントＥ１についての
処理が終わった後であれば、カウント値ｉ＝２とされ
て、今度はエレメントＥ２が参照されることになる。そ
してエレメントＥ２について、ステップＦ４３の中心活
性値更新処理（即ち図８の処理）が上記同様に行われ
る。重複説明となるため詳細は述べないが、図６のリン
ク例でいえば、エレメントＥ２の場合は、図８の処理に
おいて端点Ｔ２１，Ｔ２６，Ｔ２７，Ｔ２８の各端点活
性値ｔ２１，ｔ２６，ｔ２７，ｔ２８が更新された後、
新たな中心活性値ｅ２(new)が、 ｅ２(new)＝ｅ２＋ｔ２１＋ｔ２６＋ｔ２７＋ｔ２８ として算出され、更新されることになる。
【００７０】図７の処理においては、このようにステッ
プＦ４７でカウント値ｉがインクリメントされて参照エ
レメントが変更されながらステップＦ４３の中心活性値
更新処理が繰り返されることで、文書に含まれる全ての
エレメントの中心活性値が更新されていくことになる。
【００７１】文書中のすべてのエレメントについて中心
活性値の更新が完了したときは、処理はステップＦ４４
からＦ４５に進むことになる。ステップＦ４５において
は、制御部１１は、文書に含まれるすべてのエレメント
の中心活性値の変化分、すなわち新たに計算された中心
活性値の元の中心活性値に対する変化分について平均値
を計算する。例えば制御部１１は、ＲＡＭ１４に記憶さ
れた旧中心活性値と、更新した新たな中心活性値を、文
書に含まれるすべてのエレメントについて読み出す。そ
して各エレメントについて新中心活性値と旧中心活性値
の差分を求め、その差分の総和をエレメントの総数で除
することにより、すべてのエレメントの中心活性値の変
化分の平均値を計算する。制御部１１は、このように計
算したすべてのエレメントの中心活性値の変化分の平均
値を、たとえばＲＡＭ１４に記憶させる。
【００７２】続いてステップＦ４６において制御部１１
は、ステップＦ４５で計算した平均値が、あらかじめ設
定された閾値以内であるか否かを判断する。そして、制
御部１１は、上記平均値が閾値以内である場合は、活性
拡散処理としての一連の行程を終了するが、上記平均値
が閾値以内でないときには、ステップＦ４２にもどっ
て、上述した一連の行程を再び実行する。
【００７３】この一連の活性拡散処理は、中心活性値が
高いエレメントに関連のある（リンクする）エレメント
について、その中心活性値を引き上げていく処理といえ
るものである。ところが、この活性拡散を１回行うのみ
では、インデックス作成処理の目的を考えたときに、本
来中心活性値を引き上げられるべきエレメントの中で、
中心活性値が十分に引き上げられないものが発生する場
合もありうる。例えば、１回の活性拡散では、中心活性
値の初期値が高く設定されたエレメントに直接リンクす
るエレメントについては、或る程度中心活性値が引き上
げられるが、直接リンクしていないエレメントは、それ
がインデックスとして重要なエレメントであっても十分
に中心活性値が引き上げられないことが生ずる。そこ
で、ステップＦ４６の判断を介して、必要に応じて活性
拡散処理を複数回行うようにすることで、全体的に中心
活性値が収束されるようにし、中心活性値が引き上げら
れない重要なエレメントがなるべく生じないようにする
ものである。なお、複数回の活性拡散で、全体的に中心
活性値が収束されていくのは、活性拡散処理で更新され
た各エレメントの中心活性値に基づいて、さらに次の活
性拡散処理で各エレメントの中心活性値が更新されてい
くためである。但し、このような活性拡散処理が多数回
行われすぎると、全エレメントの中心活性値が収束しき
ってほぼ同値となるような事態となり、不適切である。
このため、ステップＦ４５，Ｆ４６の処理として、中心
活性値の変化分の平均値を求めるように、その変化分に
基づいて活性拡散処理の終了タイミングを判断すること
で、インデックス作成に好適な活性拡散が実現されるこ
とになる。
【００７４】以上の図７、図８のような活性拡散処理
（即ち図５のステップＦ３１）が完了したら、制御部１
１の処理は図５のステップＦ３２に進むことになる。ス
テップＦ３２においては、制御部１１は、ステップＦ３
１で得られた各エレメントの中心活性値に基づいて、中
心活性値があらかじめ設定された閾値を超えるエレメン
トを抽出する。制御部１１は、このように抽出したエレ
メントをＲＡＭ１４に記憶させる。
【００７５】続いてステップＦ３３においては、制御部
１１は、ステップＦ３２にて抽出したエレメントをたと
えばＲＡＭ１４から読み出す。そして制御部１１は、こ
の抽出したエレメントの中からすべての固有名詞を取り
出してインデックスに加える。固有名詞は語義を持た
ず、辞書に載っていないなどの特殊の性質を有するので
固有名詞以外の語とは別に扱うものである。なお語義と
は、前述したように、語の有する複数の意味のうちの各
意味に対応したものである。各エレメントが固有名詞で
あるか否かは、文書に付されたタグに基づいて判断する
ことができる。たとえば、図３に示したタグ付けによる
内部構造においては、“Ａ氏”、“Ｂ会”および“Ｃ
市”は、タグによる関係属性がそれぞれ“人名”、“組
織名”および“地名”であるので固有名詞であることが
分かる。そして、制御部１１は、取り出した固有名詞を
インデックスに加え、その結果をＲＡＭ１４に記憶させ
る。
【００７６】次のステップＦ３４においては、制御部１
１は、ステップＦ３２にて抽出したエレメントの中か
ら、固有名詞以外の語義を取り出してインデックスに加
え、その結果をＲＡＭ１４に記憶させる。
【００７７】以上の処理により、例えば上記した具体例
のようなインデックスが生成される。即ちインデックス
は、タグ付けされた文書の特徴を発見して、その特徴を
配列したものとなり、その文書の特徴は、文書の内部構
造に応じて拡散処理された中心活性値に基づいて判断さ
れるものとなる。そしてこのようなインデックスは、文
書を代表するような特徴を表す語義および固有名詞を含
むので、所望の文書を参照する際に用いることができ
る。なお、インデックスには、文書の特徴を表す語義お
よび固有名詞とともに、その文書がＲＡＭ１４（又はＨ
ＤＤ３４）において記憶された位置を示す文書アドレス
を含めておく。
【００７８】３−３ 文書閲覧／分類作成／分類操作 以上の図５〜図８で説明したインデックス作成処理は図
４のステップＦ１２で行われるものとなる。従って図４
の手動分類処理としては、続いてステップＦ１３，Ｆ１
４の処理、即ち上述したようにユーザーによる閲覧及び
手動分類の処理に移る。
【００７９】上述のように、図４のステップＦ１３にお
いては、ユーザーは表示部３０に表示される文書を閲覧
することができる。またステップＦ１４においては、ユ
ーザーが分類項目を設定する操作や、文書データを、設
定された分類項目に振り分けていく操作を行うことがで
きる。このステップＦ１３，Ｆ１４で行われる操作や、
それに対応する制御部１１の処理及び表示部３０の表示
例は以下のようになる。
【００８０】図９、図１０は表示部３０における表示の
具体例を示している。まず図９は、詳しくは後述する分
類モデルに対応した文書分類ウインドウ２０１の表示例
である。即ち、文書分類の表示に用いられるグラフィッ
クユーザインターフェース（graphic user interface；
GUI）の具体例となる。この文書分類ウィンドウ２０１
には、操作用のボタン表示２０２として、画面のウィン
ドウの状態を初期の位置にもどすポジションリセット
（position reset）ボタン２０２ａと、文書の内容を閲
読するブラウザ（browser）を呼び出すブラウザボタン
２０２ｂと、このウィンドウからの脱出（exit）ボタン
２０２ｃとが表示される。
【００８１】また、この文書分類ウィンドウ３０１は、
分類モデルに対応する分類項目に応じた小ウインドウと
して、文書分類エリア２０３，２０４，２０５・・・が
形成される。文書分類エリア２０３は、“他のトピック
ス”を表示するエリアとされる。この”他のトピック
ス”の文書分類エリア２０３は、まだ分類されていない
文書が提示される領域となる。例えば図４のステップＦ
１１で受信された各文書（つまりこれから分類しようと
する文書）は、この”他のトピックス”の文書分類エリ
ア２０３に提示される。文書分類エリア２０４は、例え
ば”ビジネスニュース”に分類された文書が提示される
領域となる。文書分類エリア２０５は、例えば”政治ニ
ュース”に分類された文書が提示される領域となる。こ
れら以外にも、図中で符号を付していない文書分類エリ
アは、それぞれ特定の分類項目に応じた文書が提示され
る領域となる。
【００８２】これらの各文書分類エリア２０３，２０４
・・・では、その各文書分類エリアに設定された分類項
目（カテゴリ）に分類された文書が、その文書のアイコ
ンと文書のタイトルにより提示される。タイトルがない
場合には、一文の要約が表示される。また各文書分類エ
リア２０３，２０４・・・の大きさは固定的ではなく、
ユーザーがドラッグ操作などにより各文書分類エリアを
区切る区切枠２１１，２１２，２１３・・・を移動させ
ることにより、各文書分類エリア２０３，２０４・・・
の面積を任意に変更させることができる。文書分類エリ
アの数もユーザーが任意に増減できる。
【００８３】また各文書分類エリア２０３，２０４・・
・のタイトル（例えば「政治ニュース」など）は、ユー
ザーが任意に設定、変更できるものである。なお、この
文書分類エリアの数及び各タイトルは、後述する分類モ
デルの分類項目に応じたものとなる。言い換えれば、ユ
ーザーがこの分類ウインドウ２０１においてマウスやキ
ーボード等による入力部２０からの操作で、文書分類エ
リアの設定や削除、或いはタイトル設定を行うことで、
分類モデルの分類項目の数やタイトルが設定されること
になる。
【００８４】図１０は、ユーザーが文書データの内容を
閲覧する閲覧ウインドウ３０１の例を示している。例え
ばユーザーが、図９の分類ウインドウ２０１において或
る文書をクリックして選択した状態としたうえで、ブラ
ウザボタン２０２ｂをクリックすることで、制御部１１
は図１０のように選択された文書を表示する閲覧ウイン
ドウ３０１を開くようにする。
【００８５】この閲覧ウインドウ３０１には、文書デー
タファイルのファイル名を表示するファイル名表示部３
０２、そのファイル名の文書データを表示する文書表示
部３０３、文書表示部３０３に表示された文書の要約文
を表示する要約表示部３０４、キーワードの入力／表示
を行うキーワード表示部３０５が設けられる。また操作
用のボタン表示３０６として、要約文の作成を指示する
ための要約作成ボタン３０６ａ、アンドゥ操作（操作取
消）を行うためのアンドゥボタン３０６ｂ、読み上げ動
作を実行させるための読み上げボタン３０６ｃ、ビデオ
データの表示を指示するためのビデオボタン３０６ｄな
どが表示される。
【００８６】この様な閲覧ウインドウ３０１において、
ユーザーは文書表示部３０３に表示される文書を閲覧す
ることができる。なお、文書の全体を表示しきれないと
きは、文書の一部が表示される。もちろんスクロール操
作を行うことで、全文を閲覧できる。また、ユーザーは
要約作成ボタン３０６ａをクリックすることで、文書表
示部３０３に表示される文書についての要約文を作成さ
せ、要約表示部３０４に表示させることができる。さら
にユーザーは、読み上げボタン３０６ｃをクリックする
ことで、文書表示部３０３に表示されている文書の本文
又は要約文についての読み上げを実行させることができ
る。また、ユーザーはビデオボタン３０６ｄをクリック
することで、文書表示部３０３に表示されている文書の
本文、または要約表示部３０４に表示されている要約文
に関連するビデオデータの表示を実行させることができ
る。なお、要約文作成のための制御部１１の処理、読み
上げ動作についての処理、及びビデオ出力動作について
の処理はそれぞれ後述する。
【００８７】以上のような分類ウインドウ２０１、閲覧
ウインドウ３０１は、図４の手動分類処理の際に限ら
ず、ユーザーの操作に応じて随時表示部２０に表示され
るものであるが、図４の手動分類処理に関していえば、
ユーザーは受信した文書の種類や内容を、分類ウインド
ウ２０１、閲覧ウインドウ３０１で確認することができ
るものである。具体的には、図４のステップＦ１１で受
信された１又は複数の文書は、ステップＦ１２でのイン
デックス作成処理の後、図９のような分類ウインドウ２
０１における”他のトピックス”の文書分類エリア２０
３に表示される。この分類ウインドウ２０１において、
ユーザーは、文書分類エリア２０３に表示された各文書
を手動で分類していくことになるが、例えば文書のタイ
トルだけ等では内容がわからない場合は、図１０の閲覧
ウインドウ３０１により文書内容を確認する。そのよう
にユーザの必要に応じて行われる閲覧が図４のステップ
Ｆ１３の処理となる。
【００８８】ステップＦ１４としては、ユーザーは分類
ウインドウ２０１上において分類項目の追加、更新、削
除等を任意に行うことができ、その操作に応じて、制御
部１１は表示される文書分類エリア２０３、２０４・・
・の表示態様（数、面積、タイトル等）を変更させてい
く。なお、ユーザーによる分類項目（文書分類エリアの
タイトル）の設定／変更は、それが後述する分類モデル
に反映されることになる。
【００８９】ユーザーは必要に応じて分類項目の設定を
行った後、文書分類エリア２０３に表示されている各文
書を、各文書分類エリアに振り分けていく。つまりユー
ザーの手動により、文書を分類する。具体的には、”他
のトピックス”の文書分類エリア２０３に表示されてい
る文書のアイコンを、例えば入力部２０のマウスを用
い、所望の分類項目（カテゴリ）に対応する文書分類エ
リアにドラッグすることによりおこなう。例えばユーザ
ーは、「スポーツ」というタイトルの文書分類エリアを
設定したうえで、”他のトピックス”の文書分類エリア
２０３に表示されているスポーツ関連の文書のアイコン
を、“スポーツ”の文書分類エリアにドラッグするよう
な操作を行う。このようにして手動で分類された各文書
のアイコンやタイトルは、以降、そのドラッグされた先
の文書分類エリア内で表示される。
【００９０】３−４ 分類モデル作成／登録 以上のようにユーザーによる手動分類操作が行われた
ら、制御部１１は図４のステップＦ１５において、ユー
ザの分類操作に基づいた複数のカテゴリからなる分類モ
デルを作成する。すなわち制御部１１は、各カテゴリに
分類された上記複数の文書のインデックスを集めて、分
類モデルを生成する。そして、分類モデルの各カテゴリ
に上記複数の文書を分類する。
【００９１】分類モデルは、文書を分類する複数の分類
項目（カテゴリ）から構成される。そして各カテゴリに
ついて、分類された文書が示されるデータ形態となる。
各文書については、上記ステップＦ１２などでインデッ
クスが形成されるが、分類モデルは例えば図１１（ａ）
に示すように、各カテゴリについて分類された文書のイ
ンデックスが対応づけられたようなデータ構造となる。
この図１１（ａ）では、カテゴリとして「スポーツ」
「会社」「コンピュータ」・・・等が設定されている
が、これらは上記のように分類ウインドウ２０１におい
てユーザーが設定した分類項目となる。なお、もちろん
ユーザーが設定しなくとも、予め設定されている（つま
り分類ウインドウで文書分類エリアとして表示される）
カテゴリがあってもよい。そして各分類項目にはインデ
ックスＩＤＸ１、ＩＤＸ２・・・が対応づけられるが、
即ち各分類項目には、ユーザーが上記のように分類した
文書のインデックスが対応づけられるものとなる。
【００９２】各分類項目に対応づけられるインデックス
は、分類ウインドウ２０１においてその分類項目の文書
分類エリアに表示されている文書のインデックスであ
る。例えばインデックスＩＤＸ１がカテゴリ「スポー
ツ」に対応づけられているのは、ユーザーが、分類ウイ
ンドウ２０１において「スポーツ」をタイトルとする文
書分類エリアを作成し、さらにインデックスＩＤＸ１の
文書のアイコンを、その「スポーツ」をタイトルとする
文書分類エリアにドラッグするという手動分類を行った
ことに基づくものとなる。
【００９３】ところで上述のように各文書のインデック
スは、固有名詞、固有名詞以外の語義や文書アドレス等
を含んでいる。そして、例えば図１１（ａ）のように１
つの分類項目には１又は複数のインデックスが対応づけ
られるが、インデックスとして固有名詞、語義、文書ア
ドレス等が含まれるため、分類モデルは図１１（ｂ）の
ようにも表すことができる。
【００９４】即ち図１１（ｂ）に示すように、分類モデ
ルは、各カテゴリに対応するカテゴリインデックスとし
て、固有名詞、固有名詞以外の語義、文書アドレスの欄
を有する構造となる。そして分類モデルにおいては、各
カテゴリ「スポーツ」「社会」「コンピュータ」「植
物」「美術」「イベント」に対して、固有名詞“Ａ氏、
・・・”、“Ｂ氏、・・・”、“Ｃ社、Ｇ社、・・
・”、“Ｄ種、・・・”、“Ｅ氏、・・・”および“Ｆ
氏”等の固有名詞が割り当てられる。また、“野球（４
５４６）、グランド（２３４３）、・・・”、“労働
（３１１２）、固有（９８２１）、・・・”、“モバイ
ル（２１０２）、・・・”、“桜１（１１１１１）、オ
レンジ１（９９１１）”、“桜２（１１１１２）、オレ
ンジ２（９９１２）”および“桜３（１１１１３）”等
の語義も各カテゴリに割り当てられる。さらに文書アド
レス“ＳＰ１、ＳＰ２、ＳＰ３、・・・”、“Ｓ０１、
Ｓ０２、Ｓ０３、・・・”、“ＣＯ１、ＣＯ２、ＣＯ
３、・・・”、“ＰＬ１、ＰＬ２、ＰＬ３、・・・”、
“ＡＲ１、ＡＲ２、ＡＲ３、・・・”および“ＥＶ１、
ＥＶ２、ＥＶ３、・・・”も各カテゴリに割り当てられ
る。
【００９５】なお、“桜１”“桜２”“桜３”は、
“桜”の第１の語義（１１１１１）、第２の語義（１１
１１２）、第３の語義（１１１１３）を示している。ま
た、“オレンジ１”“オレンジ２”は、“オレンジ”の
第１の語義（９９１１）、第２の語義（９９１２）を示
している。たとえば“オレンジ１”は植物のオレンジを
表し、“オレンジ２”はオレンジ色を表す。固有名詞以
外の場合に語そのものではなく語義を用いるのは、この
様に、同じ語でも複数の意味を有することがあるからで
ある。
【００９６】図４のステップＦ１５では、ユーザーの手
動分類操作に応じて例えばこの様な分類モデルが生成さ
れる。そしてステップＦ１６として分類モデルが登録、
即ちＲＡＭ１５（又はＨＤＤ３４）に記録される。この
ように分類モデルが生成／登録されることにより、文書
の分類が行われたことになる。
【００９７】なお、このように図４におけるステップＦ
１５、Ｆ１６として分類モデルの作成／登録が行われた
後は、後述する自動分類処理や、ユーザーの分類項目の
編集、或いは手動分類操作などに応じて、分類モデルは
逐次更新されていくことになる。分類モデルが更新され
ると、分類モデルに更新日時が記録される。図１１に
は、更新日時として“１９９８年１２月１０日１９時５
６分１０秒”が記録されている。
【００９８】４．文書データに対する自動分類処理 ４−１ 処理手順 本例の文書処理装置１では、上記のように一旦分類モデ
ルが作成された後は、例えば通信部２１により外部から
取り込まれた文書データを、自動的に分類していく自動
分類処理が可能となる。即ち以下説明する自動分類処理
とは、文書処理装置１が外部から送られた文書データを
受信した際に、その文書データを分類モデルに対して分
類していく処理となる。なお、この例では、一つの文書
を受信する毎に以下説明する自動分類処理をおこなうこ
ととするか、複数の所定数の文書を受信する度におこな
ってもよいし、ユーザが図９の画面を開く操作をしたと
きにそれまでに受信した全文書に対して自動分類処理を
おこなうようにしてもよい。
【００９９】自動分類処理としての全体の処理手順を図
１２に示す。図１２のステップＦ２１は、文書処理装置
１の受信部２１による文書受信処理を示している。この
ステップＦ２１では、受信部２１は、たとえば通信回線
を介して送信された１又は複数の文書を受信する。受信
部２１は、受信した文書を文書処理装置の本体１０に送
る。制御部１１は供給された１又は複数の文書データを
ＲＡＭ１４又はＨＤＤ３４に格納する。なお文書データ
とともに（又は文書データとは独立して）、１又は複数
のビデオファイルが受信された場合は、制御部１１はそ
のビデオファイルを取り込んでＲＡＭ１４又はＨＤＤ３
４に格納することになる。
【０１００】続いてステップＦ２２に進み、制御部１１
は、ステップＦ２１で取り込まれた文書についてインデ
ックスを作成する。
【０１０１】ステップＦ２３では、制御部１１は、分類
モデルに基づいて、インデックスを付された各文書を、
分類モデルのいずれかのカテゴリに自動分類する。そし
て、制御部１１は、分類の結果をたとえばＲＡＭ１４に
記憶させる。自動分類の詳細については後述する。
【０１０２】ステップＦ２４では、制御部１１は、ステ
ップＦ２３での新たな文書の自動分類の結果に基づい
て、分類モデルを更新する。そしてステップＦ２５で
は、制御部１１は、ステップＦ２４で更新された分類モ
デルを登録する。例えば分類モデルをＲＡＭ１４に記憶
させる。
【０１０３】以上の図１２の処理により、文書処理状態
１に入力された文書データが、分類モデル上で分類され
るように自動分類処理が行われることになる。すなわち
この自動分類処理においては、受信した文書に対しては
インデックスが作成され、さらに自動分類が行われた
後、そのインデックスを構成している固有名詞、語義、
文書アドレス等が、上記図１１のように分類モデル上で
或るカテゴリーに対応づけられることになる（分類モデ
ルが更新される）。
【０１０４】ステップＦ２１、Ｆ２２の処理は、上述し
た手動分類処理におけるステップＦ１１，Ｆ１２と同様
である。即ちステップＦ２２のインデックス作成処理と
しては、図５〜図８で説明した処理が行われるものであ
り、ここでの繰り返しの説明は避ける。また、ステップ
Ｆ２４の分類モデルの更新は、ステップＦ２３の自動分
類の分類結果に応じてものとなる。以下、上述の手動分
類処理とは異なる処理として、ステップＦ２３の自動分
類について詳細に説明する。
【０１０５】４−２ 自動分類 図１２のステップＦ２３での自動分類の詳しい処理を図
１３に示す。図１３のステップＦ６１では、制御部１１
は、分類モデルのカテゴリＣｉに含まれる固有名詞の集
合と、ステップＦ２１で受信した文書から抽出されイン
デックスに入れられた語のうちの固有名詞の集合とにつ
いて、これらの共通集合の数をＰ（Ｃｉ）とする。そし
て制御部１１は、このようにして算出した数Ｐ（Ｃｉ）
をＲＡＭ１４に記憶させる。
【０１０６】ステップＦ６２においては、制御部１１
は、その文書のインデックス中に含まれる全語義と、各
カテゴリＣｉに含まれる全語義との語義間関連度を、後
述する図１５に示す語義間関連度の表を参照して、語義
間関連度の総和Ｒ（Ｃｉ）を演算する。すなわち制御部
１１は、分類モデルにおける固有名詞以外の語につい
て、全語義間関連度の総和Ｒ（Ｃｉ）を演算する。そし
て制御部１１は、演算した語義間関連度の総和Ｒ（Ｃ
ｉ）をＲＡＭ１４に記憶させる。
【０１０７】ここで語義間関連度について説明してお
く。語義間関連度は、図１４の処理により文書処理装置
１が備える電子辞書に含まれる語義について予め算出
し、その結果を図１５のように保持しておけばよい。つ
まり、制御部１１が予め一度だけ図１４の処理を実行し
ておくようにすることで、図１３の自動分類処理の際に
用いることができる。
【０１０８】制御部１１が予め実行しておく図１５の処
理は次のようになる。まずステップＦ７１において、制
御部１１は、電子辞書内の語の語義の説明を用いて、こ
の辞書を使って語義のネットワークを作成する。すなわ
ち、辞書における各語義の説明とこの説明中に現れる語
義との参照関係から、語義のネットワークを作成する。
ネットワークの内部構造は、上述したようなタグ付けに
より記述される。文書処理装置の制御部１１は、たとえ
ばＲＡＭ１４に記憶された電子辞書について、語義とそ
の説明を順に読み出して、ネットワークを作成する。制
御部１４は、このようにして作成した語義のネットワー
クをＲＡＭ１４に記憶させる。
【０１０９】なお、上記ネットワークは、文書処理装置
の制御部１１が辞書を用いて作成する他に、受信部２１
にて外部から受信したリ、記録／再生部３１にて記録媒
体３２から再生したりすることにより得ることもでき
る。また上記電子辞書は、受信部２１にて外部から受信
したり、記録／再生部３１にて記録媒体３２から再生し
たりすることにより得ることができる。
【０１１０】ステップＦ７２においては、ステップＦ７
１で作成された語義のネットワーク上で、各語義のエレ
メントに対応する中心活性値の拡散処理をおこなう。こ
の活性拡散により、各語義に対応する中心活性値は、上
記辞書により与えられたタグ付けによる内部構造に応じ
て与えられる。中心活性値の拡散処理は、図７で説明し
た処理となる。
【０１１１】ステップＦ７３においては、ステップＦ７
１で作成された語義のネットワークを構成するある一つ
の語義Ｓｉを選択し、続くステップＦ７４においては、
この語義Ｓｉに対応する語彙エレメントＥｉの中心活性
値ｅｉの初期値を変化させ、このときの中心活性値の差
分△ｅｉを計算する。
【０１１２】さらにステップＦ７５においては、ステッ
プＦ７４におけるエレメントＥｉの中心活性値ｅｉの差
分△ｅｉに対応する、他の語義Ｓｊに対応するエレメン
トＥｊの中心活性値ｅｊの差分△ｅｊを求める。ステッ
プＦ７６においては、ステップＦ７５で求めた差分△ｅ
ｊを、ステップＦ７４で求めた△ｅｉで除した商△ｅｊ
／△ｅｉを、語義Ｓｉの語義ｓｊに対する語義間関連度
とする。
【０１１３】ステップＦ７７においては、一の語義Ｓｉ
と他の語義Ｓｊとのすべての対について語義間関連度の
演算が終了したか否かについて判断する。すべての語義
の対について語義間関連度の演算が終了していないとき
には、ステップＦ７３にもどり、語義間関連度の演算が
終了していない対について語義間関連度の演算を継続す
る。このようなステップＦ７３からステップＦ７７のル
ープにおいて、制御部１１は、必要な値をたとえばＲＡ
Ｍ１４から順に読み出して、上述したように語義間関連
度を計算する。制御部１１は、計算した語義間関連度を
たとえばＲＡＭ１４に順に記憶させる。そして、すべて
の語義の対について語義間関連度の演算が終了したとき
には、ステップＦ７７から、この一連の処理を終了す
る。
【０１１４】このような語義間関連度の算出は、或る１
つの語義の中心活性値を変化させた時に、それにつられ
て中心活性値が変化する語義を、関連度が高いものとす
る処理といえる。つまりステップＦ７４で或る語義の中
心活性値を変化させると、それに応じて関連する（リン
クされた）語義の中心活性値が変化するものとなるた
め、その変化の度合いを調べれば、或る語義に対する他
の各語義の関連度がわかるものである。（或るエレメン
トＥｉの中心活性値は、上述した活性拡散の説明におい
て述べたように、リンク先のエレメントの中心活性値と
端点活性値が反映されて、そのエレメントＥｉ端点活性
値が更新されたうえで、そのエレメントＥｉの端点活性
値と現在の中心活性値の和から求められるため、リンク
先との関連度が大きいほど中心活性値の変化量は大きく
なる）このような処理を各語義から他の全ての語義に対
して行っていくことで、すべての語義の対（組み合わ
せ）について、関連度を算出することができる。
【０１１５】このように計算された語義間関連度は、図
１５に示すように、それぞれの語義と語義の間に定義さ
れる。この図１５の表においては、語義間関連度は０か
ら１までの値をとるように正規化されている。そしてこ
の表においては一例として“コンピュータ”、“テレ
ビ”、“ＶＴＲ”の間の相互の語義間関連度が示されて
いる。“コンピュータ”と“テレビ”の語義間関連度は
０．５５、“コンピュータ” と“ＶＴＲ”の語義間関
連度は０．２５、“テレビ”と“ＶＴＲ”の語義間関連
度は０．６０である。
【０１１６】以上のように予め算出されていた語義間関
連度を用いて図１３のステップＦ６２の処理が行われた
ら、続いて制御部１１は、ステップＦ６３として、カテ
ゴリＣｉに対する文書の文書分類間関連度Ｒｅｌ（Ｃ
ｉ）を Ｒｅｌ（Ｃｉ）＝ｍ１Ｐ（Ｃｉ）＋ｎ１Ｒ（Ｃｉ） として算出する。ここで、係数ｍ１、ｎ１は定数で、そ
れぞれの値の文書分類間関連度への寄与の度合いを表す
ものである。制御部１１は、ステップＦ６１で算出した
共通集合の数Ｐ（Ｃｉ）およびステップＦ６２で算出し
た語義間関連度の総和Ｒ（Ｃｉ）を用いて、上記式の演
算を行い、文書分類間関連度Ｒｅｌ（Ｃｉ）を算出す
る。制御部１１は、このように算出した文書分類間関連
度Ｒｅｌ（Ｃｉ）をＲＡＭ１４に記憶させる。
【０１１７】なお、これらの係数ｍ１、ｎ１の値として
は、たとえばｍ１＝１０、ｎ１＝１とすることができ
る。また係数ｍ１、ｎ１の値は、統計的手法を使って推
定することもできる。すなわち、制御部１１は、複数の
係数ｍおよびｎの対について文書分類間関連度Ｒｅｌ
（Ｃｉ）が与えられることで、上記係数を最適化により
求めることができる。
【０１１８】ステップＦ６４においては、制御部１１
は、カテゴリＣｉに対する文書分類間関連度Ｒｅｌ（Ｃ
ｉ）が最大で、その文書分類間関連度Ｒｅｌ（Ｃｉ）の
値がある閾値を越えているとき、そのカテゴリＣｉに文
書を分類する。すなわち制御部１１は、複数のカテゴリ
に対してそれぞれ文書分類間関連度を作成し、最大の文
書分類間関連度が閣値を越えているときには、文書を最
大の文書分類間関連度を有する上記カテゴリＣｉに分類
する。これにより文書が自動的に所要のカテゴリに分類
されることになる。なお最大の文書分類間関連度が閾値
を越えていないときには、文書の分類はおこなわない。
【０１１９】以上のような図１３の処理として、図１２
のステップＦ２３の自動分類が行われたら、ステップＦ
２４、Ｆ２５で、それに応じて分類モデルを更新し、登
録することで、一連の自動分類が完了する。即ち文書処
理装置１に受信された文書データは、自動的に分類され
たことになり、ユーザーは例えば図９の分類ウインドウ
２０１において、所要の文書分類エリアにおいて、受信
された文書データを確認できることになる。
【０１２０】５．読み上げ処理 続いて、文書データについての読み上げを行う処理につ
いて述べる。上述したようにユーザーは、文書を選択し
て図１０のような閲覧ウインドウ３０１を開くことによ
り、文書の本文を閲覧することができる。例えば上述し
た手動分類処理におけるステップＦ１３の時点や、その
他任意の時点において、図９で説明した分類ウインドウ
２０１から、閲覧ウインドウ３０１を開くことができ
る。
【０１２１】例えば分類ウインドウ２０１において或る
文書を選択した状態でブラウザボタン２０２ｂをクリッ
クすることで、後述する図２６のように、文書表示部３
０３に選択された文書の本文が表示された閲覧ウインド
ウ３０１が開かれる。なお文書表示部３０３に文書全文
が表示できないときには、その文書の一部が表示され
る。また要約文が作成されていない時点では、図２６の
ように要約表示部３０４は空白とされる。要約文の作成
及び表示動作については後述する。
【０１２２】このように文書処理装置１は、タグ付けさ
れた文書を受信すると、その本文や詳しくは後述する要
約文を表示してユーザーに提示できるが、さらに受信し
た文書を音声でユーザーに提示することもできる。即ち
ＣＰＵ１３により、ＲＯＭ１５やＨＤＤ３４に記録され
ている電子文書処理プログラムのうちの音声読み上げプ
ログラムを起動することで、図１６に示すような一連の
工程を経ることによって、文書の読み上げを行うことが
できる。まずここでは、簡略化した各工程の説明を行
い、その後、具体的な文書例を用いて、各工程の説明を
詳細に行う。
【０１２３】制御部１１の処理として、図１６のステッ
プＦ１０１は、図４のステップＦ１１（又は図１２のス
テップＦ２１）と同様の文書受信／記憶処理である。上
述ののように、受信した文書（タグ付文書）については
手動又は自動での分類処理が行われるが、それと同様
に、受信した文書について読み上げ処理も実行可能とい
う意味で図１６にステップＦ１０１を記したものであ
る。ここでは特に処理手順として、分類処理と読み上げ
処理の順序その他を規定するものではない。
【０１２４】なお、文書読み上げ処理の対象となる文書
（受信文書）には、後述するように、音声合成を行うた
めに必要なタグが付与されていることが必要である。但
し、文書処理装置１は、タグ付けされた文章を受信した
うえで、その文書に音声合成を行うために必要なタグを
新たに付与して文書を作成することもできる。以下で
は、このようにして受信又は作成されて用意されたタグ
付き文書を、タグファイルと記す。
【０１２５】文書処理装置１の文書読み上げ処理として
は続いてステップＦ１０２において、ＣＰＵ１３の制御
のもとに、タグファイルに基づいて読み上げ用ファイル
を生成する。この読み上げ用ファイルは、後述するよう
に、タグファイル中のタグから、読み上げのための属性
情報を導出し、この属性情報を埋め込むことにより生成
される。
【０１２６】続いてステップＦ１０３において文書処理
装置１は、ＣＰＵ１３の制御のもとに、読み上げ用ファ
イルを用いて、音声合成エンジンに適した処理を行う。
なお、この音声合成エンジンは、ハードウェアで構成し
てもよいし、ソフトウェアで実現するようにしてもよ
い。音声合成エンジンをソフトウェアで実現する場合に
は、そのアプリケーションプログラムは、ＲＯＭ１５や
ＨＤＤ３４等に予め記憶されている。本例の文書処理装
置１において、読み上げ処理や、後述する要約作成／表
示処理、ビデオ出力処理などを実行するために形成され
る機能ブロック構成については、図４７を用いて最後に
まとめて説明するが、上記音声合成エンジンは、その図
４７における音声合成エンジン６０１に相当する。
【０１２７】続いて文書処理装置１はステップＦ１０４
において、ユーザが後述するユーザインターフェースを
用いて行う操作に応じて処理を行う。文書処理装置１
は、このような処理を行うことによって、与えられた文
書を読み上げることができる。これらの各工程につい
て、以下詳細に説明する。
【０１２８】まず、ステップＦ１０１におけるタグ付け
された文書の受信又は作成について説明する。文書処理
装置１は、例えば通信部２１から文書（音声合成を行う
ために必要なタグが既に付与されている文書）を受信す
る。または、文書処理装置１は、タグ付けされた文書を
受信し、その文書に音声合成を行うために必要なタグを
新たに付与して文書を作成する。
【０１２９】説明上の例として、以下のような、日本
語、及び英語の文書にタグ付けがなされたタグファイル
が、受信又は作成されものとする。
【０１３０】まずタグファイルの元となる日本語文書
は、次のような文書とする。「［素敵にエイジング］／
８ガン転移、抑えられる！？がんはこの十数年、わが国
の死因第一位を占めている。その死亡率は年齢が進むと
ともに増加傾向にある。高齢者の健康を考えるとき、が
んの問題を避けて通れない。がんを特徴づけるのは、細
胞増殖と転移である。人間の細胞には、自動車でいえば
アクセルに当たり、がんをどんどん増殖する「がん遺伝
子」と、ブレーキ役の「がん抑制遺伝子」がある。双方
のバランスが取れていれば問題はない。正常な調節機能
が失われ、細胞内でブレーキが利かない変異が起こる
と、がんの増殖が始まる。高齢者の場合、長い年月の間
にこの変異が蓄積し、がん化の条件を備えた細胞の割合
が増え、がん多発につながるわけだ。ところで、もう一
つの特徴、転移という性質がなければ、がんはそれほど
恐れる必要はない。切除するだけで、完治が可能になる
からである。転移を抑制することの重要性がここにあ
る。この転移、がん細胞が増えるだけでは発生しない。
がん細胞が細胞と細胞の間にある蛋白（たんぱく）質な
どを溶かし、自分の進む道をつくって、血管やリンパ管
に入り込む。循環しながら新たな“住み家”を探して潜
り込む、といった複雑な動きをすることが、近年解明さ
れつつある。」
【０１３１】タグファイルの元となる英語の文書の例は
次のようなものとする「During its centennial year,
The Wall Street Journal will report events of the
past century that stand as milestones of American
business history. THREE COMPUTERS THAT CHANGED the
face of personal computing were Iaunched in 1977.
That year the Apple II, Commodore Pet and Tendy T
RS came to market. The computers were crude by tod
ay's standerds. Apple ll owners, for example,had t
o use their television sets as screens and storedd
ata on audiocassettes.」
【０１３２】文書処理装置１は、このような日本語又は
英語の文書についてタグが付された文書を受信すると、
分類処理や、後述する図２６、図２７のようにその本文
を表示したり、要約文を作成して表示することができ
る。
【０１３３】ここで上記の日本語又は英語の文書は、そ
れそれ、図１８又は図１９に示すようなタグファイルと
して構成されている。日本語文書のタグファイルとして
は、図１８（ａ）に見出しの部分である「〔素敵にエイ
ジング〕／８ガン転移、抑えられる！？」を抜粋したも
のを示し、図１８（ｂ）に、文書中の最後の段落である
「この転移、がん細胞が・・・・近年解明されつつあ
る。」を抜粋したものを示している。残りの段落につい
ては省略してある。なお、実際のタグファイルは、見出
し部分から最後の段落までが１つのファイルとして構成
されている。
【０１３４】図１８（ａ）に示す見出し部分において、
＜見出し＞というタグは、この部分が見出しであること
を示している。この図１８（ａ）（ｂ）に示すタグファ
イルは基本的には、図２を用いて文書データ構造を説明
した際に用いたタグファイル例と同様にタグが付されて
いるものであり、上述した各タグについての細かい説明
は省略するが、所要各所に、音声合成を行うために必要
なタグが付与されているものである。
【０１３５】音声合成を行うために必要なタグとして
は、例えばまず、図中「例１」の部分に示すように、
「蛋白（たんぱく）」のように元の文書に読み仮名を示
す情報が与えられているときに付与されるものがある。
すなわち、この場合では、「たんぱくたんぱく」と重複
して読み上げてしまうことを防ぐために、発音＝“nul
l”という読み属性情報が記述されており、「（たんぱ
く）」の部分読み上げを禁止するタグが付与されてい
る。また、音声合成を行うために必要なタグとしては、
図中「例２」「例３」に示すように、「リンパ管」のよ
うな専門用語や「住み家」のように、誤った読み上げを
行う可能性のある難訓部分に付与されるものがある。す
なわち、この場合では、「りんぱくだ」や「すみいえ」
と読み上げてしまうことを防ぐために、それぞれ、発音
＝“りんぱかん”、発音＝“すみか”という読み仮名を
示す読み属性情報が記述されている。
【０１３６】一方、図１９に示すタグファイルにおける
音声合成を行うために必要なタグとしては、図中「例
４」として示す部分のように、「ＩＩ」というローマ数
字に対して、発音＝“two”という読み属性情報が記述
されている。これは、「ＩＩ」を「トゥ（two）」と読
み上げさせたい場合に、「セカンド（second）」と読み
上げてしまうことを防ぐために記述されているものであ
る。
【０１３７】また、例えば文書内に引用文が含まれてい
る場合、このようなタグファイルには、図示しないが、
その文が引用文であることを示すタグが付与される。さ
らに、タグファイルには、例えば文書内に疑問文がある
場合、図示しないが、その文が疑問文であることを示す
タグが付与される。
【０１３８】文書処理装置１は、先に図１６に示したス
テップＦ１０１において、例えば以上の例のように、音
声合成を行うために必要なタグが付与された文書を受信
又は作成するものとなる。
【０１３９】つぎに、図１６のステップＦ１０２におけ
る読み上げ用ファイルの生成について説明する。文書処
理装置１は、タグファイル中のタグから、読み上げめた
めの属性情報を導出し、この属性情報を埋め込むことに
よって読み上げ用ファイルを生成する。具体的には、文
書処理装置１は、文書の段落、文、句の先頭を示すタグ
を見つけ出し、これらのタグに対応して読み上げのため
の属性情報を埋め込む。また文書処理装置は、文書の要
約文を作成した場合には、その要約文に含まれる部分の
先頭を文書から見つけ出し、読み上げの際に音量を増大
させる属性情報を埋め込み、要約文に含まれる部分であ
ることを強調することなどもできる。
【０１４０】文書処理装置１は、図１８又は図１９に示
したタグファイルから図２０又は図２１に示すような読
み上げ用ファイルを生成する。なお、図２０（ａ）
（ｂ）は図１８（ａ）（ｂ）に示した部分に対応するも
のである。実際の読み上げ用ファイルは、上述した見出
し部分から最後の段落までが１つのファイルとして構成
されていることは勿論である。
【０１４１】図２０に示す読み上げ用ファイルには、文
書の先頭に対応してCom=Lang***という属性情報が埋め
込まれている。この属性情報は、文書を記述している言
語を示す。ここでは、Com=Lang=JPNという属性情報であ
り、文書を記述している言語が日本語であることを示し
ている。文書処理装置においては、この属性情報を参照
することで、文書毎に言語に応じた適切な音声合成エン
ジンを選択することができる。
【０１４２】また、この読み上げ用ファイルには各所
に、Com=begin_p、Com=begin_s、Com=begin_phという属
性情報が埋め込まれている。これらの属性情報は、それ
ぞれ、文書の段落、文及び句の先頭を示す。文書処理装
置１は、上述したタグファイル中のタグに基づいて、こ
れらの段落、文及び句の先頭を識別する。なお、読み上
げ用ファイルにおいて、例えば上述したタグファイル中
の＜形容動詞句＞＜名詞句＞のように、同じレベルの統
語構造を表すタグが連続して表れる部分に対しては、そ
れぞれに対応する数のCom=begin_phが埋め込まれずに、
まとめられて１つのCom=begin_phが埋め込まれる。
【０１４３】さらに、読み上げ用ファイルには、Com=be
gin_p、Com=begin_s、及びCom=begin_phに対応して、そ
れぞれ、Pau=500、Pau=100及びPau=50という属性情報が
埋め込まれている。これらの属性情報は、それぞれ、読
み上げの際に５００ミリ秒、１００ミリ秒及び５０ミリ
秒の休止期間を設けることを示す。すなわち文書処理装
置１が、文章の段落、文及び句の先頭こおいて、それぞ
れ、５００ミリ秒、１００ミリ秒及び５０ミリ秒の休止
期間を設けて文書を音声合成エンジンにより読み上げる
ようにするための情報である。なお、これらの属性情報
は、Com=begin_p、Com=begin_s及びCom=begin_phに対応
して埋め込まれる。そのため、例えばタグファイル中の
＜副詞句＞＜名詞句＞のように、同じレベルの統語構造
を表すタグが連続して表れる部分は、１つの句として捉
えられ、それぞれに対応する数のPau=50が埋め込まれず
に、まとめられて１つのPau=50が埋め込まれる。また、
例えばタグファイル中の＜段落＞＜文＞＜名詞句＞のよ
うに、異なるレベルの統語構造を表すタグが連続して表
れる部分については、それぞれに対応するPau=***が埋
め込まれる。そのため文書処理装置１は、このような部
分を読み上げる際には、例えば文書の段落、文及び句の
それぞれの休止期間を加算して得られる６５０ミリ秒の
休止期間を設けて読み上げるようにする。このように、
文書処理装置１は、段落、文及び句に対応した休止期間
を設けることで、段落、文及び句の切れ目を考慮した違
和感のない読み上げを行うことができる。なお、この休
止期間は、文書の段落、文及び句の先頭において、それ
ぞれ、６００ミリ秒、１００ミリ秒及び５０ミリ秒であ
る必要はなく、適宜変更することができる。
【０１４４】さらにまた、読み上げ用ファイルにおいて
は、タグファイル中で記述されている発音＝“null”と
いう読み属性情報に対応して、「（たんぱく）」が除か
れているとともに、発音＝“りんぱかん”、発音＝“す
みか”という読み属性情報に対応して、「リンパ管」、
「住み家」が、それぞれ、「りんぱかん」、「すみか」
に置換されている。文書処理装置１は、このような読み
属性情報を埋め込むことで、音声合成エンジンが参照す
る辞書の不備による読み誤りをすることがないようにし
ている。
【０１４５】また、読み上げ用ファイルには、文書内に
含まれた引用文であることを示すタグに基づいて、この
引用文のみを別の音声合成エンジンを用いるように指定
するための属性情報が埋め込まれてもよい。さらに、読
み上げ用ファイルには、疑問文であることを示すタグに
基づいて、その文の語尾のイントネーションを上げるた
めの属性情報が埋め込まれるようにしてもよい。さらに
また、読み上げ用ファイルには、必要に応じて、いわゆ
る「である調」の文体を「ですます調」の文体に変換す
るための属性情報を埋め込むこともできる。なお、この
場合、文書処理装置１は、このような属性情報を読み上
げ用ファイルに埋め込むのではなく、「である調」の文
体を「ですます調」の文体に変換して音声読み上げ用フ
ァイルを生成するようにしてもよい。
【０１４６】一方、図２１に示す読み上げ用ファイルに
は、文書の先頭に対応してCom=Lang=ENGという属性情報
が埋め込まれており、文書を記述している言語が英語で
あることを示している。また、読み上げ用ファイルに
は、Com=Vol=***という属性情報が埋め込まれている。
この属性情報は、読み上げの時の音量を示す。例えば、
Com=Vol=0は、文書処理装置のデフォルトの音量で読み
上げることを示している。また、Com=Vol=80は、デフォ
ルトの音量を８０％増量した音量で読み上げることを示
している。任意の、Com=Vol=***は、次のCom=Vol=***ま
で有効である。さらに、読み上げ用ファイルにおいて
は、タグファイル中で記述されている発音＝“two”と
いう読み属性情報に対応して、「ＩＩ」が「two」に置
換されている。
【０１４７】文書処理装置１は、図１７に示す一連の工
程を経ることによって、このような読み上げ用ファイル
を生成する。まず文書処理装置１は、ステップＦ２０１
において、ＣＰＵ１３によって、受信又は作成したタグ
ファイルを解析する。ここで文書処理装置１は、文書を
記述している言語を判別するとともに、文書の段落、文
及び句の先頭や、読み属性情報をタグに基づいて探し出
す。続いて文書処理装置１は、ステップＦ２０２におい
て、ＣＰＵ１３によって、文書を記述している言語に応
じて文書の先頭にCom=Lang=***という属性情報を埋め込
む。
【０１４８】次に文書処理装置１は、ステップＦ２０３
において、ＣＰＵ１３によって、文書の段落、文及び句
の先頭を読み上げ用ファイルにおける属性情報に置換す
る。すなわち文書処理装置１は、タグファイル中の＜段
落＞、＜文＞及び＜＊＊＊句＞を、それぞれ、Com=begi
n_p、Com=begin_s及びCom=begin_phに置換する。
【０１４９】さらに文書処理装置１は、ステップＦ２０
４において、ＣＰＵ１３によって、同じレベルの統語構
造が表れて同じCom=begin_***が重複しているものを、
１つのCom=begin_***にまとめる。続いて文書処理装置
１は、ステップＦ２０５において、ＣＰＵ１３によっ
て、Com=begin_***に対応してPau=***を埋め込む。すな
わち文書処理装置１は、Com=begin_pの前にPau=500を埋
め込み、Com=begin_sの前にPau=100を埋め込み、Com=be
gin_phの前にPau=50を埋め込む。そして文書処理装置１
は、ステップＦ２０６において、ＣＰＵ１３によって、
読み属性情報に基づいて、正しい読みに置換する。すな
わち文書処理装置１は、発音＝“null”という読み属性
情報に基づいて、「（たんぱく）」を除去するととも
に、発音＝“りんぱかん”、発音＝“すみか”という読
み属性情報に基づいて、「リンパ管」、「住み家」を、
それぞれ、「りんぱかん」、「すみか」に置換する。
【０１５０】文書処理装置１は、先に図１６に示したス
テップＦ１０２において、この図１７に示す処理を行う
ことによって、読み上げ用ファイルを自動的に生成す
る。文書処理装置１は、生成した読み上げ用ファイルを
ＲＡＭ１４に記憶させる。
【０１５１】つぎに、図１６のステップＦ１０３におけ
る読み上げ用ファイルを用いた処理について説明する。
文書処理装置１は、読み上げ用ファイルを用いて、ＲＯ
Ｍ１５やＨＤＤ３４等に予め記憶されている音声合成エ
ンジンに適した処理をＣＰＵ１３の制御のもとに行う。
具体的には、文書処理装置１は、読み上げ用ファイルに
埋め込まれているCom=Lang=***という属性情報に基づい
て、使用する音声合成エンジンを選択する。音声合成エ
ンジンは、言語や男声／女声等の種類に応じて識別子が
付されており、その情報が例えば初期設定ファイルとし
てＨＤＤ３４に記録されている。文書処理装置１は、初
期設定ファイルを参照し、言語に対応した識別子の音声
合成エンジンを選択する。 ．
【０１５２】また文書処理装置１は、読み上げ用ファイ
ルに埋め込まれているCom=begin_***を音声合成エンジ
ンに適した形式に変換する。例えば文書処理装置１は、
Com=begin_phをMark=10000のように１００００番台の番
号でマーク付けする。またCom=begin_sをMark=1000のよ
うに１０００番台の番号でマーク付けし、Com=begin_p
をMark=100のように１００番台の番号でマーク付けす
る。これは、＜句＞、＜文＞、＜段落＞の先頭が、それ
ぞれ１００００番台、１０００番台、１００番台の番号
で示されることを意味し、このマークによって＜句＞、
＜文＞、＜段落＞の先頭が識別できるようになる。さら
に、読み上げ用ファイルにおいては、音量の属性情報が
Voll=***のようにデフォルトの音量の百分率で表されて
いることから、文書処理装置１は、この属性情報に基づ
いて、百分率の情報を絶対値の情報に変換して求める。
【０１５３】文書処理装置１は、先に図１６に示したス
テップＦ１０３において、このような読み上げ用ファイ
ルを用いた処理を行うことによって、読み上げ用ファイ
ルを音声合成エンジンが文書を読み上げることが可能な
形式に変換するものとなる。
【０１５４】つぎに、図１６のステップＦ１０４におけ
るユーザインターフェースを用いた操作について説明す
る。文書処理装置１は、ユーザが例えば入力部２０のマ
ウス等を操作して、先に図１０に示した読み上げボタン
３０６ｃをクリックすることによって、音声合成エンジ
ンを起動する。そして文書処理装置１は、図２２に示す
ようなユーザインターフェース用の読み上げウインドウ
４０１を表示部３０に表示する。
【０１５５】この読み上げウインドウ４０１は、図示す
るように、文書を読み上げさせるための再生ボタン４２
０と、読み上げを停止させるための停止ボタン４２１
と、読み上げを一時停止させるための一時停止ボタン４
２２とを有する。また、この読み上げウインドウ４０１
は、文単位で頭出し、早戻し及び早送りさせるための頭
出しボタン４１１、早戻しボタン４１２及び早送りボタ
ン４１３と、段落単位で頭出し、早戻し及び早送りさせ
るための頭出しボタン４１４、早戻しボタン４１５及び
早送りボタン４１６と、句単位で頭出し、早戻し及び早
送りさせるための頭出しボタン４１７、早戻しボタン４
１８及び早送りボタン４１９とを有する。
【０１５６】さらに、読み上げウインドウ４０１は、読
み上げる対象を全文とするか、上述したようにして作成
された要約文とするかを選択するための選択スイッチ４
２３，４２４を有する。また、読み上げ時に画像を表示
する画像表示エリア４０３が設定され、読み上げている
人のイメージを表示したり、テロップ表示エリア４０２
が設けられ、読み上げ音声に対応して文字がテロップ表
示できるようにされている。
【０１５７】なお、ここでは図示しないが、例えば、音
声を増減させるためのボタンや読み上げの速さを増減さ
せるためのボタン、男声／女声等の声を変化させるため
のボタン等を有していてもよい。
【０１５８】文書処理装置１は、ユーザがこれらの各種
ボタン／スイッチを例えば入力部２０のマウス等を操作
してクリック／選択することに応じて、音声合成エンジ
ンによる読み上げ動作を行う。例えば、文書処理装置１
は、ユーザが再生ボタン４２０をクリックすることによ
って、文書の読み上げを開始する。具体的には制御部１
１は音声合成処理により生成した音声信号を音声出力部
３３に供給し、音声として出力する。また文書処理装置
１は、停止ボタン４２１、一時停止ボタン４２２のクリ
ックにおいて、読み上げ処理の停止や一時停止を行う。
【０１５９】また、読み上げの途中でユーザが頭出しボ
タン４１１を押すことによって、現在読み上げている文
の先頭にジャンプして再び読み上げる。頭出しボタン４
１４、４１７についても同様に、それぞれ現在読み上げ
ている段落や句の先頭にジャンプして再び読み上げを行
う。制御部１１は、この頭出しボタン４１１、４１４、
４１７の操作に関しては、上記したマーク付により、ジ
ャンプ先を認識するものとなる。即ち、文に関する頭出
しボタン４１１が操作された際には、制御部１１は、現
在読み上げている文の途中位置から文を遡っていき、１
０００番台のマークをサーチする。そして１０００番台
のマークが検出されたら、そこから読み上げを再開する
ものとなる。段落や句の場合は、それぞれ１００番台、
１００００番台のマークを探して読み上げを再開するも
のとなる。この様な処理によって、例えば文書中でユー
ザが所望の部分を繰り返し再生させたいといった要求に
応えることができる。
【０１６０】文書処理装置１は、図１６のステップＦ１
０４において、ユーザがこのような読み上げウインドウ
４０１でのユーザインターフェースを用いた操作を行う
ことに応じて、音声合成エンジンにより文書を読み上げ
る。このようにして文書処理装置１は、所望の文書を音
声合成エンジンにより違和感なく読み上げることができ
る。
【０１６１】ところで読み上げる対象の文書としては文
書データの本文でもよいし、後述するように生成される
要約文であってもよい。本文か要約文かは、選択スイッ
チ４２３，４２４のクリックにより選択されるが、いず
れにしても、本文又は要約文としてのタグファイルにつ
いて、図１６のステップＦ１０２，Ｆ１０３の処理が行
われることで、音声合成エンジンによる文書読み上げが
可能となる。
【０１６２】なお本例では、受信又は作成したタグファ
イルから読み上げ用ファイルを生成するものとしたが、
このような読み上げ用ファイルを生成せずに、タグファ
イルに基づいて直接読み上げを行うようにしてもよい。
この場合、文書処理装置１は、タグファイルを受信又は
作成した後、音声合成エンジンを用い、タグファイルに
付与されている段落、文及び句を示すタグに基づいて、
段落、文及び句の先頭に所定の休止期間を設けて読み上
げる。このようにすることによって、文書処理装置１
は、音声読み上げ用ファイルを生成することなく、タグ
ファイルに基づいて直接読み上げることができる。
【０１６３】６．要約作成／表示処理 続いて、文書データについての要約文を作成する処理に
ついて述べる。上述したようにユーザーは、文書を選択
して図１０のような閲覧ウインドウ３０１を開くことに
より、文書の本文を閲覧することができる。そして閲覧
ウインドウ３０１においては、選択された文書の本文及
び要約文が表示される。但し、また要約文が作成されて
いない時点では、図２６のように要約表示部３０４は空
白とされる。
【０１６４】この閲覧ウインドウ３０１において要約作
成ボタン３０６ａがクリックされると、文書表示部３０
３に表示されている文書についての要約文が作成され、
図２７に示すように要約表示部３０４に表示される。つ
まり制御部１１は、ソフトウエアもしくはハードウエア
で構成される要約作成エンジン（図４７で後述）を起動
させることにより、ユーザーの要約作成操作に応じて、
以下説明するような要約文作成処理を行い、作成後、そ
れを表示する制御を行うものとなる。文書から要約を作
成する処理は、文書のタグ付けによる内部構造に基づい
て実行される。
【０１６５】なお要約文は、通常は、要約表示部３０４
のサイズに応じて生成される。そして本文表示部３０３
と要約表示部３０４の面積は、ユーザーが仕切枠３１２
を移動させることで変化させることができる。つまり要
約文は、要約作成が指示された時点での要約表示部３０
４のサイズに応じたサイズ（文書長）で作成されること
になる。例えば図２６では要約表示部３０４は非常に狭
いものとなっているが、ユーザーが仕切枠３１２を移動
させて要約表示部３０４を広くした上で、要約作成を指
示することで、例えば図２７のように広げられた要約表
示部３０４に、そのエリアサイズに合った文書長の要約
文が作成され、表示されるものとなる。
【０１６６】但し、例えば図２６のように要約表示部３
０４が非常に狭い場合に、そのサイズに応じた要約文を
作成するとすると、その要約文は不十分な内容となって
しまうことが多い。つまり十分な文書長で要約文を作成
できないため、実質的に要約としての機能を果たさない
文章となってしまう。そこで本例では、要約表示部３０
４としてのウインドウサイズ（ウインドウ内に表示可能
な文書長）が所定値以下、例えば図２６のような画面上
での行数でいうと１〜２行程度未満の場合などには、要
約表示部３０４のサイズを越える文書長の要約文を作成
するようにし、ソフトウエアもしくはハードウエアで構
成されるテロップ作成エンジン（図４７で後述）によ
り、それをテロップ化して表示するようにしている。
【０１６７】以下、このようなテロップ表示を含む、本
例の要約文の作成及び表示動作について説明していく。
【０１６８】閲覧ウインドウ３０１上で要約作成ボタン
３０６ａがクリックされることにより、制御部１１（要
約作成エンジン）によって図２３の要約作成処理が開始
される。なお図２３の要約作成処理が終了すると、続い
て図２４の要約文表示処理が実行され、また場合によっ
ては、その要約文表示処理中で図２５のテロップ表示処
理が行われるものとなる。
【０１６９】図２３の要約作成処理としては、まずステ
ップＦ８１として制御部１１は活性拡散を行う。本例に
おいては、活性拡散により得られた中心活性値を重要度
として採用することにより、文書の要約を行うものであ
る。すなわち、タグ付けによる内部構造を与えられた文
書においては、活性拡散を行うことにより、各エレメン
トにタグ付けによる内部構造に応じた中心活性値を付与
することができる。ステップＦ８１で行う活性拡散処理
は、図６〜図８で説明したものと同様の処理となるが、
上述したように活性拡散は、中心活性値の高いエレメン
トと関わりのあるエレメントにも高い中心活性値を与え
るような処理である。すなわち、活性拡散は、照応（共
参照）表現とその先行詞の間で中心活性値が等しくな
り、それ以外では中心活性値が減衰するような中心活性
値についての演算である。この中心活性値は、タグ付け
による内部構造に応じて決定されるので、タグ付けによ
る内部構造を考慮した文書の分析に利用することができ
る。
【０１７０】次にステップＦ８２で、その時点の要約表
示部３０４のサイズｗｓｙを確認し、要約表示部サイズ
ｗｓｙが予め設定されている所定サイズｗｓｔｈ以上で
あるか否かを確認する。この所定サイズｗｓｔｈとは、
通常、要約文としては十分な文書長（文字数）を表示で
きるウインドウサイズとして設定されているものであ
る。所定サイズｗｓｔｈとしての具体的な値は、システ
ム設計上、適切な値が決められるものとなる。
【０１７１】まず、要約表示部サイズｗｓｙが予め設定
されている所定サイズｗｓｔｈ以上であった場合につい
て説明していく。これは要約表示部サイズｗｓｙに応じ
た要約文が作成される場合の処理となる。この場合、制
御部１１の処理は、ステップＦ８３に進み、制御部１１
は、その時点で表示部３０に表示されている閲覧ウィン
ドウ３０１の要約表示部３０４のサイズｗｓｙ（具体的
にはこの要約表示部３０４に表示可能な最大文字数）を
変数（最大文字数）ｗｓと設定する。また制御部１１
は、要約の文字列（要約文を保持する内部レジスタ）ｓ
を初期化して初期値ｓ（０）＝””と設定する。制御部
１１は、このように設定した、最大文字数ｗｓおよび文
字列ｓの初期値ｓ（０）を、ＲＡＭ１４に記録する。
【０１７２】次にステップＦ８５に進み、制御部１１
は、文の骨格の抽出処理をカウントするカウンタのカウ
ント値ｉを「１」に設定する。そしてステップＦ８６で
制御部１１は、カウンタのカウント値ｉに基づいて、文
章からｉ番目に平均中心活性値の高い文の骨格を抽出す
る。平均中心活性値とは、一つの文を構成する各エレメ
ントの中心活性値を平均したものである。制御部１１
は、たとえばＲＡＭ１４に記録した文字列ｓ（ｉ−１）
を読み出し、この文字列ｓ（ｉ−１）に対して、抽出し
た文の骨格の文字列を加えて、Ｓ（ｉ）とする。そして
制御部１１は、このようにして得た文字列ｓ（ｉ）をＲ
ＡＭ１４に記録する。初回は、文字列ｓ（ｉ−１）は初
期値ｓ（０）であるので、今回抽出した文の骨格が文字
列Ｓ（ｉ）としてＲＡＭ１４に記憶されることになる。
また以降においてステップＦ８４の処理が行われる場合
は、抽出された文の骨格が文字列Ｓ（ｉ）に、それまで
の文字列Ｓ（ｉ）（つまりその時点では文字列Ｓ（ｉ−
１））に追加されていくものとなる。また同時に、制御
部１１はこのステップＦ８４において、上記文の骨格に
含まれないエレメントの中心活性値順のリストＬ（ｉ）
を作成し、このリストＬ（ｉ）をＲＡＭ１４に記録す
る。
【０１７３】すなわち、このステップＦ８６において
は、要約のアルゴリズムは、活性拡散の結果を用いて、
平均中心活性値の大きい順に文を選択し、選択された文
の骨格の抽出する。文の骨格は、文から抽出した必須要
素により構成される。必須要素になりうるのは、エレメ
ントの主辞（head）と、主語（subject）、目的語（obj
ect）、間接目的語（indirect object）、所有者（poss
essor）、原因（cause）、条件（condition）または比
較（comparison）の関係属性を有する要素と、等位構造
が必須要素のときにはそれに直接含まれるエレメントと
が必須要素を構成するものである。そして、文の必須要
素をつなげて文の骨格を生成し、要約に加える。
【０１７４】ステップＦ８７では制御部１１は、文字列
ｓ（ｉ）の長さが、閲覧ウィンドウ３０１の要約表示部
１０４の最大文字数ｗｓより大きいか否かを判断する。
このステップＦ８７は、要約表示部３０４のサイズに応
じた要約文を作成するための判断処理となる。
【０１７５】制御部１１は、文字列ｓ（ｉ）の長さが最
大文字数ｗｓに達していないときは、処理をステップＦ
８８に進める。ステップＦ８８では制御部１１は、文書
中で、（ｉ＋１）番目に平均中心活性値が高い文のエレ
メントの中心活性値と、上記ステップＦ８６で作成した
リストＬ（ｉ）の最も中心活性値が高いエレメントの中
心活性値を比較する。つまり、上記ステップＦ８６にお
いて要約として採用された文の次に平均中心活性値が高
い文（即ち次に要約文に付加する候補となる文）と、ス
テップＦ８６において要約として採用された文の中で骨
格ではないとして要約からは排除されたエレメントの中
心活性値を比較する。
【０１７６】このステップＦ８８の処理は、要約文とし
ての文字列に次に加える部位を、その直前のステップＦ
８６で採用した文において骨格として採用されなかった
ものから選ぶか、或いは他の文から選ぶかを判断する処
理となる。
【０１７７】（ｉ＋１）番目に平均中心活性値が高い文
におけるエレメントの中心活性値よりも、リストＬ
（ｉ）における最も高い中心活性値の方が、中心活性値
が高い値であった場合は、要約文としての文字列に次に
加える部位を、その直前のステップＦ８６で採用した文
において骨格として採用されなかったものから選ぶよう
にする。このため制御部１１の処理はステップＦ９０に
進み、リストＬ（ｉ）における最も中心活性値が高いエ
レメントを、その時点で記憶されている文字列Ｓ（ｉ）
に加え、文字列ＳＳ（ｉ）とする。またこのとき、文字
列ＳＳ（ｉ）に加えたエレメントをリストＬ（ｉ）から
削除する。そして、ステップＦ９１において、文字列Ｓ
Ｓ（ｉ）が、最大文字数ｗｓより大きいか否かを判断
し、大きくなければステップＦ８８に戻る。
【０１７８】ステップＦ８８において、（ｉ＋１）番目
に平均中心活性値が高い文のエレメントとして、リスト
Ｌ（ｉ）における最も高い中心活性値よりも中心活性値
が高いエレメントがあった場合は、要約文としての文字
列に次に加える部位を、その直前のステップＦ８６で採
用した文とは別の文から選ぶこととしてステップＦ８９
でカウント値ｉをインクリメントしてステップＦ８６に
戻ることになる。つまりステップＦ８８で、（ｉ＋１）
番目に平均中心活性値が高い文とされた文について、ス
テップＦ８６で骨格を抽出し、それを文字列Ｓ（ｉ）に
加えるようにする。
【０１７９】以上のように、ステップＦ８６又はステッ
プＦ９０で文の骨格となるエレメントやその他のエレメ
ントとして、中心活性値の高いものを基準として文字列
に加えていきながら、ステップＦ８７又はステップＦ９
１で、文字列Ｓ（ｉ）又はＳＳ（ｉ）を最大文字数ｗｓ
と比較していくことで、最大文字数ｗｓに近いが最大文
字数ｗｓを越えない文字列を作成していくことになる。
【０１８０】例えばステップＦ８７で文字列Ｓ（ｉ）が
最大文字数ｗｓを越えた場合は、制御部１１の処理はス
テップＦ９２に進み、直前のステップＦ８６で骨格を加
える前の文字列Ｓ（ｉ−１）を、要約文とする。つま
り、これはステップＦ８６で文の骨格を加えたことによ
り、最大文字数ｗｓを越えてしまったことになるため、
その骨格を加える前の文字列Ｓ（ｉ−１）が、最大文字
数ｗｓに近いが最大文字数ｗｓを越えない文字列である
と判断して、それを要約文とするものである。
【０１８１】なお、このため初めてステップＦ８６で文
字列Ｓ（ｉ）を生成した時点（ｉ＝１の時点）で、ステ
ップＦ８７で、文字列Ｓ（ｉ）が最大文字数ｗｓを越え
た場合は、文字列Ｓ（ｉ−１）は、ステップＦ８３で設
定した初期値としての文字列Ｓ（０）となるため、実質
的に要約文は作成できなかったことになる。これは、要
約表示部３０４のサイズが小さすぎたことに起因するた
め、ユーザーは画面上で要約表示部３０４の面積を広げ
た上で、再度、要約作成ボタン３０６ａをクリックし
て、図２３の処理が開始されるようにすればよい。但
し、本例の場合、ステップＦ８２において要約表示部３
０４のサイズが小さすぎる場合が判別され、そのような
場合は後述するように、要約表示部３０４のサイズで表
示可能な文書長より長い文書長の要約文が作成される処
理となるため、実質的に要約文が作成できなくなる事態
は、ほとんど発生しない。
【０１８２】ステップＦ８７で文字列Ｓ（ｉ）が最大文
字数ｗｓを越えていない場合は、上述のように制御部１
１の処理はステップＦ８８に進み、次に文字列に加える
部分を判断することになる。そして上記のようにステッ
プＦ９１に進んだ場合は、文字列ＳＳ（ｉ）が最大文字
数ｗｓを越えたか否かを判別する。ここで文字列ＳＳ
（ｉ）が最大文字数ｗｓを越えた場合は、制御部１１の
処理はステップＦ９３に進み、直前のステップＦ９０で
或るエレメントを加える前の文字列Ｓ（ｉ）を、要約文
とすることになる。つまり、これはステップＦ９０でエ
レメントを加えたことにより、最大文字数ｗｓを越えて
しまったことになるため、そのエレメントを加える前の
文字列Ｓ（ｉ）が、最大文字数ｗｓに近いが最大文字数
ｗｓを越えない文字列であると判断して、それを要約文
とするものである。
【０１８３】以上の処理説明は、ステップＦ８２→Ｆ８
３→Ｆ８５と進んだ場合として説明した。従って、図２
３の処理を終えた時点で、要約表示部３０４のサイズに
適合した文書長の要約文が作成されたことになる。そし
てその要約文の内容は、平均中心活性値の高い１又は複
数の文の骨格、及び骨格以外の中心活性値の高いエレメ
ントが用いられたものとなる。この様に作成された要約
文は、ＲＡＭ１４に記憶されるとともに、図２７のよう
に要約表示部３０４に、その要約文全体が固定的に表示
される。
【０１８４】つまり、図２３の要約作成処理が終了され
ると続いて制御部１１の処理は図２４の要約文表示処理
に進む。要約文表示処理としては、まずステップＦ９４
で、要約表示部３０４のサイズｗｓｙがその時点での最
大文字数ｗｓと一致しているか否かを確認する。つまり
直前の要約作成処理で用いられていた最大文字数ｗｓ
は、ステップＦ８３で要約表示部３０４のサイズｗｓｙ
が代入されたものであるか否かを判別する。ｗｓｙ＝ｗ
ｓの場合とは、上記の処理により、その時点の要約表示
部３０４のサイズに適合した要約文が作成された場合で
ある。そこでその場合は、ステップＦ９６に進み、作成
された要約文を要約表示部３０４に表示させる。これに
より、図２７のように要約文全体が固定表示される。つ
まり、ユーザーが予め要約表示部３０４のサイズを任意
に設定した上で要約作成を指示することで、要約表示部
３０４のサイズに応じた文書長の要約が固定的に（つま
りテロップ化として切り換えや移動なしに）表示される
ことになる。
【０１８５】なお、表示された要約文を見てユーザーが
より詳しい要約文を見たいと思った場合、或いはより短
い要約文を見たいと思った場合は、閲覧ウインドウ３０
１の要約表示部３０４のサイズ（面積）を増減した上
で、再度要約作成ボタン３０６ａをクリックすればよ
い。すると、要約表示部３０４のサイズｗｓｙが、所定
サイズｗｓｔｈ以上である限りは、図２３の上述した処
理により、その時点の要約表示部３０４のサイズに応じ
た文書長の要約書が作成され、表示されることになる。
【０１８６】ところで、例えば図２６のように要約表示
部３０４が非常に小さいサイズとされている状態でユー
ザーが要約作成ボタン３０６ａをクリックし、図２３の
要約作成処理が開始された場合などで、ステップＦ８２
において要約表示部３０４のサイズｗｓｙが、所定サイ
ズｗｓｔｈ未満であると判断された場合は、以下のよう
な処理が行われることとなる。
【０１８７】この場合は制御部１１の処理はステップＦ
８４に進み、最大文字数ｗｓとして、予め設定された固
定値ｗｓｆｉｘを代入する。この固定値ｗｓｆｉｘと
は、要約文として最低限必要であるとして設定された文
字数に相当する値であり、システム設計上、適切な値が
設定される。例えばｗｓｆｉｘ＝ｗｓｔｈとしてもよ
い。さらに、固定値ｗｓｆｉｘ＝（ｗｓｆｉｘ−ｉ）×
Ｖとし、固定値初期値ｗｓｆｉｘ−ｉを保持するととも
に、係数Ｖの値をユーザーが任意に入力できるようにす
ることで、固定値ｗｓｆｉｘをユーザーが任意に設定で
きるようにしてもよい。
【０１８８】また、制御部１１は、要約の文字列（要約
文を保持する内部レジスタ）ｓを初期化して初期値ｓ
（０）＝””と設定する。制御部１１は、このように設
定した、最大文字数ｗｓおよび文字列ｓの初期値ｓ
（０）を、ＲＡＭ１４に記録する。
【０１８９】続いて制御部１１はステップＦ８５で変数
ｉ＝１とした後、ステップＦ８６以降の処理に進むが、
これは上述したとおりとなるため重複説明は避ける。即
ちこの場合も、最大文字数ｗｓを越えない範囲で、最大
文字数ｗｓに最も近い文字数としての要約文を作成して
いくことになる。但しこの場合は、最大文字数ｗｓ＝ｗ
ｓｆｉｘとされているため、その時点の要約表示部３０
４のサイズに応じた文字数とはならず、実際には要約表
示部３０４での表示可能な文字数を越える文字数（文書
長）の要約文が生成されることになる。
【０１９０】ステップＦ８６〜Ｆ９３の処理により要約
文が作成されたら、制御部１１は図２４の要約文表示処
理を実行する。そしてこの場合は最大文字数ｗｓは要約
表示部サイズｗｓｙではないため、ステップＦ９４から
Ｆ９５に進み、テロップ作成エンジンを用いて、生成し
た要約文をテロップ化して表示していく処理を行うこと
になる。
【０１９１】このステップＦ９５のテロップ表示処理の
例を図２５に詳しく示す。まず制御部１１（テロップ作
成エンジン）はステップＦ５０１で変数ｎ＝１とセット
する。そしてステップＦ５０２で、生成した要約文から
第ｎの文を抽出する。従ってまず要約文を構成している
第１の文が抽出される。
【０１９２】次にステップＦ５０３で、抽出した文の文
長Ｌｓ（語数）が、要約表示部サイズｗｓｙを越えてい
るか否かを判別する。例えば要約文を構成している１又
は複数の文のうちの第１の文が、その時点の要約表示部
サイズｗｓｙにおいて表示可能な語数以下であったとす
ると、制御部１１の処理はステップＦ５０４に進む。そ
して、文長Ｌｓに所定の係数ｋを乗算して、テロップ表
示時間Ｔ１を算出する。
【０１９３】続いてステップＦ５０５で制御部１１は内
部タイマのカウントをスタートさせるとともに、ステッ
プＦ５０６で、その第１の文を要約表示部３０４に表示
させる。このとき、文長Ｌｓは要約表示部サイズｗｓｙ
以下であるため、その第１の文の全体が、テロップとし
て要約表示部３０４に表示される。この表示動作中に
は、制御部１１はステップＦ５０７でタイムカウント値
を監視しており、タイマによりＴ１時間が計数された時
点で、ステップＦ５１５に進む。そして、ステップＦ５
１５で要約文の最後の文の表示までが完了したか否かを
判断し、完了していなければステップＦ５１６で変数ｎ
をインクリメントしたうえでステップＦ５０２に戻る。
従って、次に要約文を構成している文のうちの第２の文
を抽出することになる。
【０１９４】続いて制御部１１は、第２の文についてス
テップＦ５０３の判別を行うが、ここで、第２の文の文
長が要約表示部サイズｗｓｙを越えていたとすると（つ
まり一度に文全体を表示できない場合）、制御部１１の
処理はステップＦ５０８に進み、要約表示部に表示可能
な文長Ｌｗｓｙに所定の係数ｋを乗算して、テロップ表
示時間Ｔ１を算出する。続いてステップＦ５０９で制御
部１１は内部タイマのカウントをスタートさせるととも
に、ステップＦ５１０で、その第２の文をテロップとし
て要約表示部３０４に表示させる。但し、このとき、文
長Ｌｓは要約表示部サイズｗｓｙを越えているため、表
示可能な先頭部分のみを表示することになる。つまり第
２の文のうちの、先頭から文長Ｌｗｓｙに相当する部分
を表示する。この表示動作中には、制御部１１はステッ
プＦ５１１でタイムカウント値を監視しており、タイマ
によりＴ１時間が計数された時点で、ステップＦ５１２
に進む。
【０１９５】ステップＦ５１２では、表示されている文
を、１文字分スクロールさせる。そしてステップＦ３１
３でＴ２時間待機する。そして、ステップＦ５１４で第
２の分の最後の文字までが表示されたか否かを判断し、
まだ最後の文字まで達していなければ、ステップＦ５１
２に戻って１文字分スクロールさせる。待機時間として
のＴ２時間は、スクロールタイミングを規定する時間と
なり、これもシステム設計上設定される値となるが、例
えば０．５〜１秒程度とすると、適切な速度で、文がス
クロールされていくことになる。
【０１９６】このようなステップＦ５０８〜Ｆ５１４の
処理により、要約表示部３０４に表示しきれない文につ
いては、まず先頭部分がＴ１時間表示された後、Ｔ２時
間毎に１文字づつ表示がスクロールされていき、その文
の最後の文字に至るまで表示されることになる。
【０１９７】スクロールにより文の最後の文字までが表
示されたら、制御部１１の処理はステップＦ５１４から
Ｆ５１５に進み、要約文の最後の文の表示までが完了し
たか否かを判断し、完了していなければステップＦ５１
６で変数ｎをインクリメントしたうえでステップＦ５０
２に戻る。従って、次に要約文を構成している文のうち
の第３の文を抽出することになる。そして第３の文につ
いて、ステップＦ５０４〜Ｆ５０７、もしくはステップ
Ｆ５０８〜Ｆ５１４の処理によりテロップ表示を実行す
る。
【０１９８】ステップＦ５１５で、要約文を構成する全
ての文について表示を終了したと判断すると、処理はス
テップＦ５１７に進み、要約文の先頭部分を表示する。
即ち要約表示部サイズｗｓｙにおいて表示可能な先頭部
分を表示する状態とする。またステップＦ５１８で、後
述するスクロールバー３０７を表示して、テロップ表示
処理を終了する。
【０１９９】以上のようなテロップ表示処理で実現され
る表示動作は、次のようになる。例えば図２６のように
要約表示部３０４が非常に狭くされた状態の閲覧ウイン
ドウ３０１において要約作成ボタン３０６ａがクリック
され、要約文が作成されるとする。このとき、上述の図
２３の処理で要約表示部３０４での表示可能な文書長よ
りも長い要約文が作成される。
【０２００】例えば図２６において本文表示部３０３に
表示されている本文に対して、次のような要約文が生成
されたとする。「［素敵にエイジング］／８ガン転移、
抑えられる！？がんを特徴づけるのは、細胞増殖と転移
である。人間の細胞には、「がん遺伝子」と、「がん抑
制遺伝子」がある。高齢者の場合、長い年月の間に正常
な調節機能が失われ、細胞内でブレーキが利かない変異
が蓄積し、細胞の割合が増え、がん多発につながるわけ
だ。転移、がん細胞が増えるだけでは発生しない。がん
細胞が蛋白質などを溶かし、道をつくって、血管やリン
パ管に入り込む。がんの診断、治療の面から（ｎｍ２
３）の期待が集まっている。」
【０２０１】このような要約文は、次のように〜の
７つの文から構成されているが、上述した本例のテロッ
プ表示処理では、文単位でテロップ化する。 ［素敵にエイジング］／８ガン転移、抑えられる！？ がんを特徴づけるのは、細胞増殖と転移である。 人間の細胞には、「がん遺伝子」と、「がん抑制遺伝
子」がある。 高齢者の場合、長い年月の間に正常な調節機能が失わ
れ、細胞内でブレーキが利かない変異が蓄積し、細胞の
割合が増え、がん多発につながるわけだ。 転移、がん細胞が増えるだけでは発生しない。 がん細胞が蛋白質などを溶かし、道をつくって、血管
やリンパ管に入り込む。 がんの診断、治療の面から（ｎｍ２３）の期待が集ま
っている。
【０２０２】図２５の処理により、まず最初に第１の文
が抽出され、図２８のように要約表示部３０４に表示
される。この図２５の状態以降の要約表示部３０４のテ
ロップ表示状態を図２９（ａ）〜（ｊ）で説明してい
く。
【０２０３】図２８の文は、文長Ｌｓ≦ｗｓｙである
（文全体を表示可能である）ため、図２５のステップＦ
５０４〜Ｆ５０７の処理で、図２９（ａ）の表示状態
が、文長に応じて算出されたＴ１時間継続される。続い
て文、も文長Ｌｓ≦ｗｓｙとなるため、それぞれス
テップＦ５０４〜Ｆ５０７の処理で、文長に応じて算出
されたＴ１時間づつ、図２９（ｂ）（ｃ）の表示が実行
される。
【０２０４】次の文は、文長Ｌｓ＞ｗｓｙである（文
全体を表示不能である）ため、図２５のステップＦ５０
８〜Ｆ５１４の処理が行われる。即ちまず図２９（ｄ）
のように文の先頭部分が、算出されたＴ１時間表示され
た後、Ｔ２時間毎に、図２９（ｅ）→（ｆ）のように、
表示が１文字づつスクロールされる。その後同様にスク
ロールが進み、図２９（ｇ）の状態となることで、文
の表示が完了することになる。
【０２０５】続いて文、、がそれぞれ順次抽出さ
れ、これらは文長Ｌｓ≦ｗｓｙであるため、それぞれス
テップＦ５０４〜Ｆ５０７の処理で、文長に応じて算出
されたＴ１時間づつ、図２９（ｈ）（ｉ）（ｊ）の表示
が実行される。
【０２０６】以上のように各文毎にテロップとして順次
表示され、また文長が長くて表示しきれない場合は、そ
の表示しきれなかった部分がスクロールにより表示され
る。そして、要約文を構成する全文のテロップ表示を完
了したら、図２５のステップＦ５１７、Ｆ５１８とし
て、図３０に示すように要約文の先頭部分が表示される
とともに、スクロールバー３０７が表示される。即ち、
上記テロップ表示により、要約文全体をユーザーに提示
した後は、スクロールバー３０７を用意することで、そ
の後ユーザーが、要約表示部３０４上の文字を任意にス
クロールさせて、要約文内容を確認できるようにするも
のである。
【０２０７】本例の要約文の作成及び表示は以上のよう
に実行されるが、これによりユーザーにとって好適な要
約提示が可能となる。まず、ユーザーは、要約表示部３
０４のサイズを任意に設定することで、生成される要約
文の文書長を設定できる。つまり詳しい要約文を見たい
ときには要約表示部３０４を広くしてから要約作成ボタ
ン３０６ａをクリックし、一方、簡単な内容の要約文を
見たいときには要約表示部３０４を狭くしてから要約作
成ボタン３０６ａをクリックすればよい。それにより、
ユーザーの望むサイズの要約文が生成され、テロップで
はなく固定表示される。
【０２０８】また、もしユーザーが要約表示部３０４を
狭くしすぎてしまった場合は、そのウインドウサイズに
関わらず最低限必要な文書長の要約文が作成され、上述
のようにテロップ化されて表示されることになる。従っ
て、例えばユーザーが本文表示部３０３を広くとりたい
ためにやむおえず要約表示部３０４をかなり狭くしたよ
うな場合でも、ユーザーは適切な内容の要約文を見るこ
とができるようになる。これにより内容を正確に認識で
きる。
【０２０９】また本例のテロップ表示処理では、要約文
を文単位でテロップ化しているが、１つの文の表示時間
（Ｔ１）は、その文長に応じて算出しているため、各文
（テロップ）は、ユーザーが読むのに適切な表示時間と
なる。さらに、文が長い場合は、スクロール表示を実行
するため、ユーザーが１つの文を認識することに好適で
ある（後続部分は切換表示でなく移動表示されるため
に、１つの文が続いていることをユーザーが認識しやす
い）。
【０２１０】なお、テロップ表示処理の例としては図２
５の例に限らず各種の処理例が考えられる。例えば文単
位でなく、文節、句などの単位でテロップ化するように
してもよいし、文や文節の長さに応じて、表示の区切を
変更するようにしてもよい。また、要約文全体を最初か
ら最後までスクロール表示していくことも考えられる。
いずれにしても、切換表示又は移動表示、もしくはその
組み合わせにより、要約文の全体がユーザーに提示され
るようにすればよい。
【０２１１】また各テロップとしての表示期間や切換タ
イミング、スクロールタイミングの設定は多様に考えら
れる。上述のように本例では本文や要約文についての読
み上げも可能であるが、テロップ作成エンジンにより行
われるテロップ表示のタイミングを、読み上げ音声の出
力タイミングに合わせて設定することも可能である。例
えば上述したように読み上げ処理においては、タグファ
イルから読み上げ用ファイルを生成し、その読み上げ用
ファイルを音声合成エンジンに適した形態に変換した上
で、音声合成エンジンによって、人が話すような自然な
感じでの速度や、段落、文、句の区切によって読み上げ
が実行されるようにしている。従って、そのような段
落、文、句の区切や、読み上げ速度と同様のテロップ区
切や、表示期間の設定を行うことで、ユーザーにとって
読みやすいテロップ表示を実現できる。具体的な手法例
としては、上述したように音声合成エンジンによる読み
上げ処理を実行させ（但し読み上げ音声の出力は実行さ
せない）、ＣＰＵ１３はその読み上げタイミングを参照
して、テロップ表示の区切及び切換タイミングを設定す
ればよい。例えば音声合成エンジンによって或る句の読
み上げが実行されている期間（実際には音声は出力しな
い）に、その句としての文字列をテロップ表示するとと
もに、読み上げ音声が次の句に進んだ時点で、次の句の
テロップ表示に切り換えるような処理となる。このよう
な音声合成エンジンとテロップ作成エンジンの連動を実
現する構成も図４７で後述する。
【０２１２】７．ビデオファイルの出力処理 ７−１ ビデオファイル及びタグ 以上の説明は本例の文書処理装置１において主に文書デ
ータのみを対象とした処理についてであるが、本例の文
書処理装置１では、上記のような各種処理、例えば本文
の表示出力、要約文の表示出力、読み上げ音声の出力な
どと連携して、もしくは独立して、文書データに関連す
るビデオデータを出力することができる。以下、ビデオ
データに関する各種処理を説明していく。
【０２１３】まず、ビデオデータとしてのデータファイ
ル（以下、ビデオファイルという）及び、ビデオファイ
ルを文書データと関連づけるために文書データに付与さ
れているタグ構造について説明する。上述したように、
例えば通信部２１や記録媒体３２から文書処理装置１に
文書データが取り込まれる際には、同時にビデオファイ
ルが取り込まれることがある。また文書データとは別に
ビデオファイルが入力されることもある。図４、図１２
などで説明したように、文書処理装置１に取り込まれた
文書データやビデオファイルは、ＲＡＭ１４やＨＤＤ３
４などに格納される。そして制御部１１は必要に応じて
格納された文書データを取り出すことで、上述のように
文書の本文の表示や、要約作成及び表示、読み上げなど
を実行できるが、格納されているビデオファイルに関し
ても、処理対象となっている文書データに対応するビデ
オファイルを取り出して表示出力することができる。
【０２１４】図３１に、文書処理装置１内に格納されて
いる文書データ及びビデオファイルのイメージを示す。
文書データ、即ちタグファイルとしては、図示するよう
にタグファイルＴＧ１、ＴＧ２、ＴＧ３・・・・という
ように、各種文書データが格納されている。一方、ビデ
オファイルとしても、例えばビデオファイルＶ１、Ｖ２
・・・・というように、各種のファイルが格納されてい
る。ビデオファイルの内容は多様であり、それぞれ文書
データやビデオデータを供給するサーバ側が任意に作成
するものであるが、例えばビデオファイルＶ１では複数
のシーンとしての動画データＶＭ１〜ＶＭ４が含まれて
いる。ビデオファイルＶ３は２つの動画データＶＭ５、
ＶＭ６が、ビデオファイルＶ５は１つの動画データＶＭ
９が含まれている。またビデオファイルＶ２は、複数の
静止画データＶＳ１〜ＶＳ７が含まれている。ビデオフ
ァイルＶ４では、複数の静止画データＶＳ８，ＶＳ９
と、複数の動画データＶＭ７，ＶＭ８が含まれている。
もちろんこれ以外にも、多様なビデオファイルが存在す
る。ビデオデータは、例えばＭＰＥＧデータなどとされ
る。
【０２１５】また動画データには、オーディオデータが
含まれているものとしている。但し静止画データには、
基本的にはオーディオデータは含まれないが、静止画映
像に関連するオーディオデータが付加されていてもよ
い。なお、ここでいうオーディオデータとは、動画もし
くは静止画としての画像に対応して記録されたオーディ
オデータであり、関連関係にある文書データの本文や要
約文の内容が読み上げられたようなオーディオデータで
はない（上述のように音声合成処理により発生される読
み上げ音声信号のことではなく、また読み上げ音声と同
内容の音声信号ではない）。つまりオーディオデータ
は、ビデオデータに付随する音声のデータのことをいっ
ており、直接的に文書データと一致するものではない。
例えば記録された映像の収録時の周囲音声、効果音、ア
ナウンス／説明等の音声など、通常のビデオデータに含
まれる音声データのことである。（但し、情報提供者側
の意向により、或る文書データに対応するビデオデータ
に、その文書データをそのまま読み上げたような内容の
オーディオデータを付加することはあり得る。）
【０２１６】また、各ビデオファイルは、例えば、時／
分／秒／フレームとしてのタイムコードＴＣがビデオデ
ータを構成するフレーム単位で付されている。例えばビ
デオファイルＶ１では図示するように、先頭のフレーム
から終端のフレームまでにおいて「００：００：００：
００」〜「００：０３：３９：０５」のタイムコードＴ
Ｃが付されている。このタイムコードＴＣはビデオファ
イルにおける各部のアドレス的に機能し、例えばタイム
コードを指定することで、任意の箇所（任意の区間）を
再生させることができる。例えばビデオファイルＶ１に
おける動画データＶＭ２を再生させる場合などは、その
動画データＶＭ２としての区間の開始フレームと終了フ
レームのタイムコードが指定されればよい。
【０２１７】このようにビデオファイルは、それぞれ１
又は複数の動画や静止画のデータで構成されるが、文書
データ（タグファイル）は、その文書内容に関連するビ
デオデータとして、ビデオファイル名や各動画データ、
静止画データを指定するタグが付されている。つまりタ
グファイルとしては、文書全体、段落、文、句などの任
意の単位で、タグにより関連するビデオデータを指定す
ることができ、文書処理装置１は、そのようなタグ（以
下、ビデオデータを指定するタグを、ビデオタグとい
う）に基づいて、文書データに関連するビデオデータを
判別し、出力することができる。
【０２１８】ビデオタグが付されたタグファイルの例を
図３２、図３３に示す。図３２は、前述した図１８と同
一の内容としてのタグファイルに、ビデオタグが付加さ
れた例である。図１８の場合は、文書範囲を規定するタ
グとして＜文書＞〜＜／文書＞が付されていたが、この
場合、（例１１）としての部分に示すように、文書範囲
を示すタグにおいてビデオタグが付加され、＜文書 ビ
デオファイル＝“Ｖ３”＞＜シーン＝“ＶＭ５” ｉｎ
＝“００：００：００：００” ｏｕｔ＝“００：０
０：０３：１２”＞・・・・・＜／シーン＞＜／文書＞
とされている。このようなタグによって、この文書デー
タの全体に関連するビデオデータが、図３１に示したビ
デオファイルＶ３に含まれる動画データＶＭ５であるこ
とが表されている。また、ｉｎ＝“００：００：００：
００”とｏｕｔ＝“００：００：０３：１２”により、
ビデオファイルＶ３内における動画データＶＭ５として
のシーンの開始時間（開始フレーム）と終了時間（終了
フレーム）、即ちタイムコードが指定されている。この
ようなタグ構造により、制御部１１は、当該タグファイ
ルに関連するビデオデータを判別でき、必要に応じて再
生出力させることができる。
【０２１９】また図３３は、前述した図１９と同一の内
容としてのタグファイルに、ビデオタグが付加された例
である。この例は、文書データ内の１つの文ごとに、対
応する１つの静止画データが指定されている例である。
まず、＜文書 ビデオファイル＝“Ｖ２”＞・・・・＜
／文書＞というタグにより、この文書に関連するビデオ
データがビデオファイルＶ２に含まれていることが示さ
れる。そして各文は、＜文＞〜＜／文＞というタグで、
その範囲が示されるが、（例１２）〜（例１６）におい
て示すように、それぞれ各文についてのタグが、 ＜文 シーン＝“ＶＳ１”＞・・・・＜／文＞ ＜文 シーン＝“ＶＳ２”＞・・・・＜／文＞ ＜文 シーン＝“ＶＳ３”＞・・・・＜／文＞ ＜文 シーン＝“ＶＳ４”＞・・・・＜／文＞ ＜文 シーン＝“ＶＳ５”＞・・・・＜／文＞ とされており、つまり、各文のそれぞれに、静止画デー
タＶＳ１、ＶＳ２、ＶＳ３、ＶＳ４、ＶＳ５が対応して
いることが示されている。
【０２２０】なお、ビデオファイルＶ２において各静止
画データＶＳ１〜ＶＳ７がそのデータ名称「ＶＳ１」・
・・「ＶＳ７」として再生指定できる管理構造がとられ
ていることを前提とすれば、このようなシーンをデータ
名称のみで指定するビデオタグでよいが、静止画データ
についても上記の動画データと同様にビデオタグ内でタ
イムコードにより指定されるようにしてもよい。また逆
に、動画データの再生区間をデータ名称のみで指定でき
る場合は、必ずしも上記のようにタイムコードを指定す
る必要はない。
【０２２１】この図３２、図３３のようなタグ構造によ
り、制御部１１は、当該タグファイルの各文に関連する
ビデオデータを判別でき、必要に応じて再生出力させる
ことができる。
【０２２２】上記図３２の例は、文書全体に１つの動画
データが対応づけられた例で、図３３は文書の各文に、
それぞれ静止画データが対応づけられた例であるが、タ
グファイルによるビデオデータの対応付は、多様なバリ
エーションで可能となる。即ち、＜段落＞〜＜／段落
＞、＜＊＊句＞〜＜／＊＊句＞などのタグにビデオタグ
を付加すれば、段落単位や句単位など、任意の単位で或
るビデオデータを対応づけることが可能である。また、
１つのタグファイル内で、複数の動画データを対応付け
したり、静止画データと動画データを複合的に対応付け
することも当然可能である。
【０２２３】７−２ ビデオ出力処理 以上の例のようなタグファイルによれば、文書処理装置
１はタグファイルに関連づけてビデオデータを出力する
ことができる。以下、ビデオデータに関する各種の出力
処理（ビデオ出力処理、要約出力時のビデオ出力処理、
読み上げ時のビデオ出力処理）を説明していく。まずこ
こでは、図３４〜図３６を用いて、要約表示や読み上げ
に連動しない通常のビデオ出力処理について述べる。
【０２２４】なお、動画や静止画としてのビデオデータ
の実際の出力形態（タイミング、表示期間など）は、タ
グファイルの構造や動画／静止画の別、さらには要約表
示処理や読み上げ処理の事情などにより、多様に考えら
れるため、それについては各種のビデオ出力形態として
図４１以降を用いてまとめて後述する。
【０２２５】図３５は制御部１１によるビデオ出力処理
を示す。この処理は、例えば上述した図２６のように閲
覧ウインドウ３０１が表示されている状態で、ビデオボ
タン３０６ｄがクリックされることにより開始される。
もちろん図２７のように要約文が作成され、表示された
状態にあるときに、ビデオボタン３０６ｄがクリックさ
れた場合でもよい。
【０２２６】ビデオボタン３０６ｄがクリックされるこ
とに応じて、制御部１１は、まず図３５のステップＦ６
０１として、閲覧ウインドウ３０１上に表示されている
文書データのタグファイルを確認し、そのタグファイル
が上記図３２、図３３のようにビデオタグを含むもので
あるか、或いは図１８、図１９のようにビデオタグが存
在しないものであるかを確認する。
【０２２７】もしビデオタグが存在しないタグファイル
について、閲覧ウインドウ３０１が開かれていた状態で
あったときは、表示されている文書データに関連するビ
デオデータは存在しないと判断し、ステップＦ６０１か
らビデオ出力処理を終える。つまりその場合は、ビデオ
ボタン３０６ｄのクリックは無効な操作となる。
【０２２８】ところが、閲覧ウインドウ３０１で表示さ
れている文書データのタグファイルにビデオタグが含ま
れていた場合は、その文書データに関連するビデオデー
タが指定されていることになるため、制御部１１は処理
をステップＦ６０２に進め、ビデオ出力用ファイルを生
成する。ビデオ出力用ファイルとは、例えば図３４
（ａ）（ｂ）に示すように、タグファイルからビデオタ
グを抽出して生成するファイルである。図３４（ａ）は
図３２のタグファイルから生成したビデオ出力用ファイ
ルであり、この場合、上述したビデオタグが抽出され、
図示するようにビデオファイルＶ３における動画データ
ＶＭ５を指定するファイル内容となる。また図３４
（ｂ）は図３３のタグファイルから生成したビデオ出力
用ファイルであり、この場合、図示するようにビデオフ
ァイルＶ２における静止画データＶＳ１〜ＶＳ５を指定
するファイル内容となる。
【０２２９】このようなビデオ出力用ファイルは、文書
処理装置１内のビデオエンジンによるビデオ再生動作の
実行のためのファイルとなる。ビデオエンジンは、ハー
ドウェアで構成してもよいし、ソフトウェアで実現する
ようにしてもよい。ビデオエンジンをソフトウェアで実
現する場合には、そのアプリケーションプログラムは、
ＲＯＭ１５やＨＤＤ３４等に予め記憶されている。ビデ
オエンジンを含む機能構成については図４７で後述す
る。
【０２３０】なお、図３４はビデオ出力用ファイルの構
造としての一例であり、実際にビデオ出力用ファイルが
このような構造に限定されるものではない。また、この
図３５の処理や後述する図３７、図３９の処理では、ビ
デオ出力用ファイルに基づいてビデオデータが出力され
るものとしているが、ビデオエンジンが直接タグファイ
ルに基づいてビデオデータの再生を行うようにすること
もできる。
【０２３１】続いて制御部１１はステップＦ６０３で、
ビデオエンジンを起動する。また制御部１１はステップ
Ｆ６０４で、表示部３０に例えば図３６に示すようなビ
デオウインドウ５０１を開く。このビデオウインドウ５
０１には、文書データファイルのファイル名を表示する
ファイル名表示部５０２、そのファイル名の文書データ
に関連するビデオデータを表示するビデオ表示部５０
３、ビデオ表示部５０３で表示されている映像の位置
（動画データの再生進行位置）を示すビデオバー５０
４、表示されている映像の開始位置としてのタイムコー
ドを表示する開始位置表示部５２１、表示されている映
像の現在の再生位置（カレントポジション）としてのタ
イムコードを表示する現在位置表示部５２２、表示され
ている映像の終了位置としてのタイムコードを表示する
終了位置表示部５２３などが表示される。さらに、画像
再生動作をユーザーが指示するために、再生ボタン５０
５、一時停止ボタン５０６、停止ボタン５０７、早戻し
ボタン５０８、早送りボタン５０９、戻し方向の頭出し
ボタン５１０、送り方向の頭出しボタン５１１などが表
示される。
【０２３２】このようなビデオウインドウ５０１を開い
たら、制御部１１はステップＦ６０５としてユーザーイ
ンターフェースの操作に応じた処理を行うことになる。
例えば図３４（ａ）のようなビデオ出力用ファイルによ
れば、図３１に示したビデオファイルＶ３の動画データ
ＶＭ５の再生が指定されたことになるが、ビデオウイン
ドウ５０１で再生ボタン５０５がクリックされた場合
は、制御部１１はビデオエンジンにより、動画データＶ
Ｍ５の再生を開始させる。これによりビデオ表示部５０
３に動画データＶＭ５の動作映像が表示される。なおこ
のとき動画データＶＭ５に含まれるオーディオデータは
音声出力部３３から音声として出力されることになる。
【０２３３】また、一時停止ボタン５０６がクリックさ
れると、制御部１１はビデオエンジンによる動画データ
ＶＭ５の再生を一時停止させる。停止ボタン５０７がク
リックされると、制御部１１はビデオエンジンによる動
画データＶＭ５の再生を停止させる。早戻しボタン５０
８、又は早送りボタン５０９がクリックされると、制御
部１１はビデオエンジンによる動画データＶＭ５の再生
動作の早戻し又は早送りを実行させる。戻し方向の頭出
しボタン５１０、又は送り方向の頭出しボタン５１１が
クリックされると、制御部１１はビデオエンジンによる
動画データＶＭ５の再生箇所として、例えば前後のシー
ン（又はポイントとなる特定箇所）の先頭箇所に戻し
（又は送り）、その箇所からの再生を実行させる。さら
に、ユーザーがビデオバー５０４における現在位置の表
示部分をドラッグした場合は、それに応じて、ビデオエ
ンジンによる動画データＶＭ５の再生箇所の戻し方向又
は進み方向に移動させる。
【０２３４】ところで、例えば図３４（ｂ）のようなビ
デオ出力用ファイルに基づく場合など、表示されるビデ
オデータが静止画データである場合は、一時停止ボタン
５０６、早戻しボタン５０８、早送りボタン５０９操作
は実質的に意味がないため表示されないようにしてもよ
い。そしてその場合は、再生ボタン５０５のクリックに
より、静止画データの表示が開始され、またタグファイ
ルにより複数の静止画データが指定されていた場合は、
戻し方向の頭出しボタン５１０、又は送り方向の頭出し
ボタン５１１のクリックに応じて、静止画データが切り
換えられていくようにすればよい。
【０２３５】このようなユーザーインターフェース操作
に応じた処理により、ユーザーは、ビデオデータを任意
の状態で視聴できることになる。そして、このように閲
覧ウインドウ３０１で表示されている文書データに関連
したビデオデータがビデオウインドウ５０１において表
示されることで、ユーザーは文書内容に関連したビデオ
データを見ることができ、文書内容（情報内容）をより
的確かつ詳細に知ることができる。
【０２３６】７−３ 要約出力時のビデオ出力処理 次に、図３７、図３８を用いて、要約出力時に行われる
ビデオ出力処理について述べる。上述したように、例え
ば図２６のような閲覧ウインドウ３０１において要約作
成ボタン３０６ａをクリックすると、その時点の要約表
示部３０４のサイズに応じた文書長の要約文が作成さ
れ、その要約文が要約表示部３０４に固定的に表示され
る。又は、要約表示部３０４のサイズが小さい場合は、
要約表示部３０４のサイズより長い文書長の要約文が作
成され、その要約文が要約表示部３０４にテロップ化さ
れて表示される（切り換え又は移動表示）。
【０２３７】ここで、要約文の元となる本文タグファイ
ルにビデオタグが付されていた場合はその全部又は一部
のビデオタグが要約文のタグファイルにも付加されるこ
とで、要約文の表示の際に、ビデオデータを表示させる
ことができる。このようなビデオデータ出力を含む、制
御部１１による要約作成／表示の際の全体の処理を図３
７に示す。
【０２３８】閲覧ウインドウ３０１において要約作成ボ
タン３０６ａがクリックされると、制御部１１は、まず
図３７のステップＦ７０１として、閲覧ウインドウ３０
１上に表示されている文書データのタグファイルを確認
し、そのタグファイルがビデオタグを含むものであるか
否かを確認する。
【０２３９】もしビデオタグが存在しないタグファイル
について、閲覧ウインドウ３０１が開かれていた状態で
あったときは、表示されている文書データに関連するビ
デオデータは存在しないと判断し、ステップＦ７０１か
らＦ７０２、Ｆ７０３に進み、図２３で説明した要約作
成処理、及び図２４（及び図２５）で説明した要約文表
示処理を実行する。即ち、図２６〜図３０で説明したと
おり、要約文が作成されるとともに、その要約文が固定
表示もしくはテロップ表示により表示される。
【０２４０】ところがステップＦ７０１において、閲覧
ウインドウ３０１で表示されている文書データのタグフ
ァイルにビデオタグが含まれていると判断された場合
は、その文書データに関連するビデオデータは存在する
ことになるため、制御部１１は処理をステップＦ７０４
以降に進め、要約作成／表示とともにビデオ出力を行う
処理を開始する。
【０２４１】まずステップＦ７０４で、図２３で説明し
た要約作成処理を実行する。このとき上述したように本
文から文や句が抽出されて要約文が作成されることにな
るが、そのとき要約文として生成されるタグファイルに
は、抽出した文、句等の部分にかかるビデオタグも含ま
れることになる。従って、要約文のタグファイルには、
本文タグファイルに含まれるビデオタグの全部又は一部
が含まれることになる。なお、ビデオタグの一部のみが
要約文タグファイルに含まれ、要約文タグファイルに含
まれなくなるビデオタグが存在する場合とは、例えば本
文タグファイル上で、要約文として抽出されなかった
文、句等のみにかかるビデオタグがあった場合である。
例えば図３３の本文タグファイルから（例１４）の部分
の文（第３番目の文）が要約文として抽出されなかった
場合、その第３番目の文のみにかかるビデオタグ「シー
ン＝“ＶＳ３”」は要約文タグファイルには含まれない
ことになる。
【０２４２】続いて制御部１１はステップＦ７０５で、
要約文としてのタグファイルに基づいて、図３４で説明
したようなビデオ出力用ファイルを生成する。続いて制
御部１１はステップＦ７０６で、ビデオエンジンを起動
する。
【０２４３】そして制御部１１はステップＦ７０７で、
図２４で説明した処理により要約文の表示（固定表示又
はテロップ表示）を実行するとともに、ビデオエンジン
によるビデオ再生を開始させ、その動画映像又は静止画
映像を表示させる。なおこのときビデオデータに含まれ
るオーディオデータは音声出力部３３から音声として出
力される。例えば図３８に示すように、閲覧ウインドウ
３０１上で、要約表示部３０４に作成した要約文を表示
させるとともに、本文表示部３０３とされていた領域を
利用してビデオ表示部３３０を設定して、ビデオエンジ
ンにより出力される画像を表示させる。なおこのとき閲
覧ウインドウ３０１上には、ビデオ表示部３３０で表示
されている映像の位置を示すビデオバー３３１、表示さ
れている映像の開始位置としてのタイムコードを表示す
る開始位置表示部３３２、表示されている映像の現在の
再生位置（カレントポジション）としてのタイムコード
を表示する現在位置表示部３３３、表示されている映像
の終了位置としてのタイムコードを表示する終了位置表
示部３３４なども表示させる。
【０２４４】このように要約文とともにビデオデータの
表示を開始させた後は、ステップＦ７０８で、ビデオデ
ータの再生終了もしくは要約文のテロップ表示の場合の
テロップ完了を監視し、ビデオ終了もしくはテロップ完
了に応じて、ステップＦ７０９で本文表示を復帰させ、
例えば図２７や図３０のようなウインドウ状態に戻し
て、処理を終了する。
【０２４５】以上のように、タグファイル上で文書に関
連するビデオデータが指定されている場合は、要約表示
の際に、関連するビデオデータがユーザーに提示される
ことになり、これによってユーザーにとって要約内容
（文書内容）がより理解しやすいものとなる。
【０２４６】７−４ 読み上げ時のビデオ出力処理 次に、図３９、図４０を用いて、読み上げ時に行われる
ビデオ出力処理について述べる。上述したように、例え
ば図２６のような閲覧ウインドウ３０１において読み上
げボタン３０６ｃをクリックすると、その閲覧ウインド
ウ３０１において表示されている本文又は要約文の読み
上げが実行される。このとき、本文又は要約文のタグフ
ァイルにビデオタグが付されていた場合、読み上げ音声
の出力とともに、ビデオデータを表示させることができ
る。このようなビデオデータ出力を含む、制御部１１に
よる文書読み上げの際の全体の処理を図３９に示す。
【０２４７】閲覧ウインドウ３０１において読み上げボ
タン３０６ｃがクリックされると、制御部１１は、まず
図３９のステップＦ８０１として、閲覧ウインドウ３０
１上に表示されている文書データのタグファイル（本文
タグファイル又は要約文タグファイル）を確認し、その
タグファイルがビデオタグを含むものであるか否かを確
認する。
【０２４８】もしビデオタグが存在しないタグファイル
について閲覧ウインドウ３０１が開かれていた状態であ
ったときは、表示されている文書データに関連するビデ
オデータは存在しないと判断し、ステップＦ８０１から
Ｆ８０２、Ｆ８０３に進み、図１６で説明した読み上げ
用ファイルの生成及び読み上げ用ファイルを用いた処
理、即ち図１６のステップＦ１０２，Ｆ１０３の処理を
行った後、ステップＦ８０３に進んで、ユーザーインタ
ーフェースの操作に応じた読み上げ処理を実行する。即
ち図１６のステップＦ１０４で説明した処理である。こ
れにより、図２２に示した読み上げウインドウ４０１に
おいて、ユーザーが行う操作に応じて、上述したように
読み上げが行われる。
【０２４９】一方、ステップＦ８０１において、閲覧ウ
インドウ３０１で表示されている文書データのタグファ
イルにビデオタグが含まれていると判断された場合は、
その文書データに関連するビデオデータは存在すること
になるため、制御部１１は処理をステップＦ８０４以降
に進め、読み上げとともにビデオ出力を行う処理を開始
する。
【０２５０】まずステップＦ８０４で、図１６で説明し
た読み上げ用ファイルの生成及び読み上げ用ファイルを
用いた処理（ステップＦ１０２，Ｆ１０３）を行った
後、ステップＦ８０５で、図３４で説明したようなビデ
オ出力用ファイルを生成する。続いて制御部１１はステ
ップＦ８０６で、ビデオエンジンを起動する。
【０２５１】そしてステップＦ８０７で制御部１１は、
ユーザーインターフェースの操作に応じた読み上げ処理
（図１６のステップＦ１０４）を実行するが、このと
き、読み上げ処理に連動してビデオエンジンによるビデ
オ再生を実行させる。なお、この場合は、ビデオデータ
に含まれるオーディオデータは出力させないようにする
（音声出力部３３からは読み上げ音声が出力されるた
め）。但し、オーディオデータが読み上げ音声とともに
出力されるようにしてもよい。
【０２５２】このステップＦ８０７での表示状態として
は、例えば図４０に示すように、読み上げウインドウ４
０１上で、ビデオ表示部４３０を設定して、ビデオエン
ジンにより出力される画像を表示させる。つまり再生ボ
タン４２０のクリックにより読み上げ音声出力が開始さ
れることに応じて、動画データ又は静止画データとして
の表示出力を実行する。なお図示していないが、このと
き読み上げウインドウ４０１上で、上記図３８のような
ビデオバー、開始位置表示部、現在位置表示部、終了位
置表示部などを表示させるようにしてもよい。
【０２５３】以上のように、タグファイル上で文書に関
連するビデオデータが指定されている場合は、読み上げ
の際に、関連するビデオデータがユーザーに提示される
ことになり、これによってユーザーにとって読み上げ内
容（文書内容）がより理解しやすいものとなる。
【０２５４】７−５ 各種のビデオ出力形態 以上、本例の文書処理装置１においてビデオデータが出
力される際の処理例を説明したが、実際のビデオデータ
出力時の出力形態としては、タグファイルの構造や動画
／静止画の別、さらには要約表示処理や読み上げ処理の
事情などにより、ビデオ再生期間、再生タイミング、再
生箇所などがそれぞれ多様な状態となる。以下、図４１
〜図４６でビデオデータの出力形態の各種の例を説明し
ていく。
【０２５５】図４１、図４３、図４５は、それぞれ本文
タグファイル、本文タグファイルから生成される要約文
タグファイル、及び読み上げ時に作成される本文の読み
上げ用ファイル、要約文の読み上げ用ファイルを、模式
的に示している。即ち、文書処理装置１に供給される本
文タグファイルから、上述した文書処理装置１の処理よ
って要約文タグファイルが生成され、またこれらタグフ
ァイルから読み上げファイルが生成される場合の模式図
である。
【０２５６】まず図４１は、本文タグファイルに、上述
したビデオタグにより、本文全体に関連して動画データ
ＶＭ５が指定されている場合を示している。これは本文
タグファイルが例えば図３２のようなタグファイルであ
った場合に相当する。このとき、このような本文タグフ
ァイルに基づいて生成される要約文タグファイルにも、
ビデオタグが含まれ、同じく要約文全体について動画デ
ータＶＭ５が指定される状態となる。
【０２５７】このような状態において実行される、各場
合でのビデオ出力動作を図４２に示す。なお、この図４
２及び後述する図４４、図４６は横方向を時間軸とし
て、ビデオ出力動作を模式的に示すものである。また、
これら各図において、実線矢印は、情報内容が時間的に
進行する情報の出力（即ち動画データ出力、テロップ表
示、読み上げ音声出力）を示し、破線は、固定的な出力
（即ち本文又は要約文の固定表示、静止画データ出力）
を示すこととしている。
【０２５８】図４１に示す本文タグファイル、又は要約
文タグファイルが閲覧ウインドウ３０１に表示されてい
る状態で、ビデオボタン３０６ｄがクリックされること
により実行される、上記図３５のビデオ出力処理による
ビデオ出力動作は図４２（ａ）のようになる。この場
合、図３６のようなビデオウインドウ５０１上で、ユー
ザーが再生ボタン５０５をクリックすることで、例えば
ｔ１時点から動画データＶＭ５の再生（及びオーディオ
データの再生）が行われ、動画データＶＭ５の再生終了
により、例えばｔ２時点で動画データＶＭ５の再生が終
了される。なお、もちろんこの場合は、ビデオウインド
ウ５０１上でのユーザーインターフェース操作に応じ
て、ビデオデータ再生の一時停止、早送り、早戻し、頭
出し、再生途中での停止などもあり得る。また、ｔ２時
点で再生が終了した後は、ビデオウインドウ５０１を閉
じるようにしてもよいが、そのままビデオウインドウ５
０１上で再びリピート再生したり、或いは特定の場面を
静止画として継続表示するようにしてもよい。
【０２５９】図４１の本文タグファイルについての要約
文の作成が指示（要約作成ボタン３０６ａのクリック）
された際に、上記図３７の処理により要約文表示ととも
に行われるビデオ出力動作は図４２（ｂ）又は（ｃ）の
ようになる。
【０２６０】まず、図４２（ｂ）は作成された要約文が
固定表示される場合を示している。この場合、図３８の
ような閲覧ウインドウ３０１上で、例えばｔ１１時点か
ら要約文が固定表示され、その固定表示は以降継続され
る。そしてそれとともに、ｔ１１時点からビデオ表示部
３３０で動画データＶＭ５の再生（及びオーディオデー
タの再生）が行われる。例えばｔ１２時点で動画データ
ＶＭ５の再生が終了されたとすると、閲覧ウインドウ３
０１上でビデオ表示部３３０が閉じられて本文表示部３
０３に戻され、本文の表示が復帰される。例えばｔ１２
時点以降は、図２７のような表示状態となる。
【０２６１】図４２（ｃ）は作成された要約文がテロッ
プ表示される場合を示している。この場合、図３８のよ
うにビデオ表示部３３０が設定された閲覧ウインドウ３
０１上における要約表示部３０４において、図２８、図
２９で説明したようなテロップ表示がｔ２１時点から開
始される。また、そのテロップ表示がｔ２２時点で完了
されたとすると、ｔ２２時点以降は図３０に示すように
要約文の一部が固定表示されることになる。ここで閲覧
ウインドウ３０１におけるビデオ表示部３３０では、ｔ
２１時点から動画データＶＭ５の再生（及びオーディオ
データの再生）が開始される。そしてｔ２２時点でテロ
ップ表示が完了すると、動画データＶＭ５の再生がまだ
終了していなくても、テロップ完了とともに中止終了さ
れ、ｔ２２時点以降は図３０に示すように本文が固定表
示されている状態に復帰することになる。
【０２６２】図４１に示す本文タグファイル又は要約文
タグファイルについての読み上げ指示（読み上げボタン
３０６ｃのクリック）があって図３９の処理が実行され
た際のビデオ出力、つまり読み上げウインドウ４０１が
開かれた状態において、読み上げとともに行われるビデ
オ出力動作は図４２（ｄ）又は（ｅ）のようになる。
【０２６３】まず、図４２（ｄ）は本文の読み上げが実
行される場合を示している。例えば図４０に示す読み上
げウインドウ４０１で再生ボタン４２０がクリックされ
ることで、ｔ３１時点から本文の読み上げが開始される
が、それと同時に、ビデオ表示部４３０において動画デ
ータＶＭ５の再生が開始される（この場合はオーディオ
データの再生出力は行われない）。なお、読み上げ音声
に連動して、読み上げウインドウ４０１上のテロップ表
示部４０２で本文のテロップ表示も行われる。ここで、
ｔ３２時点で本文の読み上げが完了したとすると、動画
データＶＭ５の再生がまだ終了していなくても、読み上
げ完了とともに中止終了されることになる。
【０２６４】図４２（ｅ）は要約文の読み上げが実行さ
れる場合を示している。例えば読み上げウィンドウ４０
１で再生ボタン４２０のクリックにより、ｔ４１時点か
ら要約文の読み上げが開始されると、それと同時に、ビ
デオ表示部４３０において動画データＶＭ５の再生が開
始される（この場合もオーディオデータの再生出力は行
われない）。また読み上げ音声に連動して、テロップ表
示部４０２で要約文のテロップ表示も行われる。そして
ｔ４２時点で要約文の読み上げが完了したとすると、動
画データＶＭ５の再生は、まだ終了していなくても、読
み上げ完了とともに中止終了される。
【０２６５】なお、図４２（ｃ）（ｄ）（ｅ）の場合に
は動画データが中止終了されるとしたが、中止終了とな
るタイミング以前に動画データの再生が完了していた場
合は、その余った期間は、動画データを再度先頭位置な
どから再生させたり、或いは特定の場面を静止画として
表示させるようにしてもよい。
【０２６６】次に、図４３は、本文タグファイルに、上
述したビデオタグにより、例えばそれぞれの段落や文な
どの単位で、それぞれに関連して複数の動画データＶＭ
１〜ＶＭ４が指定されている場合を示している。そして
このような本文タグファイルに基づいて生成される要約
文タグファイルには、動画データＶＭ１、ＶＭ４を指定
するビデオタグが含まれたとする。
【０２６７】このような状態において実行される、各場
合でのビデオ出力動作を図４４に示す。図４３に示す本
文タグファイルが閲覧ウインドウ３０１に表示されてい
る状態で、ビデオボタン３０６ｄがクリックされること
により実行される、上記図３５のビデオ出力処理による
ビデオ出力動作は図４４（ａ）のようになる。
【０２６８】この場合、図３６のようなビデオウインド
ウ５０１上で、ユーザーが再生ボタン５０５をクリック
することで、例えばｔ１０１時点から動画データＶＭ１
の再生（及びオーディオデータの再生：以下同様）が行
われる。動画データＶＭ１の再生がｔ１０２時点で終了
すると、続いて動画データＶＭ２が再生される。さらに
ｔ１０３時点からは動画データＶＭ３が、またｔ１０４
時点からは動画データＶＭ４が、それぞれ順次再生され
る。そして動画データＶＭ４の再生終了に伴って、ｔ１
０５時点でビデオデータの再生が終了される。
【０２６９】なお、もちろんこの場合は、ビデオウイン
ドウ５０１上でのユーザーインターフェース操作に応じ
て、ビデオデータ再生の一時停止、早送り、早戻し、頭
出し、再生途中での停止などもあり得る。また、ｔ１０
２時点で再生が終了した後は、ビデオウインドウ５０１
を閉じるようにしてもよいが、そのままビデオウインド
ウ５０１上で再びリピート再生したり、或いは特定の場
面を静止画として継続表示するようにしてもよい。
【０２７０】図４３に示す本文タグファイルについての
要約文の作成が指示（要約作成ボタン３０６ａのクリッ
ク）された際に、図３７の処理により要約文表示ととも
に行われるビデオ出力動作は図４４（ｂ）又は（ｃ）の
ようになる。
【０２７１】まず、図４４（ｂ）は作成された要約文が
固定表示される場合を示している。この場合、図３８の
ような閲覧ウインドウ３０１上で、例えばｔ１１１時点
から要約文が固定表示され、その固定表示は以降継続さ
れる。そしてそれとともに、ｔ１１１時点からビデオ表
示部３３０で動画データＶＭ１の再生（オーディオデー
タ再生を含む）が行われる。ｔ１１２時点で動画データ
ＶＭ１の再生が終了すると、続いて動画データＶＭ４の
再生（オーディオデータ再生を含む）が行われる。な
お、図４３の例の場合、要約文タグファイルには動画デ
ータＶＭ２、ＶＭ３を指定するビデオタグが付されてい
ないため、これらは再生されない。ｔ１１３時点で動画
データＶＭ４の再生が終了されると、閲覧ウインドウ３
０１上でビデオ表示部３３０が閉じられて本文表示部３
０３に戻され、本文の表示が復帰される。例えばｔ１１
３時点以降は、図２７のような表示状態となる。
【０２７２】図４４（ｃ）は作成された要約文がテロッ
プ表示される場合を示している。この場合、図３８のよ
うにビデオ表示部３３０が設定された閲覧ウインドウ３
０１上における要約表示部３０４において、図２８、図
２９で説明したようなテロップ表示がｔ１２１時点から
開始される。また、そのテロップ表示がｔ１２３時点で
完了されたとすると、ｔ１２３時点以降は図３０に示す
ように要約文の一部が固定表示されることになる。ここ
で閲覧ウインドウ３０１におけるビデオ表示部３３０で
は、ｔ１２１時点から動画データＶＭ１の再生（オーデ
ィオデータ再生を含む）が開始される。その後、ｔ１２
２時点で、要約文のテロップが、動画データＶＭ４に対
応する部分に到達したとすると、動画データＶＭ１の再
生はまだ終了していなくても中止され、続いて動画デー
タＶＭ４の再生が開始される。そしてｔ１２３時点でテ
ロップ表示が完了すると、動画データＶＭ４の再生は、
まだ終了していなくても中止終了され、ｔ１２３時点以
降は図３０に示すように本文が固定表示されている状態
に復帰することになる。
【０２７３】図４３に示す本文タグファイル又は要約文
タグファイルについての読み上げ指示（読み上げボタン
３０６ｃのクリック）があって図３９の処理が実行され
た際のビデオ出力、つまり読み上げウインドウ４０１が
開かれた状態において、読み上げとともに行われるビデ
オ出力動作は図４４（ｄ）又は（ｅ）のようになる。
【０２７４】まず、図４４（ｄ）は本文の読み上げが実
行される場合を示している。例えば読み上げウインドウ
４０１で再生ボタン４２０がクリックされることで、ｔ
１３１時点から本文の読み上げが開始されるが、それと
同時に、図４０に示したビデオ表示部４３０において動
画データＶＭ１の再生が開始される（なお、この場合は
オーディオデータの再生出力は行われない：以下同
様）。なお、読み上げ音声に連動して、読み上げウイン
ドウ４０１上のテロップ表示部４０２で本文のテロップ
表示も行われる。ｔ１３２時点で、本文の読み上げが動
画データＶＭ２に対応する部分に到達したとすると、動
画データＶＭ１の再生は中止終了され、続いて動画デー
タＶＭ２の再生が開始される。以降同様に読み上げの進
行に応じて、ｔ１３３時点で動画データＶＭ２の再生は
中止終了されて動画データＶＭ３の再生が開始され、さ
らにｔ１３４時点で動画データＶＭ３の再生が中止終了
されて動画データＶＭ４の再生が開始される。そしてｔ
１３５時点で本文の読み上げが完了したとすると、動画
データＶＭ４の再生は中止終了される。即ち読み上げ完
了とともにビデオデータ再生が終了されることになる。
【０２７５】図４４（ｅ）は要約文の読み上げが実行さ
れる場合を示している。例えば再生ボタン４２０のクリ
ックにより、ｔ１４１時点から要約文の読み上げが開始
されると、それと同時に、図４０に示したビデオ表示部
４３０において動画データＶＭ１の再生が開始される
（オーディオデータの再生出力は行われない）。また読
み上げ音声に連動して、読み上げウインドウ４０１上の
テロップ表示部４０２で要約文のテロップ表示も行われ
る。ｔ１４２時点で、要約文の読み上げが動画データＶ
Ｍ４に対応する部分に到達したとすると、動画データＶ
Ｍ１の再生は中止終了され、続いて動画データＶＭ４の
再生が開始される。そしてｔ１４３時点で要約文の読み
上げが完了したとすると、動画データＶＭ４の再生は中
止終了される。即ち読み上げ完了とともにビデオデータ
再生が終了される。
【０２７６】なお、図４４（ｃ）（ｄ）（ｅ）の各場合
には、各動画データが中止終了されるとしたが、中止終
了となるタイミング以前に動画データの再生が完了して
いた場合は、その余った期間は、動画データを再度先頭
位置などから再生させたり、或いは特定の場面を静止画
として表示させるようにしてもよい。
【０２７７】次に図４５は、本文タグファイルに、上述
したビデオタグにより、例えばそれぞれの段落や文など
の単位でそれぞれに関連する、複数の静止画データＶＳ
１〜ＶＳが指定されている場合を示している。そしてこ
のような本文タグファイルに基づいて生成される要約文
タグファイルには、静止画データＶＳ１、ＶＳ３、ＶＳ
５を指定するビデオタグが含まれたとする。
【０２７８】このような状態において実行される、各場
合でのビデオ出力動作を図４６に示す。図４５に示す本
文タグファイルが閲覧ウインドウ３０１に表示されてい
る状態で、ビデオボタン３０６ｄがクリックされること
により実行される、上記図３５のビデオ出力処理による
ビデオ出力動作は図４６（ａ）のようになる。この場
合、図３６のようなビデオウインドウ５０１上で、ユー
ザーが再生ボタン５０５をクリックすることで、例えば
ｔ２０１時点から静止画データＶＳ１の再生が行われ
る。この静止画データＶＳ１の再生表示は例えば一定時
間ＴＳだけ行われる。一定時間を経過したｔ２０２時点
からは、同様に一定時間ＴＳの間、静止画データＶＳ２
の再生表示が行われる。以降同様に一定時間ＴＳづつ、
静止画データＶＳ３、ＶＳ４、ＶＳ５が順次再生表示さ
れていく。そしてｔ２０６時点で、ビデオデータの再生
が終了される。
【０２７９】なお、もちろんこの場合は、ビデオウイン
ドウ５０１上でのユーザーインターフェース操作に応じ
て、静止画の送り／戻し（頭出し操作）や、再生途中で
の停止などもあり得る。また、ｔ２０２時点で一連の静
止画の再生が終了した後は、ビデオウインドウ５０１を
閉じるようにしてもよいが、そのままビデオウインドウ
５０１上で再び各静止画データを順次再生したり、或い
は特定の静止画データを継続表示するようにしてもよ
い。なお、上記のようにＴＳ時間毎に静止画データを切
り換えることはせずに、ユーザーの操作（戻し方向又は
送り方向の頭出しボタン５１０，５１１のクリック）に
応じて画像を切り換えていくようにしてもよい。
【０２８０】図４５に示す本文タグファイルについての
要約文の作成が指示（要約作成ボタン３０６ａのクリッ
ク）された際に、図３７の処理により要約文表示ととも
に行われるビデオ出力動作は図４６（ｂ）又は（ｃ）の
ようになる。
【０２８１】まず、図４６（ｂ）は作成された要約文が
固定表示される場合を示している。この場合、図３８の
ような閲覧ウインドウ３０１上で、例えばｔ２１１時点
から要約文が固定表示され、その固定表示は以降継続さ
れる。そしてそれとともに、ｔ２１１時点からビデオ表
示部３３０で静止画データＶＳ１の再生が一定時間ＴＳ
の間、行われる。ＴＳ時間後の時点ｔ２１２からは、続
いて静止画データＶＭ３の再生表示が行われる。さらに
ＴＳ時間後の時点ｔ２１３からは、続いて静止画データ
ＶＳ５の再生表示が行われる。なお、図４５の例の場
合、要約文タグファイルには動画データＶＳ２、ＶＳ４
を指定するビデオタグが付されていないため、これらは
再生されない。ｔ２１４時点で各静止画データＶＳ１、
ＶＳ３、ＶＳ５のＴＳ時間づつの再生が終了されると、
閲覧ウインドウ３０１上でビデオ表示部３３０が閉じら
れて本文表示部３０３に戻され、本文の表示が復帰され
る。例えばｔ２１４時点以降は、図２７のような表示状
態となる。
【０２８２】ところで静止画データにオーディオデータ
が付随されている場合もあり得るが、オーディオデータ
が存在する場合は、上記図４６（ａ）（ｂ）の各場合に
おいて各静止画データの表示期間を一定時間ＴＳとはせ
ずに、それぞれ付随するオーディオデータの再生が完了
するまでの期間とするようにしてもよい。
【０２８３】図４６（ｃ）は作成された要約文がテロッ
プ表示される場合を示している。この場合、図３８のよ
うにビデオ表示部３３０が設定された閲覧ウインドウ３
０１上における要約表示部３０４において、図２８、図
２９で説明したようなテロップ表示がｔ２２１時点から
開始される。また、そのテロップ表示がｔ２２３時点で
完了されたとすると、ｔ２２３時点以降は図３０に示す
ように要約文の一部が固定表示されることになる。ここ
で閲覧ウインドウ３０１におけるビデオ表示部３３０で
は、ｔ２２１時点から静止画データＶＳ１の再生表示が
開始される。その後、ｔ２２２時点で、要約文のテロッ
プが、静止画データＶＳ３に対応する部分に到達したと
すると、静止画データＶＳ１の再生は終了され、続いて
静止画データＶＳ３が再生表示される。またｔ２２３時
点で、要約文のテロップが、静止画データＶＳ５に対応
する部分に到達したとすると、静止画データＶＳ３の再
生は終了され、静止画データＶＳ５が再生表示される。
そしてｔ２２４時点でテロップ表示が完了すると、ビデ
オデータ再生も終了され、ｔ２２４時点以降は図３０に
示すように本文が固定表示されている状態に復帰するこ
とになる。
【０２８４】図４５に示す本文タグファイル又は要約文
タグファイルについての読み上げ指示（読み上げボタン
３０６ｃのクリック）があって図３９の処理が実行され
た際のビデオ出力、つまり読み上げウインドウ４０１が
開かれた状態において、読み上げとともに行われるビデ
オ出力動作は図４６（ｄ）又は（ｅ）のようになる。
【０２８５】まず、図４６（ｄ）は本文の読み上げが実
行される場合を示している。例えば読み上げウインドウ
４０１で再生ボタン４２０がクリックされることで、ｔ
２３１時点から本文の読み上げが開始されるが、それと
同時に、図４０に示したビデオ表示部４３０において静
止画データＶＳ１の再生が開始される。なお、読み上げ
音声に連動して、読み上げウインドウ４０１上のテロッ
プ表示部４０２で本文のテロップ表示も行われる。ｔ２
３２時点で、本文の読み上げが静止画データＶＳ２に対
応する部分に到達したとすると、静止画データＶＳ１の
再生は終了され、続いて静止画データＶＳ２の再生表示
が行われる。以降同様に読み上げの進行に応じて、対応
する静止画データＶＳ３、ＶＳ４、ＶＳ５の表示がそれ
ぞれ行われていく。ｔ２３６時点で本文の読み上げが完
了したとすると、静止画としてのビデオデータ再生が終
了されることになる。
【０２８６】図４４（ｅ）は要約文の読み上げが実行さ
れる場合を示している。例えば再生ボタン４２０のクリ
ックにより、ｔ２４１時点から要約文の読み上げが開始
されると、それと同時に、図４０に示したビデオ表示部
４３０において静止画データＶＳ１の再生が開始され
る。この場合も、読み上げ音声に連動して、読み上げウ
インドウ４０１上のテロップ表示部４０２で本文のテロ
ップ表示も行われる。ｔ２４２時点で、要約文の読み上
げが静止画データＶＳ３に対応する部分に到達すると、
静止画データＶＳ１の再生は終了され、静止画データＶ
Ｓ３の再生表示が行われる。また同様に読み上げの進行
に応じて、例えばｔ２４３時点で、静止画データＶＳ５
の再生表示に切り換えられる。ｔ２４４時点で要約文の
読み上げが完了したとすると、静止画としてのビデオデ
ータ再生が終了されることになる。
【０２８７】以上、各種のビデオ出力形態を例示した
が、このように、指定されるビデオデータが動画である
か、静止画であるかの別や、ビデオ出力時の動作状況、
即ちビデオボタン３０６ｄのクリックにより開始され
る、ビデオ再生を主とする動作状況であるか、或いは要
約や読み上げの補助的なビデオ再生を行う動作状況であ
るかなどにより、多様な出力形態が実行されることにな
る。もちろん例示した以外にも各種のビデオ出力形態が
考えられる。また例えば１つのタグファイルで静止画デ
ータと動画データが複合的に指定された場合なども、上
記各例に準じてビデオ再生が行われるものとなる。さら
にビデオ出力の期間、開始／終了タイミング、テロップ
や読み上げとの同期状態など、多様な観点で、ビデオ出
力形態としての変形例も考えられる。
【０２８８】８．文書処理装置の機能ブロック構成 以上、文書処理装置１において実現される各種の動作を
説明してきた。本例の文書処理装置１では、これらの処
理を実行するために、例えば制御部１１内のソフトウエ
ア構成（もしくはハードウエア構成でもよい）及びファ
イル群構成として、図４７のような機能ブロックが形成
されている。
【０２８９】即ち上述した音声合成エンジン６０１、テ
ロップ作成エンジン６０２、要約作成エンジン６０３、
ビデオエンジン６０４が設けられる。また音声出力部３
３に対する音声信号の出力処理部として音声制御部６０
５や、表示部３０に対する画像信号の出力処理部として
表示制御部６０６が設けられる。さらに、ユーザーイン
ターフェース６０７として、表示される各種ウインドウ
上でのボタンについてのユーザー操作（入力部２０とし
てのマウスのクリック等による操作）についての処理を
行う部位が設けられる。そして、これらの機能ブロック
の制御を行うコントローラ６００が形成される。
【０２９０】またファイルとしては、上述してきた読み
上げ用ファイル６０８、本文タグファイル６０９、要約
文タグファイル６１０、ビデオファイル６１１、ビデオ
出力用ファイル６１２がある。上述したように、本文タ
グファイル６０９及びビデオファイル６１１は、通信部
２１もしくは記録／再生部３１（記録媒体３２）から取
り込まれるものとなる。また、要約文タグファイル６１
０は、要約作成エンジン６０３によって本文タグファイ
ル６０９から生成される。読み上げ用ファイル６０８
は、本文タグファイル６０９もしくは要約文タグファイ
ル６１０が変換されて生成される。ビデオ出力用ファイ
ル６１２は、本文タグファイル６０９もしくは要約文タ
グファイル６１０から変換されて（具体的にはビデオタ
グが抽出されて）生成される。
【０２９１】上述してきた各動作を実現するための図４
７の機能ブロックの処理を、以下説明していく。
【０２９２】・読み上げ処理 図１６〜図２２で説明した読み上げ処理の際には、まず
本文タグファイル６０９もしくは要約文タグファイル６
１０から読み上げ用ファイル６０８が生成される。そし
て音声合成エンジン６０１はコントローラ６００の指示
に基づいて読み上げ用ファイル６０８を参照し、読み上
げ用ファイル６０８に基づいた音声合成処理を行う。生
成された合成音声信号（読み上げ音声信号）Ｙｏｕｔは
音声制御部６０５において出力レベル調整等が行われ、
音声出力部３３に供給されて出力される。またコントロ
ーラは表示制御部６０６から読み上げウインドウ４０１
としての画像信号を出力させ、表示部３０に表示させ
る。また読み上げウインドウ４０１に対するユーザー操
作の情報はユーザーインターフェース６０７で取り込ま
れてコントローラ６００に伝えられ、コントローラ６０
０は、ユーザー操作に応じて音声合成エンジン６０１の
動作を制御する。
【０２９３】・要約作成処理 図２３で説明した要約作成処理の際には、コントローラ
６００は要約作成エンジン６０３に指示を出し、本文タ
グファイル６０９について要約作成を実行させる。これ
により要約文タグファイルが形成される。なおコントロ
ーラ６００は、要約作成エンジン６０３に対して、要約
表示部３０４のサイズ情報を伝えることで、上述のよう
に要約表示部３０４のサイズに応じた要約生成処理が行
われる。
【０２９４】・要約固定表示処理 図２３、図２４、図２７で説明したように、要約表示部
３０４のサイズが所定値ｗｓｔｈ以上であった場合は、
そのサイズに応じた文書長の要約文タグファイル６１０
が生成され、それが固定表示されることになる。この場
合、生成された要約文タグファイル６１０は、要約作成
エンジン６０３によって表示文書出力Ｓｏｕｔとして処
理され、表示制御部６０６に供給される。そして表示制
御部６０６で、閲覧ウインドウ３００の画像に合成さ
れ、表示部３０で図２７のように表示される。
【０２９５】・要約文／本文のテロップ表示処理 図２３〜図３０で説明したように、要約表示部３０４の
サイズが所定値ｗｓｔｈ未満であった場合は、そのサイ
ズを越える文書長の要約文タグファイル６１０が生成さ
れ、それがテロップ表示されることになる。この場合、
生成された要約文タグファイル６１０は、テロップ作成
エンジン６０２によってテロップ化処理が行われる。そ
してテロップ表示文書出力Ｔｏｕｔとして逐次出力され
ていく。表示制御部６０６では、テロップ表示文書出力
Ｔｏｕｔを閲覧ウインドウ３００の画像に合成し、表示
部３０で図２８〜図３０のような表示が実行されていく
ようにする。
【０２９６】・読み上げタイミングでのテロップ表示処
理 テロップ表示の変形例として、テロップの進行タイミン
グを読み上げ音声タイミングに合わせることができるこ
とを述べた。その場合、要約文タグファイル６１０から
変換された読み上げ用ファイル６０８が、音声合成エン
ジン６０１とテロップ作成エンジン６０２の共有ファイ
ルとして用いられる。（図中破線で示す信号系が形成さ
れる。）コントローラ６００の制御に基づいて、音声合
成エンジン６０１は読み上げ用ファイル６０８を用いた
音声合成／読み上げ出力を行う。但しこの場合、音声制
御部６０５は生成された合成音声信号Ｙｏｕｔについて
出力レベルをゼロとすることで、ユーザーに対して読み
上げ音声が出力されないようにする。テロップ作成エン
ジン６０２は、読み上げ用ファイル６０８を用いてテロ
ップ作成を行うが、この際、テロップ作成エンジン６０
２と音声合成エンジン６０１は相互にタイミング信号の
授受を行う。つまり、テロップ作成エンジン６０２は、
読み上げ用ファイル６０８からのタイミング信号に基づ
いてテロップ作成／テロップ表示文書出力Ｔｏｕｔを実
行していく。これにより読み上げ速度によるテロップ表
示が実行される。なお、読み上げ速度（つまりこの場合
はテロップ速度）については、ユーザーインターフェー
ス６０７からの情報に基づいてコントローラ６００が音
声合成エンジン６０１での設定を変更することで、変更
可能となる。
【０２９７】・ビデオ出力処理 図３５、図３６で説明したビデオ出力処理は、ユーザー
インターフェース６０７からの情報に基づくコンピュー
タ６００の指示によって、ビデオエンジン６０４の処理
で行われる。ビデオエンジン６０４は、本文タグファイ
ル６０９もしくは要約文タグファイル６１０から生成さ
れたビデオ出力用ファイル６１２を参照し、再生すべき
ビデオデータを判別して、ビデオファイル６１１を読み
出す。読み出されたビデオデータは、ビデオエンジン６
０４によって出力用の映像信号Ｖｏｕｔとして処理さ
れ、表示制御部６０６に供給される。そして表示制御部
６０６で、ビデオウインドウ５０１の画像に合成され、
表示部３０で図３６のように表示される。時間軸上で見
れば図４２（ａ）、図４４（ａ）、図４６（ａ）のよう
な出力が行われる。またビデオデータに含まれるオーデ
ィオデータについても、ビデオエンジン６０４によって
出力用の音声信号Ａｏｕｔとして処理され、音声制御部
６０５に供給されてレベル調整等の処理が行われる。そ
して音声出力部３３から再生音声として出力される。ビ
デオ出力中には、ビデオウインドウ５０１に対するユー
ザー操作の情報はユーザーインターフェース６０７で取
り込まれてコントローラ６００に伝えられ、コントロー
ラ６００は、ユーザー操作に応じてビデオエンジン６０
１の動作を制御する。
【０２９８】・要約作成時のビデオ出力 図３７、図３８で説明した要約作成時のビデオ出力処理
は、コンピュータ６００の指示に基づいて、ビデオエン
ジン６０４及び要約作成エンジン６０３の処理により行
われる。また、要約文がテロップ表示される場合は、ビ
デオエンジン６０４によるビデオ出力は、テロップ作成
エンジン６０２からのテロップ出力タイミングに連動し
て行われる。まず要約文が固定表示される場合は、上記
の要約固定表示処理とともに、ビデオエンジン６０４が
要約文タグファイル６１０から生成されたビデオ出力用
ファイル６１２を参照し、再生すべきビデオデータを判
別して、ビデオファイル６１１を読み出す。そしてビデ
オエンジン６０４は出力用の映像信号Ｖｏｕｔを表示制
御部６０６に供給し、また出力用の音声信号Ａｏｕｔを
音声制御部６０５に供給する。表示制御部６０６では、
閲覧ウインドウ３０１の画像に出力用の映像信号Ｖｏｕ
ｔを合成し、表示部３０で図３８のような表示を実行さ
れる。時間軸上で見れば図４２（ｂ）、図４４（ｂ）、
図４６（ｂ）のような出力が行われる。また音声制御部
６０５は、音声出力部３３からの再生音声出力を実行さ
せる。要約文がテロップ表示される場合は、上記の要約
のテロップ表示処理とともに、ビデオエンジン６０４が
要約文タグファイル６１０から生成されたビデオ出力用
ファイル６１２を参照し、再生すべきビデオデータを判
別して、ビデオファイル６１１を読み出す。そしてビデ
オエンジン６０４は出力用の映像信号Ｖｏｕｔを表示制
御部６０６に供給し、また出力用の音声信号Ａｏｕｔを
音声制御部６０５に供給することで、同様に表示部３０
で図３８のような表示を実行させ、また音声出力部３３
からの再生音声出力を実行させる。但しこの場合、ビデ
オエンジン６０４はコントローラ６００を介して（又は
直接）テロップ作成エンジン６０２のタイミング情報を
受け取り、テロップの進行に合わせて出力するビデオデ
ータの切り換えを行っていく。これにより時間軸上で図
４２（ｃ）、図４４（ｃ）、図４６（ｃ）で説明したよ
うな出力が行われる。
【０２９９】・読み上げ時のビデオ出力 図３９、図４０で説明した読み上げ時のビデオ出力処理
は、コンピュータ６００の指示に基づいて、ビデオエン
ジン６０４及び音声合成エンジン６０１の処理により行
われる。この場合ビデオエンジン６０４によるビデオ出
力は、音声合成エンジン６０１からの読み上げ音声出力
タイミングに連動して行われる。即ち上記の読み上げ処
理とともに、ビデオエンジン６０４が本文タグファイル
６０９又は要約文タグファイル６１０から生成されたビ
デオ出力用ファイル６１２を参照し、再生すべきビデオ
データを判別して、ビデオファイル６１１を読み出す。
そしてビデオエンジン６０４は出力用の映像信号Ｖｏｕ
ｔを表示制御部６０６に供給する。なお、この場合出力
用の音声信号Ａｏｕｔは音声制御部６０５には供給しな
い。表示制御部６０６では、読み上げウインドウ４０１
の画像に出力用の映像信号Ｖｏｕｔを合成し、表示部３
０で図４０のような表示を実行される。但しこの場合、
ビデオエンジン６０４はコントローラ６００を介して
（又は直接）音声合成エンジン６０１のタイミング情報
を受け取り、読み上げの進行に合わせて出力するビデオ
データの切り換えを行っていく。これにより時間軸上で
図４２（ｄ）（ｅ）、図４４（ｄ）（ｅ）、図４６
（ｄ）（ｅ）で説明したような出力が行われる。また音
声制御部６０５では合成音声信号（読み上げ音声信号）
Ｙｏｕｔについて出力レベル調整等を行ない、音声出力
部３３から読み上げ音声を出力させる。また読み上げウ
インドウ４０１に対するユーザー操作の情報はユーザー
インターフェース６０７で取り込まれてコントローラ６
００に伝えられ、コントローラ６００は、ユーザー操作
に応じて音声合成エンジン６０１の動作を制御する。こ
れに伴ってビデオエンジン６０４の動作も制御される。
【０３００】以上、図４７の機能ブロックについて説明
したが、機能ブロック構成や動作形態はこれに限られる
ものではない。また図４７は、ここで説明した表示部３
０又は音声出力部３３からの出力動作に関連する部位の
みを示したものであり、例えば文書受信処理、分類処理
などを実現する機能ブロックについては省略した。
【０３０１】以上本発明の実施の形態について説明して
きたが、これはあくまで一例であり、文書処理装置１の
ハードウエアもしくはソフトウエア構成、及び処理例は
多様に考えられる。また文書処理装置１を構成する具体
的なデバイス例は多様であり、例えば文書処理装置１に
おける入力部２０を例に挙げれば、キーボードやマウス
だけでなく、タブレット、ライトペン、赤外線等を利用
した無線コマンダ装置等の他のデバイスが考えられる。
【０３０２】また実施の形態においては、通信部２２に
外部から電話回線等を介して文書やビデオファイルが送
信されてくるものとして説明したが、本発明は、これに
限定されるものではない。例えば、衛星等を介して文書
やビデオファイルが送信される場合にも適用できる他、
記録／再生部３１において記録媒体３２から読み出され
たり、ＲＯＭ１５に予め文書やビデオファイルが書き込
まれていてもよい。
【０３０３】また実施の形態において、文書へのタグ付
けの方法の一例を示したが、本発明がこのタグ付けの方
法に限定されないことはもちろんである。さらに、上述
の実施の形態においては、日本語および英語の文章を例
示したが、本発明がこれらの言語に限られないことはい
うまでもない。このように、本発明は、その趣旨を逸脱
しない範囲で適宜変更が可能であることはいうまでもな
い。
【０３０４】さらにまた、本発明においては、記録媒体
３２として、上述した電子文書処理プログラムが書き込
まれたディスク状記録媒体やテープ状記録媒体等を提供
することが容易に実現できる。即ち本発明の記録媒体が
実現できる。なお、図１に示したＨＤＤ３４としても同
様に本発明の記録媒体とすることができる。そしてその
ような記録媒体３２によれば、上記してきた文書処理方
法を実現するプログラムを提供できることになり、例え
ば汎用のパーソナルコンピュータ等を用いて、本発明の
文書処理装置を容易に実現できる。もちろん記録媒体３
２としては、フロッピーディスクの他に、光ディスク、
光磁気ディスク、磁気テープ、フラッシュメモリ等によ
るメモリカード、メモリチップ等としてもよい。さらに
本発明の文書処理方法を実現するプログラムは、例えば
インターネット等のネットワーク通信を介しても提供す
ることができるものであり、従って、プログラムサーバ
側もしくは通信過程における記録媒体としても本発明は
適用できるものである。
【０３０５】また記録媒体としては、上記処理を実現す
る動作制御プログラムとともに、そのプログラムの処理
対象となる文書データやビデオデータをも記録している
ものも有用となる。つまり、文書処理装置１に対して、
記録媒体から電子文書データを提供するときに、同時に
動作制御プログラムやビデオファイルをも提供すること
で、その文書処理装置において、上記のような文書デー
タに対応したビデオ出力処理を実行できるものとなる。
【０３０６】
【発明の効果】以上の説明からわかるように本発明で
は、次のような効果が得られる。即ち本発明の文書処理
装置及び文書処理方法によれば、各電子文書データにお
いてビデオデータ指定情報（ビデオタグ）が付されてい
ることに応じて、その電子文書データに関連するビデオ
データを判別し、電子文書データに対応して、電子文書
データの出力と同時又は個別に、その関連するビデオデ
ータを出力することができる。従って、文書の提示だけ
でなく、その文書内容と関連する映像をユーザーに提示
でき、ユーザーに対して的確で、かつ多様、高度な情報
を提供できるという効果がある。ビデオデータとして
は、提供できる情報量の多い動画や、イメージを的確に
伝えることのできる静止画を、それぞれ適切に用いるこ
とで、ユーザーに対する適切な情報提示が可能となる。
【０３０７】また本文としての電子文書データから作成
された要約文を出力する際に、それに関連するビデオデ
ータを出力するようにすれば、要約文と映像の両方によ
り、ユーザーにとって文書内容をわかりやすく提供でき
る。
【０３０８】さらに、本文又は要約文などの電子文書デ
ータの読み上げとともに、それに関連するビデオデータ
を出力するようにすれば、読み上げ音声と映像の両方に
より、ユーザーにとって文書内容をわかりやすく提供で
きる。
【０３０９】また、本文又は要約文などの電子文書デー
タを部分毎の切り換えもしくは移動による表示、即ちテ
ロップ表示を行う場合や、或いは本文又は要約文などの
電子文書データの読み上げを行う場合は、そのテロップ
表示や読み上げの進行に時間的に対応してビデオデータ
を切り換えていくようにすることで、テロップ表示や読
み上げ音声と、ビデオデータを適切にリンクさせてユー
ザーに提示でき、ユーザーにとって好適な情報提供を実
現できる。
【０３１０】さらに本発明の記録媒体によれば、本発明
の文書処理方法を実現するプログラムを提供できること
になり、例えば汎用のパーソナルコンピュータ等を用い
て、本発明の文書処理装置を容易に実現できるようにな
る。これにより、一般ユーザーは容易に上記効果を享受
できるものとなる。
【図面の簡単な説明】
【図１】本発明の実施の形態の文書処理装置のブロック
図である。
【図２】実施の形態で用いる文書構造の説明図である。
【図３】実施の形態の文章構造を表示するウインドウの
説明図である。
【図４】実施の形態の手動分類処理のフローチャートで
ある。
【図５】実施の形態のインデックス作成処理のフローチ
ャートである。
【図６】実施の形態のエレメントの活性値の説明図であ
る。
【図７】実施の形態の活性拡散処理のフローチャートで
ある。
【図８】実施の形態の中心活性値更新処理のフローチャ
ートである。
【図９】実施の形態の分類ウインドウの説明図である。
【図１０】実施の形態の閲覧ウインドウの説明図であ
る。
【図１１】実施の形態の分類モデルの説明図である。
【図１２】実施の形態の自動分類処理のフローチャート
である。
【図１３】実施の形態の自動分類のフローチャートであ
る。
【図１４】実施の形態の語義間関連度算出処理のフロー
チャートである。
【図１５】実施の形態の語義間関連度の説明図である。
【図１６】実施の形態の文書読み上げ処理のフローチャ
ートである。
【図１７】実施の形態の読み上げ用ファイル生成処理の
フローチャートである。
【図１８】実施の形態のタグファイル例の説明図であ
る。
【図１９】実施の形態のタグファイル例の説明図であ
る。
【図２０】実施の形態の読み上げ用ファイル例の説明図
である。
【図２１】実施の形態の読み上げ用ファイル例の説明図
である。
【図２２】実施の形態の読み上げウインドウの説明図で
ある。
【図２３】実施の形態の要約作成処理のフローチャート
である。
【図２４】実施の形態の要約文表示処理のフローチャー
トである。
【図２５】実施の形態のテロップ表示処理のフローチャ
ートである。
【図２６】実施の形態の閲覧ウインドウの表示例の説明
図である。
【図２７】実施の形態の閲覧ウインドウの要約文を含む
表示例の説明図である。
【図２８】実施の形態の閲覧ウインドウでのテロップ表
示例の説明図である。
【図２９】実施の形態のテロップ表示動作の説明図であ
る。
【図３０】実施の形態の閲覧ウインドウでのテロップ表
示後の表示例の説明図である。
【図３１】実施の形態のタグファイル及びビデオファイ
ルの説明図である。
【図３２】実施の形態のビデオタグ付のタグファイルの
説明図である。
【図３３】実施の形態のビデオタグ付のタグファイルの
説明図である。
【図３４】実施の形態のビデオ出力用ファイルの説明図
である。
【図３５】実施の形態のビデオ出力処理のフローチャー
トである。
【図３６】実施の形態のビデオ出力処理によるビデオウ
インドウの説明図である。
【図３７】実施の形態の要約出力処理のフローチャート
である。
【図３８】実施の形態の要約出力時のビデオ出力の説明
図である。
【図３９】実施の形態の文書読み上げ処理のフローチャ
ートである。
【図４０】実施の形態の文書読み上げ時のビデオ出力の
説明図である。
【図４１】実施の形態のビデオタグ付加例の説明図であ
る。
【図４２】実施の形態のビデオ出力形態の説明図であ
る。
【図４３】実施の形態のビデオタグ付加例の説明図であ
る。
【図４４】実施の形態のビデオ出力形態の説明図であ
る。
【図４５】実施の形態のビデオタグ付加例の説明図であ
る。
【図４６】実施の形態のビデオ出力形態の説明図であ
る。
【図４７】実施の形態の文書処理装置の機能ブロックの
説明図である。
【符号の説明】
１ 文書処理装置、１０ 本体、１１ 制御部、１２
インターフェース、１３ ＣＰＵ、１４ ＲＡＭ、１５
ＲＯＭ、２０ 入力部、２１ 通信部、２２携帯端末
リーダ、３０ 表示部、３１ 記録再生部、３２ 記録
媒体、３３音声出力部、３４ ＨＤＤ、１０１ ウイン
ドウ、２０１ 分類ウインドウ、３０１ 閲覧ウインド
ウ、３０３ 文書表示部、３０４ 要約表示部、４０１
読み上げウインドウ、５０１ ビデオウインドウ、６
００ コントローラ、６０１音声合成エンジン、６０２
テロップ作成エンジン、６０３ 要約作成エンジン、
６０４ ビデオエンジン、６０５ 音声制御部、６０６
表示制御部、６０７ ユーザーインターフェース
フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/765 Ｇ０６Ｆ 15/40 ３７０Ｄ ５Ｅ５０１ 15/401 ３２０Ａ ９Ａ００１ Ｇ１０Ｌ 3/00 Ｅ Ｈ０４Ｎ 5/91 Ｌ Ｆターム(参考） 5B009 RD00 SA03 SA14 5B075 ND06 ND12 NS01 PQ02 5B089 GB01 GB03 JA33 JB01 JB03 JB06 JB22 JB24 KA02 KA04 KC23 KC59 KH15 LB13 LB14 LB20 5C053 FA06 FA23 GB10 HA24 JA01 JA16 JA21 JA22 JA30 KA01 KA08 LA06 LA14 5D045 AA01 AA08 5E501 AA13 AB13 AB15 AB18 AC15 BA03 CA08 EB05 FA32 FB32 FB34 9A001 HH15 HH33 JZ25

Claims (21)

    【特許請求の範囲】
  1. 【請求項１】 電子文書データに付加された１又は複数
    のビデオデータ指定情報を検出し、１又は複数の特定の
    ビデオデータを選択するビデオ選択手段と、 １又は複数の電子文書データのうちの或る電子文書デー
    タを提示するために出力制御する文書出力制御手段と、 前記文書出力制御手段の制御により出力された電子文書
    データに対応して、前記ビデオ選択手段で選択されたビ
    デオデータを出力制御するビデオ出力制御手段と、 を備えたことを特徴とする文書処理装置。
  2. 【請求項２】 前記文書出力制御手段により出力制御さ
    れる電子文書データ、及び前記ビデオ出力制御手段によ
    り出力制御されるビデオデータを、同時もしくは個別に
    表示する表示手段を備えることを特徴とする請求項１に
    記載の文書処理装置。
  3. 【請求項３】 文書本文としての電子文書データから、
    その要約文としての電子文書データを作成することので
    きる要約作成手段を備え、 前記ビデオ出力制御手段は、前記文書出力制御手段が前
    記要約作成手段により作成された要約文を出力制御する
    際に、前記ビデオ選択手段で選択されたビデオデータが
    出力されるように制御することを特徴とする請求項１に
    記載の文書処理装置。
  4. 【請求項４】 前記ビデオ選択手段は、前記要約作成手
    段により作成された要約文に関連する１又は複数のビデ
    オデータを選択することを特徴とする請求項３に記載の
    文書処理装置。
  5. 【請求項５】 前記文書出力制御手段は、電子文書デー
    タが部分毎の切換表示もしくは移動表示されるように、
    電子文書データを出力制御するとともに、 前記ビデオ出力制御手段は、前記文書出力制御手段の制
    御による電子文書データ出力の進行に対応したタイミン
    グで、出力するビデオデータを切り換えるように制御す
    ることを特徴とする請求項１に記載の文書処理装置。
  6. 【請求項６】 電子文書データが読み上げ音声として出
    力されるように制御する音声出力制御手段を備え、 前記ビデオ出力制御手段は、前記音声出力制御手段の制
    御により電子文書データが読み上げ音声として出力され
    る際に、前記ビデオ選択手段で選択されたビデオデータ
    が出力されるように制御することを特徴とする請求項１
    に記載の文書処理装置。
  7. 【請求項７】 前記ビデオ出力制御手段は、前記音声出
    力制御手段の制御による読み上げ音声出力の進行に対応
    したタイミングで、出力するビデオデータを切り換える
    ように制御することを特徴とする請求項６に記載の文書
    処理装置。
  8. 【請求項８】 前記ビデオデータは動画データであるこ
    とを特徴とする請求項１に記載の文書処理装置。
  9. 【請求項９】 前記ビデオデータは静止画データである
    ことを特徴とする請求項１に記載の文書処理装置。
  10. 【請求項１０】 電子文書データに付加された１又は複
    数のビデオデータ指定情報を検出し、１又は複数の特定
    のビデオデータを選択するビデオ選択手順と、 １又は複数の電子文書データのうちの或る電子文書デー
    タを提示するために出力制御する文書出力制御手順と、 前記文書出力制御手順での制御により出力された電子文
    書データに対応して、前記ビデオ選択手順で選択された
    ビデオデータを出力制御するビデオ出力制御手順と、 が行われることを特徴とする文書処理方法。
  11. 【請求項１１】 文書本文としての電子文書データか
    ら、その要約文としての電子文書データを作成すること
    のできる要約作成手順を有し、 前記ビデオ出力制御手順では、前記要約作成手順で作成
    された要約文が前記文書出力制御手順での制御により出
    力される際に、前記ビデオ選択手順で選択されたビデオ
    データが出力されるように制御することを特徴とする請
    求項１０に記載の文書処理方法。
  12. 【請求項１２】 前記ビデオ選択手順では、前記要約作
    成手順により作成された要約文に関連する１又は複数の
    ビデオデータを選択することを特徴とする請求項１１に
    記載の文書処理方法。
  13. 【請求項１３】 前記文書出力制御手順では、電子文書
    データが部分毎の切換表示もしくは移動表示されるよう
    に、電子文書データを出力制御するとともに、 前記ビデオ出力制御手順では、前記文書出力制御手順で
    の制御による電子文書データ出力の進行に対応したタイ
    ミングで、出力するビデオデータを切り換えるように制
    御することを特徴とする請求項１０に記載の文書処理方
    法。
  14. 【請求項１４】 電子文書データが読み上げ音声として
    出力されるように制御する音声出力制御手順を有し、 前記ビデオ出力制御手順では、前記音声出力制御手順で
    の制御により電子文書データが読み上げ音声として出力
    される際に、前記ビデオ選択手順で選択されたビデオデ
    ータが出力されるように制御することを特徴とする請求
    項１０に記載の文書処理方法。
  15. 【請求項１５】 前記ビデオ出力制御手順では、前記音
    声出力制御手順の制御による読み上げ音声出力の進行に
    対応したタイミングで、出力するビデオデータを切り換
    えるように制御することを特徴とする請求項１４に記載
    の文書処理方法。
  16. 【請求項１６】 電子文書データに付加された１又は複
    数のビデオデータ指定情報を検出し、１又は複数の特定
    のビデオデータを選択するビデオ選択手順と、 １又は複数の電子文書データのうちの或る電子文書デー
    タを提示するために出力制御する文書出力制御手順と、 前記文書出力制御手順での制御により出力された電子文
    書データに対応して、前記ビデオ選択手順で選択された
    ビデオデータを出力制御するビデオ出力制御手順と、 を有する動作制御プログラムが記録されていることを特
    徴とする記録媒体。
  17. 【請求項１７】 文書本文としての電子文書データか
    ら、その要約文としての電子文書データを作成すること
    のできる要約作成手順を有し、 前記ビデオ出力制御手順では、前記要約作成手順で作成
    された要約文が前記文書出力制御手順での制御により出
    力される際に、前記ビデオ選択手順で選択されたビデオ
    データが出力されるように制御する動作制御プログラム
    が記録されていることを特徴とする請求項１６に記載の
    記録媒体。
  18. 【請求項１８】 前記ビデオ選択手順では、前記要約作
    成手順により作成された要約文に関連する１又は複数の
    ビデオデータを選択することを特徴とする請求項１７に
    記載の記録媒体。
  19. 【請求項１９】 前記文書出力制御手順では、電子文書
    データが部分毎の切換表示もしくは移動表示されるよう
    に、電子文書データを出力制御するとともに、 前記ビデオ出力制御手順では、前記文書出力制御手順で
    の制御による電子文書データ出力の進行に対応したタイ
    ミングで、出力するビデオデータを切り換えるように制
    御する動作制御プログラムが記録されていることを特徴
    とする請求項１６に記載の記録媒体。
  20. 【請求項２０】 電子文書データが読み上げ音声として
    出力されるように制御する音声出力制御手順を有し、 前記ビデオ出力制御手順では、前記音声出力制御手順で
    の制御により電子文書データが読み上げ音声として出力
    される際に、前記ビデオ選択手順で選択されたビデオデ
    ータが出力されるように制御する動作制御プログラムが
    記録されていることを特徴とする請求項１６に記載の記
    録媒体。
  21. 【請求項２１】 前記ビデオ出力制御手順では、前記音
    声出力制御手順の制御による読み上げ音声出力の進行に
    対応したタイミングで、出力するビデオデータを切り換
    えるように制御する動作制御プログラムが記録されてい
    ることを特徴とする請求項２０に記載の記録媒体。
JP21865299A 1999-08-02 1999-08-02 文書処理装置、文書処理方法、及び記録媒体 Pending JP2001043215A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP21865299A JP2001043215A (ja) 1999-08-02 1999-08-02 文書処理装置、文書処理方法、及び記録媒体
US09/624,580 US7610546B1 (en) 1999-08-02 2000-07-24 Document processing apparatus having capability of controlling video data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP21865299A JP2001043215A (ja) 1999-08-02 1999-08-02 文書処理装置、文書処理方法、及び記録媒体

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2008043222A Division JP4798150B2 (ja) 2008-02-25 2008-02-25 文書処理装置、文書処理方法、及び記録媒体

Publications (2)

Publication Number Publication Date
JP2001043215A true JP2001043215A (ja) 2001-02-16
JP2001043215A5 JP2001043215A5 (ja) 2006-06-22

Family

ID=16723312

Family Applications (1)

Application Number Title Priority Date Filing Date
JP21865299A Pending JP2001043215A (ja) 1999-08-02 1999-08-02 文書処理装置、文書処理方法、及び記録媒体

Country Status (2)

Country Link
US (1) US7610546B1 (ja)
JP (1) JP2001043215A (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312370A (ja) * 2001-04-11 2002-10-25 J-Fit Co Ltd マルチメディアデータ検索装置、マルチメディアデータ検索方法およびマルチメディアデータ検索プログラム
WO2004003756A1 (ja) * 2002-06-26 2004-01-08 Sony Corporation コンテンツ関連情報提供装置及びコンテンツ関連情報提供方法、電子掲示板システム、並びにコンピュータ・プログラム
US7215510B2 (en) 2002-03-28 2007-05-08 Sony Corporation Magnetic head and magnetic recording/reproducing apparatus for a video tape recorder, and a method of manufacturing the same
CN100417214C (zh) * 2002-05-23 2008-09-03 索尼株式会社 内容记录和再现设备、方法
CN102074235A (zh) * 2010-12-20 2011-05-25 上海华勤通讯技术有限公司 视频语音识别并检索的方法
JP2015125681A (ja) * 2013-12-27 2015-07-06 パイオニア株式会社 情報提供装置
WO2016009834A1 (ja) * 2014-07-14 2016-01-21 ソニー株式会社 送信装置、送信方法、受信装置、及び、受信方法
JP2019050009A (ja) * 2018-11-05 2019-03-28 パイオニア株式会社 情報提供装置
JP2020144890A (ja) * 2020-04-27 2020-09-10 パイオニア株式会社 情報提供装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101364970B (zh) * 2007-08-09 2012-06-20 鸿富锦精密工业（深圳）有限公司 网页资料下载控制***及方法
US20090138296A1 (en) 2007-11-27 2009-05-28 Ebay Inc. Context-based realtime advertising
JP5010492B2 (ja) * 2008-01-31 2012-08-29 株式会社東芝 通信装置、方法及びプログラム
TWI407790B (zh) * 2010-01-08 2013-09-01 Chunghwa Telecom Co Ltd 影音互動系統及其方法
CN102685584A (zh) * 2011-03-16 2012-09-19 鸿富锦精密工业（深圳）有限公司 机顶盒、耳机及影音播放方法
US9098533B2 (en) * 2011-10-03 2015-08-04 Microsoft Technology Licensing, Llc Voice directed context sensitive visual search
USD674403S1 (en) * 2011-10-26 2013-01-15 Mcafee, Inc. Computer having graphical user interface
USD673967S1 (en) 2011-10-26 2013-01-08 Mcafee, Inc. Computer having graphical user interface
USD674404S1 (en) 2011-10-26 2013-01-15 Mcafee, Inc. Computer having graphical user interface
USD677687S1 (en) 2011-10-27 2013-03-12 Mcafee, Inc. Computer display screen with graphical user interface
TWI482494B (zh) * 2012-07-09 2015-04-21 Wistron Corp 頻道資訊提示方法及系統以及電腦可讀取儲存媒體
US20170024097A1 (en) * 2012-09-13 2017-01-26 Bravo Ideas Digital Co., Ltd. Method and Host Server for Creating a Composite Media File
US8837906B2 (en) 2012-12-14 2014-09-16 Motorola Solutions, Inc. Computer assisted dispatch incident report video search and tagging systems and methods
US9229674B2 (en) 2014-01-31 2016-01-05 Ebay Inc. 3D printing: marketplace with federated access to printers
US9595037B2 (en) 2014-12-16 2017-03-14 Ebay Inc. Digital rights and integrity management in three-dimensional (3D) printing
JP6165913B1 (ja) * 2016-03-24 2017-07-19 株式会社東芝 情報処理装置、情報処理方法およびプログラム
US10083369B2 (en) 2016-07-01 2018-09-25 Ricoh Company, Ltd. Active view planning by deep learning
US11423073B2 (en) * 2018-11-16 2022-08-23 Microsoft Technology Licensing, Llc System and management of semantic indicators during document presentations

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59197926A (ja) 1983-04-26 1984-11-09 Toshiba Corp 動的文書表示装置
US4864502A (en) 1987-10-07 1989-09-05 Houghton Mifflin Company Sentence analyzer
JPH022598A (ja) 1988-06-14 1990-01-08 Nec Corp データ編集方法とその装置
JP2783558B2 (ja) 1988-09-30 1998-08-06 株式会社東芝 要約生成方法および要約生成装置
US5185698A (en) 1989-02-24 1993-02-09 International Business Machines Corporation Technique for contracting element marks in a structured document
EP0542628B1 (en) * 1991-11-12 2001-10-10 Fujitsu Limited Speech synthesis system
US5598557A (en) * 1992-09-22 1997-01-28 Caere Corporation Apparatus and method for retrieving and grouping images representing text files based on the relevance of key words extracted from a selected file to the text files
CA2159468C (en) * 1993-03-31 2002-09-10 Object Technology Licensing Corporation Time-based script sequences
US5384703A (en) 1993-07-02 1995-01-24 Xerox Corporation Method and apparatus for summarizing documents according to theme
US5689641A (en) * 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
US5546520A (en) * 1994-09-30 1996-08-13 International Business Machines Corporation Method, system, and memory for reshaping the frame edges of a window around information displayed in the window
US5708825A (en) * 1995-05-26 1998-01-13 Iconovex Corporation Automatic summary page creation and hyperlink generation
US5675710A (en) 1995-06-07 1997-10-07 Lucent Technologies, Inc. Method and apparatus for training a text classifier
US5572643A (en) * 1995-10-19 1996-11-05 Judson; David H. Web browser with dynamic display of information objects during linking
JP2982697B2 (ja) 1996-07-05 1999-11-29 日本電気株式会社 テロップ表示装置
US5854624A (en) * 1996-09-12 1998-12-29 Innovative Device Technologies, Inc. Pocket-sized user interface for internet browser terminals and the like
US5953056A (en) * 1996-12-20 1999-09-14 Whack & Track, Inc. System and method for enhancing display of a sporting event
US5963203A (en) * 1997-07-03 1999-10-05 Obvious Technology, Inc. Interactive video icon with designated viewing position
US6021418A (en) * 1997-02-18 2000-02-01 International Business Machines Corporation Apparatus and method for displaying control-objects
JPH10274997A (ja) 1997-03-31 1998-10-13 Sanyo Electric Co Ltd 文書読み上げ装置
US6115035A (en) * 1997-07-21 2000-09-05 Mediaone Group, Inc. System and method for automated audio/video archive and distribution
JPH1145289A (ja) 1997-07-28 1999-02-16 Just Syst Corp 文書処理装置、文書処理プログラムが記憶された記憶媒体、及び文書処理方法
US6567980B1 (en) * 1997-08-14 2003-05-20 Virage, Inc. Video cataloger system with hyperlinked output
EP0974110A2 (en) 1997-10-30 2000-01-26 Koninklijke Philips Electronics N.V. Method for coding a presentation
US6278446B1 (en) * 1998-02-23 2001-08-21 Siemens Corporate Research, Inc. System for interactive organization and browsing of video
US6088702A (en) * 1998-02-25 2000-07-11 Plantz; Scott H. Group publishing system
US6199042B1 (en) * 1998-06-19 2001-03-06 L&H Applications Usa, Inc. Reading system
US6430357B1 (en) * 1998-09-22 2002-08-06 Ati International Srl Text data extraction system for interleaved video data streams
US6452612B1 (en) * 1998-12-18 2002-09-17 Parkervision, Inc. Real time video production system and method
US6738075B1 (en) * 1998-12-31 2004-05-18 Flashpoint Technology, Inc. Method and apparatus for creating an interactive slide show in a digital imaging device
US6317708B1 (en) * 1999-01-07 2001-11-13 Justsystem Corporation Method for producing summaries of text document
US6532218B1 (en) * 1999-04-05 2003-03-11 Siemens Information & Communication Networks, Inc. System and method for multimedia collaborative conferencing
US6369835B1 (en) * 1999-05-18 2002-04-09 Microsoft Corporation Method and system for generating a movie file from a slide show presentation
US6636888B1 (en) * 1999-06-15 2003-10-21 Microsoft Corporation Scheduling presentation broadcasts in an integrated network environment
US6636245B1 (en) * 2000-06-14 2003-10-21 Intel Corporation Method and apparatus to display video

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312370A (ja) * 2001-04-11 2002-10-25 J-Fit Co Ltd マルチメディアデータ検索装置、マルチメディアデータ検索方法およびマルチメディアデータ検索プログラム
US7215510B2 (en) 2002-03-28 2007-05-08 Sony Corporation Magnetic head and magnetic recording/reproducing apparatus for a video tape recorder, and a method of manufacturing the same
CN100417214C (zh) * 2002-05-23 2008-09-03 索尼株式会社 内容记录和再现设备、方法
WO2004003756A1 (ja) * 2002-06-26 2004-01-08 Sony Corporation コンテンツ関連情報提供装置及びコンテンツ関連情報提供方法、電子掲示板システム、並びにコンピュータ・プログラム
US7747696B2 (en) 2002-06-26 2010-06-29 Sony Corporation Content-related information providing apparatus, content related information providing method, electronic bulletin board system, and computer program
CN102074235A (zh) * 2010-12-20 2011-05-25 上海华勤通讯技术有限公司 视频语音识别并检索的方法
JP2015125681A (ja) * 2013-12-27 2015-07-06 パイオニア株式会社 情報提供装置
WO2016009834A1 (ja) * 2014-07-14 2016-01-21 ソニー株式会社 送信装置、送信方法、受信装置、及び、受信方法
JPWO2016009834A1 (ja) * 2014-07-14 2017-05-25 ソニー株式会社 送信装置、送信方法、受信装置、及び、受信方法
US10491934B2 (en) 2014-07-14 2019-11-26 Sony Corporation Transmission device, transmission method, reception device, and reception method
US11197048B2 (en) 2014-07-14 2021-12-07 Saturn Licensing Llc Transmission device, transmission method, reception device, and reception method
JP2019050009A (ja) * 2018-11-05 2019-03-28 パイオニア株式会社 情報提供装置
JP2020144890A (ja) * 2020-04-27 2020-09-10 パイオニア株式会社 情報提供装置
JP2022020751A (ja) * 2020-04-27 2022-02-01 パイオニア株式会社 情報提供装置

Also Published As

Publication number Publication date
US7610546B1 (en) 2009-10-27

Similar Documents

Publication Publication Date Title
JP2001043215A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP4320491B2 (ja) 文書処理システム、端末装置、文書提供装置、文書処理方法、記録媒体
JP2001051997A (ja) 文書データ作成装置、文書データ作成方法、及び記録媒体
US20080300872A1 (en) Scalable summaries of audio or visual content
WO2001001390A1 (fr) Trieuse-liseuse electronique
JP2001184371A (ja) ユーザの使用に便利な多段階の要約ストリームの提供方法
US11893794B2 (en) Hierarchical segmentation of screen captured, screencasted, or streamed video
JP2001075989A (ja) 情報提示装置および方法、ならびに情報提示プログラムを記録したコンピュータで読取可能な記録媒体
US20220076024A1 (en) Interacting with hierarchical clusters of video segments using a metadata panel
JP4433532B2 (ja) 文書処理装置、文書処理方法、記録媒体
JP4798150B2 (ja) 文書処理装置、文書処理方法、及び記録媒体
US11899917B2 (en) Zoom and scroll bar for a video timeline
JP2010073205A (ja) 文書処理装置、文書処理方法、記録媒体
JP4449118B2 (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001014307A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001014313A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001034384A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001159938A (ja) 文書処理方法、記録媒体、文書処理装置
JP2001014346A (ja) 携帯端末装置、文書処理システム
JP2001147926A (ja) 文書処理システム、端末装置、サービス提供装置、文書処理方法、記録媒体
JP2010044767A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001022774A (ja) 文書処理装置、文書処理方法、及び記録媒体
JP2001147915A (ja) 文書処理システム、オーサリング装置、文書処理方法、記録媒体
JP2001167114A (ja) 文書処理装置、文書処理方法、記録媒体
US11631434B2 (en) Selecting and performing operations on hierarchical clusters of video segments

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060316

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060316

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070828

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071025

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080225

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080228

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080328