インターネットを介した連弾入力方式リアルタイム字幕提示システム 小林 正幸　石原 保志　西川 俊＊　高橋 秀知＊＊ 聴覚部教育方法開発センター　＊聴覚部客員研究員　＊＊聴覚部電子情報学科情報工学専攻 要旨：オペレータ２名によるキーボードの入力作業と誤字、脱字の修正作業を平行して行うことで、より正確な字幕をリアルタイムで提示可能なシステムと、電子会議ソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」を利用した、遠隔地でインターネットを介してキーボードの連弾入力が可能なＷｉｎｄｏｗｓ対応のリアルタイム字幕提示システムを開発したので、このシステムの機能、特徴について報告する。 キーワード：聴覚障害、リアルタイム、字幕、連弾入力、インターネット １．はじめに 　我々は、高速で文字入力が可能なＭｉｃｒｏｓｏｆｔ ＷｉｎｄｏｗｓＮＴ　Ｖｅｒ.４．０の環境下で動作するＤＯＳ／Ｖパソコン対応の日本語高速入力システム(ステノワードＰＣシステム）を２セット用意し、１セット目で発話の内容をまずひらがなで入力、表示し、その後かな・漢字変換を行い、漢字かな混じり文を提示する。２セット目で、１セット目で入力した確定文章の誤字、脱字の修正を行うことで、より正確な字幕をリアルタイムで提示可能なキーボードの連弾入力方式によるリアルタイム字幕提示システム（連弾入力方式ＲＳＶシステム)、Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ９５の環境下で動作するＭｉｃｒｏｓｏｆｔ電子会議ソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」とＭｉｃｒｏｓｏｆｔ ＶｉｓｕａｌＢａｓｉｃ Ｖｅｒ.４．０で作成したインターネットデータ電送ソフトにより、インターネットを介して遠隔地でキーボードの入力作業が可能な遠隔地連弾入力方式ＲＳＶシステムを開発したので、このシステムの機能、特徴について報告する。 ２．ハードウェア構成 　本システムは文字入力ブロック、音声出力ブロック、字幕提示ブロックの３ブロックで構成されている。図1にシステムの構成を示す。 ２．１文字入力ブロック （１）文字入力用ステノワードＰＣシステム ①パソコン ・ＦＭＶ－ＤＥＳＫＰＯＷＥＲ　Ｔｐ２０（富士通） ・ＣＰＵ　Ｐｅｎｔｉｕｍ２００Ｍｈｚ ②ステノワードＰＣキーボード ・ＳＷ－1ＰＣ（スピードワープロ研究所） ③キーボード切替器 ・ＥＸＡ－ＡＴＭ（エルコム） （２）文字修正用ステノワードＰＣシステム ①パソコン ・ＦＭＶ－６２００Ｄ７（富士通） ・ＣＰＵ　Ｐｅｎｔｉｕｍ２００Ｍｈｚ ②ステノワードＰＣキーボード ・ＳＷ－1ＰＣ（スピードワープロ研究所） ③キーボード切替器 ・ＥＸＡ－ＡＴＭ（エルコム） （３）校正器 ・ＲＳＶＲＰＩ（スピードワープロ研究所） ２．２音声出力ブロック ①パソコン ・Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ，３５０（ＩＢＭ） ・ＣＰＵ ＭＭＸＰｅｎｔｉｕｍ２００Ｍｈｚ ②サウンドポード ・ＳＯＵＮＤ ＢＬＡＳＴＥＲ １６ ＰｎＰ（クリエイテイブメディア） ２.３字幕提示ブロック ①パソコン ・ＰＣ－９８２１Ａｐ２（ＮＥＣ） ・ＣＰＵ Ｏｖｅｒｄｒｉｖｅ Ｐｒｏｃｅｓｓｏｒ Ｐｅｎｔｉｕｍ８３Ｍｈｚ ②サウンドポード ・ＳＯＵＮＤ ＢＬＡＳＴＥＲ ＡＷＥ３２ ＰｎＰ（クリエイテイブメディア） ③ビデオキャプチャポード ・ＰＣ－９８２１ＡＥ０８（ＮＥＣ） ④字幕挿入装置 ・ＶＩＰ－４１００Ｒ（朋栄） ３．ソフトウェア構成 　本システムのソフトウェア構成は次の通りである。 ３．１文字入力ブロック （１）文字入力用ステノワードＰＣシステム ①ＯＳ Ｍｉｃｒｏｓｏｆｔ ＷｉｎｄｏｗｓＮＴ Ｖｅｒ.４．０ ②開発ソフトウェア Ｍｉｃｒｏｓｏｆｔ Ｖｉｓｕａｌ Ｃ＋＋ Ｖｅｒ.４．２ ③日本語変換システム かな・漢字変換精度が向上したジャストシステム 「ＡＴＯＫ１１」 （２）文字修正用ステノワードＰＣシステム 　文字入力用ステノワードＰＣシステムと同様 ３．２音声出力ブロック （１）ＯＳ Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ９５ （２）開発ソフトウェア Ｍｉｃｒｏｓｏｆｔ Ｖｉｓｕａｌ Ｂａｓｉｃ Ｖｅｒ. ４．０ （３）利用ソフトウェア ①Ｗｉｎｄｏｗｓネットワーク通信ＶＢＸ Ｓｙｎｅｒｇｙ Ｔｅｃｈｎｏｌｏｇｉｅｓ 「ＡｐｐＬｉｎｋ」 ②Ｍｉｃｒｏｓｏｆｔ ＮｅｔＭｅｅｔｉｎｇ Ｖｅｒ.２．１ ３．３字幕提示ブロック 音声出力ブロックと同様 ４．システムの動作 　システムの動作は次の通りである。 (1)話者の音声は、字幕提示ブロックのパソコンで稼働している電子会議ソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」により、マイク、サウンドポード、インターネットを介して、遠隔地に設置してある音声出力ブロックのパソコンへ送出される。 (２）（１）の音声は、音声出力ブロックのパソコンで稼働しているソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」により、サウンドポード、スピーカを介して、遠隔地にいるオペレータ２名に伝えられる。 （３）文字入力担当オペレータは（２）の音声を聞きながら高速で文字が入力できる文字入力用ステノワードＰＣキーボードにリアルタイムで入力する。 （４）入力された文字は校正器を通り文字入力用パソコンと文字修正用パソコンのキーボード入力端子に送出され、それぞれのパソコンでかな・漢字変換が行われる。 （５）文字修正用パソコンでかな・漢字変換された文章を文字修正担当オペレータが確認し、誤字、脱字がない場合は、ＲＳ－２３２Ｃ経由で漢字コードとして、音声出力ブロックのパソコンへ送出される。 　文字修正用パソコンでかな・漢字変換された文章に誤字、脱字がある場合には、本システムの特徴の一つである校正器が、修正作業中に（３）で入力された文章をバッファメモリに蓄積し、文章修正後、文字入力担当オペレータが入力した文字入力速度と無関係に、バッファメモリに蓄積された文章を字幕が読みやすい一定した送信速度で文字修正用パソコンへ送出する。文字修正用パソコンはかな・漢字変換を行い、ＲＳ－２３２Ｃ経由で漢字コードとして、音声出力ブロックのパソコンへ送出される。 （６）音声出力ブロックのパソコンは、（５）の漢字コードを受信し、漢字コードをＶｉｓｕａｌ Ｂａｓｉｃで作成したＲＳ－２３２ＣからＷｉｎｄｏｗｓネットワーク通信に変換するソフトウェアにより、インターネットを介して、字幕提示ブロックのパソコンへ送出する。 （７）字幕提示ブロックのパソコンは、インターネットを介した（６）の漢字コードを受信し、漢字コードをＶｉｓｕａｌ Ｂａｓｉｃで作成したＷｉｎｄｏｗｓネットワーク通信からＲＳ－２３２Ｃに変換するソフトウェアにより、ＲＳ－２３２Ｃを介して、字幕提示ブロックの字幕挿入装置へ送出する。 （８）字幕挿入装置は、（７）の漢字コードを字幕としてビデオカメラで撮影した映像にスーパーインポーズし、字幕付モニタへ提示する。 (９）（８）の字幕付モニタへ提示された字幕付映像は、システムが正常に稼働しているかどうかを確認するため、字幕提示ブロックのパソコンで動作している電子会議ソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」により、ビデオキャプチャボード、インターネットを介して、音声出力ブロックのパソコンへ送出される。 (１０）（９）の字幕付映像は、音声出力ブロックのパソコンで稼働しているソフトウェア「Ｎｅｔ Ｍｅｅｔｉｎｇ」により、パソコンのＣＲＴ画面へ提示される。 (11）遠隔地で入力、修正作業しているオペレータは、（９）の字幕付映像により、システムが正常に稼働していることを確認する。 図1 システムの構成 ５．おわりに 　今後の課題は次の通りである。 （１）インターネットを介した連弾入力方式リアルタイム字幕提示システムを様々な場面で活用し、問題点、改良点を明確にする。 （２）音声出力ブロックの機能を、文字入力ブロックの文字修正用パソコンへ組み込む。 （３）字幕提示ブロックの字幕挿入装置の機能を、字幕提示ブロックのパソコンへ組み込む。 参考文献 [１]小林 正幸、西川 俊、石原 保志、高橋 秀知：“聴覚障害学生のためのリアルタイム字幕提示システム（２）”、信学技報、ＥT93-107,93,458,pp9-14,(Jan,1994） [２］西川 俊、高橋 秀知、小林 正幸、石原 保志、柴田 邦博：“聴覚障害者のためのリアルタイム字幕表示システム”、信学論D-Ⅱ、J78-D-Ⅱ,11,pp､1589-1597,(Nov.,1995） [３］小林 正幸、西川 俊、石原 保志、高橋 秀知：“聴覚障害者のためのキーボードの連弾入力方式によるリアルタイム字幕表示システム，'、映像情報メディア学会誌、VOL51,No.6,pp886-895,(Jun.,1997） [４］DavidAllen：“VisualBasicネットワークゲームプログラミング”,1997,ソフトバンク