Nishimoto2006 wit03 v5-compact
- 2. 2 はじめに ? 視覚障害者のコンピュータ利用 ? 現状＝音声?点字／キーボード ? コンピュータとの自然な音声対話への期待 ? どのような音声対話システムが必要か？ ? 人間同士の対話に学ぶべき ? 普通の人の会話ではなく「達人の技」に注目したい ? 対面朗読者 ? 視覚障害者を支援する「達人」
- 4. 4 38 3:20 うん～。全体的にあのー、全 部こう和食でその中から選ぶ という 39 そうですね、えーと全部、全体 に和食でございますが 40 はいはい 41 その中に、今日はお値段関係 ないので、 42 えぇ 43 5000円のオードブルを頼んで もいいかも。 44 ははは???それはそれとして 45 総論がそうですね 46 はいはい 47 えーと、
- 5. 5 82 5:05 あなたの食べたそうな 83 うーん 84 全体が似てるのでお勧めする 私も迷います。 85 もう一度、すみません、もう一 度大きな分類を読んでもらえ ますか。なんとか御膳とか。 86 5:19 特選御膳ていうのはですね、 87 はいはい 88 そのなかの例えば、例えば申 し上げてみますと、てんぷら 御膳だったり、 89 あ～えぇ 90 ビーフステーキ御膳だったり、 91 はい、えぇ 92 和風ハンバーグ御膳だった りってな感じですね。 う～ん
- 6. 6 299 14:12 名前だけ 300 名前だけ言いますね 301 えぇどうぞ。 302 2、チキンカツ。 303 はい。 304 3、チキンカツ＆ハンバーグ。 305 はい。 306 4、天むす弁当。 307 おぉ。 308 5、洋風ミックス。 309 はいはい。 310 6、天ぷら。 311 はい。
- 7. 7 603 34:02 どれとどれは捨てますか？どれ を浮上させますか？ 604 いやー今のところ、もう私の中で は、ビーフステーキ御膳か、カツカ レーか、ステーキカレーか、天む すか、あとはなんだっけな、あとは その、、、松花堂の中かっていう気 にはなってるんですが。 605 まだ到着地点は遠いですね～。 606 あ～。そっかカレーはサラダが付く んですよね？ 607 あぁそうでしたね、サラダ付きと なってますけれどもその写真が ないだけに 608 まあそんなに 609 サラダのそのボリューム、たとえ ば海草サラダなのか、チキンサ ラダなのか、なんですか、
- 8. 8 695 40:40 そうしましょう。 696 そうですね。じゃぁ松花堂弁当、 Eのあやめをお赤飯を入れてと 697 はいはい 698 こういうことになりましたが 699 はい 700 はい、よろしいですか？ 701 まぁね、あまり悩みすぎても仕 方がない。けっこうなやんだなぁ。 702 このようにしてメニューを選んだ ことがありますか？ 703 ここまで熟考したことはないなぁ。 704 じゃぁ以上決まったようでござい ます。ありがとうございました。
- 9. 9 対面朗読技術の有効性（仮説） ? 1)ショッピングカートモデル ?階層化メニューから何かを選択する ? 2)音訳技術 ?視覚に依存しないで情報を伝える ? 3)対面朗読技術 ?3a) 大局的理解（全体把握、比較、再構造化） ?3b) 双方向性（確認、共同作業）
- 10. 10 1) ショッピングカートモデル ? 階層化メニューから選択 ?リスト：アイテム、カテゴリ ?説明：アイテム、カテゴリ ?操作：カートに入れる（出す） ?操作：カート内容の確認、比較、決定 ? 多様なアプリケーションとの類似性 ?レストランのメニュー選択 ?操作マニュアルや辞書の検索 カツカレー ステーキカレー 天むす 松花堂 特選御膳 ??? 松花堂弁当 スタンダード1 ???? 階層化メニュー ショッピングカート
- 11. 11 音声対話によるモデル化 ? 対象の全体把握 ? リストの読み上げ ?気になったアイテムはカートに入れる ?複数の候補アイテムがカートに入る ? カート内容の詳細説明 ?詳細情報を聞いて取捨選択 ? カート内に残ったアイテムを確定 カツカレー ステーキカレー 天むす 松花堂 特選御膳 ??? 松花堂弁当 スタンダード1 ???? 階層化メニュー ショッピングカート
- 12. 12 2) 音訳技術 ? 視覚障害者のための音訳図書の作成 ? ノウハウが蓄積されている ? ボランティアのためのマニュアルの存在 ? 視覚に依存しないで情報を伝える ? 言語情報 ? 記号、同音異義語、ルビ、注など ? 図表や写真の説明 ? 非言語情報 ? 抑揚、ポーズ、アクセントなど
- 13. 13 音訳マニュアルより：韻律 ? (H 私たち)の学校は (H 山の上)に(L あります)。 ? (H 今日は)(H 運動会)の予定でしたが、 (H 朝から)(H 雨が)降っていたので 中止に(L なりました)。
- 14. 14 音訳マニュアルより：ポーズ ? かわいい(P)女性のための喫煙具が 人気の的です。 ? 有名な(P?)大学の(P?)先生がいる。 ? 太めの(P)時計のバンドを買った。 ? 私の背の高さ位の(P)リンゴが たくさんなっている木。
- 15. 15 3) 対面朗読技術 ? 視覚障害者に本などを読むサービス ?双方で相談しながら進める ?家電操作、ケータリングなどの支援も ? ノウハウを記した文献が少ない ? 熟練者の振る舞いを観察するべき
- 16. 16 対話実験 ? 手順：書き起こし、意図記述、タグ付与 ? 対話の所要時間＝約40分 ?発話数の合計＝約700 ?相槌＝183 （頷き：ほとんどなし） ? 利用者の談話行為＝69%が「依頼」と「示唆」 ?利用者の傾向＝まず全体を聞く ? 朗読者の発話＝96%が「陳述」 ?利用者の質問や要望に答える
- 17. 17 仮説1) の検討（カートモデル） ? 対話＝ショッピングカートモデル ? ただしアイテムとカテゴリが混在可 ?アイテム「カツカレー」 ?カテゴリ「松花堂」（アイテム「あやめ」「橘」） ? 朗読者が戦略を提案 ?「今日はこれが食べたい???てなやり方も ありますでしょ」（２６：５０）
- 18. 18 仮説2) の検討（音訳技術） ? 詳細説明＝写真の言語化など ?「お弁当の折り詰めの中の配置は??」（０６：０５） ? リストの読み上げ ?アイテム総数の読み上げ（１３：４７） ?アイテムの通し番号の読み上げ（１４：５２） ?リスト読み上げの終了を宣言
- 19. 19 仮説3a) 大局的理解＝全体把握 ? 「何があるか」＋「何がないか」 ?「全体に和食です」 ?「麺類はなさそうですよ」 ? 知識が必要（利用者が何を求めているか） ? 利用者は例外の有無を確認する ?「冷やし中華とかはありますか？」 ?「うなぎは？」
- 20. 20 仮説3a) 大局的理解＝メタな議論 ? カタログの構成 ?「１つのメニューに１つの写真がついている？」 （０６：３４） ? アイテムの命名 ?「名前から内容がわからないネーミング？」 （０７：５４）
- 22. 22 仮説3a)大局的理解＝視点の変更 ? 効率化：省略の利用 ?「御膳、省略しますよ。 洋風ハンバーグ（御膳）???」（２１：５０） ? ユーザの興味に応じて呼び方を変える ?「AB若菜、桐」 →「（価格で）1500, 2000, 2500, 3000???」 （３６：１１）
- 23. 23 仮説3b) 双方向性 ? 要求の確認 ?「希望は和風、洋風、中華、天むす、 だいたいこんな感じ？」（２０：４９） ? 理解の確認＝用語を理解できるか ?「かんぴょう分かりますか？」（２９：５１） ? 記憶の確認 ?利用者「天むすが３つで、あとは??」 ?朗読者「そうですね」（２９：０５）
- 24. 24 仮説3b) 双方向性＝共同作業 ? 読み上げ中の相槌 ? 朗読者の誤りを相槌の代わりに指摘 ? 「５．鳥照り焼き」「はい」「５．ビーフステーキ」 「あ、６ですね」（２１：５８） ? 発見（スタンダード１と２の違いは？） ? 「１と２の違いってわかりますか？価格帯ですか？」 （１２：２１） ? 「700円800円代が１、２が1200円クラス、みたいですね」 （１２：４０）（１３：０５）