元々、アルバイトとして書店に勤めていた時に、 電子書籍やそれに関することを漠然と考えていました。 丁度そんな時、接客時にお客さんとしてきたお婆さんが、 「書籍の電子化も良いが、子供には絵本を呼んでほしいよね」 というお話をされていました。 今回の実験に使ったサンプル文書も、 アルバイトをしている書店の児童書担当者に売れている本を聞いて選びました。

私はIT側の人間として、今と違うけど、今と同じようなかたちで読める、 もうちょっと楽しませることができなかと考えていました。

絵本の場合、元々、手荒に扱われても良いように厚みがあったり、 壊れないようにできていたり、絵本は普通の書籍と 違う形態をしているという面があります。 何でも電子書籍にするのではなく、 そういうところを大事にしたいですね。

絵本のことを先生と相談したところ、うまく噛み合ったという感じでした。

読み聞かせは日本だけではなく、絵本がある世界では習慣としてあります。

日本では本の読み聞かせは小学校3年生までは結構行なわれています。 その時は教師ではなく保護者の方がお読みになる場面が結構あります。 読み聞かせが苦手な人もいますが、 やりたい人だけがやるという環境ではないようです。

実質的に読み聞かせの効果が定量的に示されているテストはないようです。 ただ、文科省が出している情報には、読書と学力の直接の関係はないが、 間接的には関係があるというデータがあります。 読書に親しむための読み聞かせという意味もあるようです。

親と子が場を共有できる点です。 ライブ感みたいなものがあるんです。緊張感というか。。。

ミュージカルを生で見る人はいなくなりません。 テレビで見ることもできるにも関わらずです。 そう考えると、媒体が本であるかはともかく、 読んでもらうという行為は無くならないかと思います。

親子が空間を共有する一つの方法として読み聞かせがあると考えています。 字が読めなくても皆と物語りを共有することの効果があります。

幼児における本読書のICTによる拡張システムの提案と実装という題で 研究を進めていました。

絵本にデバイスを一つ取付け、ページのセンシングを行って、 各ページに応じて光とか振動とか音とかを出して、 子供たちが楽しんで読めるものを考えました。 教育的効果よりも楽しさを第一に考えた上で、 将来的にはエフェクト、アクチュエーションを教育に向けようという考えで、 その時は面白くすることに注力していました。

学部時代に実験として同級生達に読み聞かせを依頼したのですが、 読み聞かせの経験がない同級生もいました。 これにはそうかと納得しました。 読み聞かせには、ただ文章を読むのとは 違うスキルが必要だということが分かりました。 ここから読み聞かせに興味を持ち、 修士に入って読み聞かせ支援の方に注力して研究を進めています。

今回の研究では音声認識を利用して、読み聞かせの支援を行います。 HMD(Head Mount Display)を使って読み聞かせの最中にナビゲーションやガイドを出し、 これによって読み聞かせがうまくできるという切り口で研究を進めています。 音声認識用のマイクとHMDを身に着けて読み聞かせを行います。

一般的には話し方のイントネーション、緩急、間の置き方などです。 保育士さんと保護者の方に どういう部分を意識して読み聞かせをしているかのアンケートを取りました。 この結果、抑揚、大きさ、声色、テンポとスピードを質と捉えて評価することを考えています。

子供が楽しんでいるかどうかという評価が難しいです。 最初は内容に関するクイズも考えたのですが、 余り差がでないこともあります。 逆に読み聞かせている方がどう感じるのかを第一と考え、 評価指標として考えています。 加えて今回は、声色が変わっているかなど、 ナビゲーションのタスクができているかも評価したいと思っております。

書店で働いていて際のツテで、 読み聞かせのプロの方にはインタビューさせてもらったり、 講習会に連れて行ってもらったりしました。

プロの話があり、それに準じていれば、 ナビゲーション成功ということになります。 受け取り手からもアンケートを取り、両方で評価するつもりです。 一概に抑揚や声色が変わったから受け取り手が面白いかどうかという ちゃんとしたデータがありません。 保育士や保護者が読み上げた音声データがあるので、 まずはこれに準じてみようということです。

実は保育士や保護者へのアンケート結果から、 絵本の位置をしっかりすることが原則としてあることが分かりました。 しかしこれに関しては、立って話すのか座って話すのか、 子供の人数などの場面に関係しますので今回は外しています。

ナビゲーションを表示させる方法はいろいろ考えています。 カラオケのように声の大きさを示したり、 表情を表すために顔文字のようなものを表示させたいです。 そうなると表情も評価したいですね。 読み聞かせの場合、声を怖くしても表情が怖くないと、 結果として怖くなりません。

人間の基本表情はポール・エクマンという心理学者が提案していて、 今回はこれをアイコンとして表示させます。

ナビゲーションは読み手の邪魔にならないことが大事で、 その為には画面の情報量が多くできません。 メーターとテンポと表情をどう画面に表示するかという UI(User Interface)も検討出来たらよいですね。 実験の中で効果的でなかったものは表示させないようにするので、 最終的にもしかしたらメーターはなくなってしまうかもしれません。

字が読めない幼児に関しては、読み聞かせは無くならないでしょう。 ただ、小学校低学年に関しては何かに置き換わっていくかもしれません。

読み聞かせの効果については、 やはりコミュニケーションに触れている論文が多いです。 今後の課題として、機械音声と肉声の違い、側に人がいる時といない時でどう違うか ということがあげられています。

今回の研究の先の話なんですが、 聞き手に対して質問し、会話ができるシステムも考えられます。 読み聞かせでは 例えば「主人公は何を考えているかなあ？」「次に何をすると思いますか？」など 読み手と聞き手の会話ができます。 これがデジタルだとなかなか難しい、 デジタルはある程度決められたことしかできません。

もともとオンライゲームをよくやっていました。 グラフィックボードも性能がよくなかった時代で、 どうしたら画面がスムーズに動くのか、 自分のゲーム環境をよくするために調べたのが 関心を持ったきっかけです。

入学してからハードのことも学びながら、 ソフトウェア方面に移行できました。 環境として良かったと思います。

プログラミングは結構苦手でした。 うちの研究室ではプログラミングは手段という部分が大きいので、 動けばいいという面があります。 自分たちの遣りたいことの結果が プログラミングではないという考え方です。

勿論、他の研究室では特定のプログラミング言語に特化しているところもあります。

咀嚼の回数が増えた、姿勢がよくなった、 絵本を楽しませることができたという結果を目指すので、 プログラミングはそこまで難しいことはないと思います。 ですので苦手な人でも学科の授業をちゃんと真面目にやっていれば、 困ることはないと思います。 私も大学に入るまではプログラミングの経験はありませんでした。

この研究室が若かったいうのもあります。 ロペズ先生はやりたいことを言えば、 やりたいことを尊重してくれ、 ウェアラブル環境で課題をどう解決するか、相談に乗ってくれます。

修士課程への進学は色々ぐらついたところはありますが、 結果としては良かったと思います。

今思うと学部の時はやりたいことがフワフワしていました。 学部時代に就活をしている時に、就職は今じゃないと感じました。 修士課程は研究したいからという人もいますし、 やりたいことがあってそれが近いからやっているという人もいますし、 将来を明確にしたいという人もいます。

評価が難しい、確立していないので、 自分なりに評価方法を探していく必要があるというのが面白いんじゃないかと思います。 結果が出なくても、結果が出なかったという結果が残るので、 その部分は無駄にならないと思います。

修士を卒業したら出版社に就職します。 編集か営業として総合職採用されました。 どの雑誌、どの書籍に行くかはわかりません。 私はやりたいことがハッキリ決まったので博士にはいきませんが、 それも今の研究があってのことだと思います。

子供たちが本当に楽しめる雑誌や児童書を創っていきたいです。 雑誌は今、業界として微妙ですが、児童書は逆に売れています。 最終的にはメディアミックスを使ってアニメの方まで行けたらいいなと思います。