徳永拓之のレビュー一覧

* 全体的にとてもいい本だと思った。筆者の知見を伝えようという意欲が感じられた。
** それぞれ説明に入る前に必要性について言及するように気をつけているように感じた。
* 今後も何度か読みなおすことになりそう。
* 付録に学習アルゴリズムの適用順序が書いてあったりするのもよかった。
* 3章のデータ...続きを読む構造辺りだけ、なんだか曖昧な感じがしたのが残念。

擬似コードがたくさん載っていてわかりやすい。
また、アルゴリズムの説明が多いので、深くまで日本語入力の仕組みをしることができる。
日本語入力を勉強する人だけでなく、自然言語処理を勉強する人は読むべき本。

本書の内容自体は．オンライン学習でもバッチ学習でも適用できるような機械学習の原理が大半である。他の本に比べると最適化手法の紹介数が多いか。

機械学習の概要から書き起こしてくれ、サボートベクターマシン、パーセプトロンに触れるとともに、オンライン機械学習の長所、短所から、ディープラーニングまでカバーしてくれている。タイトルから分かりにくいが、これ一冊読めば、機械学習の概要を掴めると思う。理解するにはやはり数式を追わなければならないが、この本...続きを読むは比較的その負担が少ないほうだと思う。

NLP系の本は敷居が高くて敬遠していた。
しかし、少しづつこの辺を理解できるようになってきたし、
ちょっと検索などでN-Gramや辞書などを知る機会があったりNLPerとの交流などを経験して、ついに読んでみた。

日本語入力における処理の問題や様々なグラフの考え方、ビタビアルゴリズムなど、以前に比べ...続きを読むてだいぶすっと入ってくるようになった。

SVMや構造化SVM、CRFなどについても詳細に言及されていて良書。
まあ、執筆陣を見てもそれは伝わるか。
とりあえず、自身の成長を少しだけ感じられて良かった。

■目次
★第1章　日本語と日本語入力システムの歩み
1.1　コンピュータで日本語を扱うということ
1.2　日本語を入力するということ
1.3　日本語入力とかな漢字変換
1.4　日本語入力のはじまり
1.5　かな漢字変換のはじまり
1.6　単文節変換から連文節変換へ
1.7　2強時代の到来～統計・機械学習ベースのアルゴリズムへ
1.8　Web検索各社のかな漢字変換エンジンへの参入
1.9　携帯電話における日本語入力
1.10　まとめ
★第2章　日本語入力システムの概観
2.1　ユーザ側から見た日本語入力
2.2　システム側から見た日本語入力
2.3　ひらがなの入力方法
2.4　文字入力フレームワークのアーキテクチャ
2.5　かな漢字変換エンジンのユーザインタフェース
2.6　かな漢字変換エンジンのモジュール構成
2.7　かな漢字変換器の作り方
2.8　まとめ
★第3章　かな漢字変換エンジンに用いられるデータ構造
3.1　かな漢字変換とデータ構造
3.2　データ構造とは
3.3　かな漢字変換に用いるデータ構造
3.4　ハッシュテーブル
3.5　カッコウハッシュ
3.6　トライ
3.7　ダブル配列
3.8　LOUDS
3.9　その他データ構造のテクニック
3.10　ライブラリの入手について
3.11　まとめ
★第4章　かな漢字変換システムの実装
4.1　かな漢字変換をどうやって実現するか
4.2　グラフの作成
4.3　最短経路問題を解く
4.4　単語間の線の距離を決める
4.5　学習用のデータを作る
4.6　まとめ
★第5章　統計・機械学習のアルゴリズムとその応用
5.1　機械学習とは
5.2　二値分類
5.3　構造学習とかな漢字変換
5.4　構造化SVM
5.5　条件付き確率場（CRF）
5.6　統計的かな漢字変換とは
5.7　言語モデル
5.8　かな漢字モデル
5.9　変換精度を評価する
5.10　変換誤りへの対処
5.11　まとめ
★第6章　日本語入力のこれから
6.1　日本語入力の未来予想
6.2　予測入力
6.3　かな漢字変換器の改良に向けて
6.4　今後の学習に向けて
6.5　まとめ
★付録
A.1　数学的な基礎知識
A.2　確率の基礎知識
A.3　学習アルゴリズムの歴史
A.4　機械学習を分類する
A.5　いろいろな学習アルゴリズム
A.6　CRFの目的関数の勾配の導出

文字の種類が英語より遥かに多く同音異義語も大量な日本語のかな漢字変換に関する本。文字列マッチングから機械学習までとにかく内容が濃い！一読しただけでは理解できない箇所も多々あった。今や人々が毎日当たり前に使っている道具に込められたエンジニアの魂に触れられる一冊。

日本語入力を行う際にどのようなアルゴリズムが使われているか擬似コード付きで解説している本。データ構造の話やプログラム実装時の注意点が説明されていて理解が進む。それでも解説が飛ぶところは理解し切れていない。

機械学習のアルゴリズムが実装例付きで紹介されてるし、数式の「ココロ」まで解説があり充実。作者がPFIの方ときづいて納得。

コンピュータの普及した今、いや今だからこそ
まだまだ変化を続ける日本語入力。
自然言語の特性として、絶対的な解法は存在しないのだが
それでもその時その時の実用の範囲で様々な技術が活用されている。

データ構造とアルゴリズムあたりの話は単純に面白かったけど、
その次の章は数式が多くて正直ついて行けなか...続きを読むった。
自分には数学能力が不足してるようだ。

分類や統計や評価なんてのは、チェスや将棋のAI技術もそんな感じなのだろうかと想像する。
資源を活かすためには、いかに切り捨てられる計算を切り捨てるか。
不要だから捨てるのではなく、効果が少ないからと割りきる。
誰もが利用しているシステムで、そんな不安定な試行ふぁ続けられてるのは面白い。

今後も技術的にどんどん変わっていくのだろうけど、
どんなふうに人の感覚まで近づいていくのか、はたまた人の感覚をも超える時が来るのだろうか。

個人がおいそれと足を踏み入れられる業界ではないけれど、
そのアプローチは大いに参考になる。
数式は自分では理解しきれなかったけど、サンプルの擬似コードも随所にあるので時間を置いて読み返してみたいと思う。

日本語入力に関する技術に特化した書籍は現時点でこれ以外にないと言える。そういう意味で大変貴重だし概要を理解するには最適。ただ、わかりやすさを追求したためか、表現が漠然としていて逆に理解しづらい箇所がいくつかあった。

実務でビッグデータ的な方面について手を出し始めたので会社の蔵書からいくつか選んで読みましたが、実用的な入門本ていう感じで良かったです。