今井翔太の作品一覧

わかりやすい。
最後の松尾先生との対談だけでも読んでもらおうかな。

メタ認知あげる、やる人はやる。
研究でも仕事でも同じ。
人に教えを請う時点で出遅れてるってのも、その通り。

知識の記述におけるボトルネック（暗黙知、枚挙の困難性、記述の解像度など）を、教師あり学習では正解例の提示で解決し、言語モデルでは組み合わせ的創造性で（おそらく）解決している。

ChatGPTの実現には、学習の面とモデル構造の面でブレイクするーがあった。学習の面では、(1) 自己教師あり学習（ラフに言うと穴埋め問題）による教師データを膨大に増やしたこと、加えて、InstructGPTにおいて、(2) 教師ありファインチューニングすなわちプロンプトと回答の正解例による学習）と、(3) RLHF (Reinforcement Learning From Human Feedback)すなわち人間に...続きを読むよる評価に基づいて強化学習で報酬モデルを学習し、その報酬モデルを回答の好ましさの評価に用いたことが、重要であった。また、モデル構造の面では、注意機構（入力内の予想間の関係を計算して注目すべき情報を重み付けする）を備えるトランスフォーマーが重要であった。

言語生成については言語モデル、画像生成については拡散モデルが支配的。

スケーリング則と能力創発。

少数例プロンプト、CoTプロンプト。


研究プロセスの自動化：課題策定、研究実行、成果発表のフェーズごとに、生成AIの読解・執筆・アイデア生成の機能を利用。

Computational creativity：組み合わせ的創造性、探索的創造性、革新的創造性。

画像や音楽に対して、プロンプトという言葉で制御できる範囲が限定的。ControlNetのような、細かい特徴をお好みで制御することを容易にする技術は他の分野でも発展しそう。

人類の知的活動のすべてを根底から変えてしまう生成AIの歴史から現状さらに将来と、わかりやすく整理されておりとても刺激的でした。まさか自分が生きているうちにこのようなものが出現すると思っていませんでしたので、本当に「間に合ってよかった」と思っています。

さすがまさに強化学習・AIの研究者自身による著書で。ChatGPTやMidjourneyがどのような仕組みでできているのかをここまでわかりやすく説明できるとは。新書の分量ながら今後の見通しや著作権法などまんべんなく触れられており、単なる「こういうことができる」というのではない知識を得るのに良書。

日常系温泉物ならではの熱さと、現代と異世界を結ぶ友情物の熱さが合わさった良い湯加減の作品。
今後リリース予定であるソシャゲ版の前日譚にあたる原作ということで、秋季CBTへの応募と同時に購読。
正直、最初はあらすじ記載通りにきらら系のゆる〜い空気で、温泉同好会と異世界転移してきた魔女の交流を描いていくものだと思っていたら、ラストの魔法バトル(この作品魔法バトルやるんだ……)が『友』を感じるホットな仕上がりで感動しました。
『史上最高に“ふろい”異世界交流譚』というキャッチコピーに偽りなしです。
作中に出てくる温泉地のほとんどが実在するので、画像検索で調べつつ読み進めるのはなかなか面白かったですね...続きを読む。
「やっぱり温泉はいいな」と思える仕上がりでした。

頑張れよ、IP創出プロジェクト──。