|
【講座の趣旨】
生成AIの発展に伴い、研究開発におけるプログラミングの世界は大きく変化しつつある。 ChatGPTやClaude等のLLMを活用することで、自然言語からのコード生成、デバッグ、リファクタリン
グ等が飛躍的に効率化され、実装プロセスが変わりつつある。本講演では,AIを効果的に活用したい技
術者を対象に、LLMの基礎理論から実践的なプログラミングテクニックまでを解説する。 Chain
of Thought、In-Context Learning、Reasoning等のLLMの仕組みを理解した上で、効率的なプ
ロンプト設計、複数AIの使い分け、既存コードやAPI仕様書の活用法等、研究開発における具体的な実
装テクニックを紹介する。
【講座内容】
1.イントロダクション
1.1 講演の目的と対象者
1.2 AIとプログラミングの現状
2.AIの進化と生成AIの登場
2.1 Deep learningからTransformerへ
2.2 ChatGPT登場による転換点
2.3 自然言語からコード生成の実現
3.主要なAIサービスとツール
3.1 チャット形式AIサービス
3.2 AI開発ツールの普及
4.本講演のスコープ
5.LLMの基礎知識
5.1 AIとLLMの定義
5.2 LLMの動作原理
5.3 LLMの汎用的能力の獲得
5.4 スケーリング則と性能向上
6.AIサービスの仕組み
6.1 ユーザとAIの対話システム
6.2 プロンプトの重要性
6.3 会話履歴の管理とKVキャッシュ
7.LLMの機能評価
7.1 言語変換機能
7.2 辞書・知識・データベース機能
7.3 アイデア生成機能
8.重要な基礎概念
8.1 トークンとコンテキストウインドウ
8.2 Chain of Thought
8.3 In-Context Learning
8.4 Reasoning
9.実践テクニック
9.1 COTとICLを活用した効果的な使い方
9.2 既存コードとAPI仕様書の活用
9.3 複数LLMの併用と使い分け
10.具体的な実装事例
10.1 ICPのSwift実装
10.2 pycolmapによるSfM
10.3 JupyterLabを用いた開発手順
10.4 効率的な開発のコツ
11.AIの限界と今後
11.1 現状のAIでできないこと
11.2 AIコーディング時代に必要なスキル
11.3 AIとの向き合い方
12.まとめ
12.1 AIプログラミングの本質
12.2 LLMへのコンパクトな指示の重要性
【質疑応答】
|