第98回人工知能セミナー(2025.7.11)「大規模言語モデルのための強化学習」
2025年6月17日
人工知能学会 企画委員会
| 主催： | 一般社団法人人工知能学会 |
|---|---|
| 実施日： | 2025年7月11日（金）17:00-19:30 （前後する可能性がございます） |
| 実施形式： | オンライン開催 |
| オンライン定員： | Zoomウェビナー 500名程度 オフライン会場はございません。 |
| 参加費： | 正会員・賛助会員・学生会員： 無料 非会員： 5,500円（10%消費税込み） 学生非会員： 1,100円（10%消費税込み） これまでの人工知能セミナーでは正会員・賛助会員・学生会員の参加費を有料にしていましたが、オンラインセミナーは会員の参加費を無料とさせていただきます。 JSAIへの新規入会費用は、正会員は入会費2,000円・年会費10,000円、学生会員は入会費1,000円・年会費4,000円です。数回受講されるのであれば入会いただく方がお手頃になりますので、この機会にぜひ人工知能学会の入会をご検討ください。 |
| 照会先： | account[at]ai-gakkai.or.jp |
講演概要
人工知能学会では、人工知能研究の最先端情報をさらに幅広く・継続的にお届けするため、2025年より完全オンライン形式のセミナーシリーズを開催しています。
本シリーズでは、人工知能に関する様々な分野の専門家をお招きし、1回あたりのセミナーをよりコンパクトにしつつ開催回数を増やすことで、気軽にご参加いただきながら、「いま知りたい」AIの最新動向を把握していただけます。
今回は、陣内佑様（サイバーエージェント）をお迎えし、大規模言語モデルのための強化学習について詳しくご講演いただきます。
学会員・非学会員を問わずどなたでもオンラインでご参加いただけますので、ぜひこの機会にお申し込みください。
講演者
陣内佑 様（サイバーエージェント）
- 講演タイトル：大規模言語モデルのための強化学習
- 講演概要：
本講演では、基礎編と実践編に分けて大規模言語モデル（LLM）における強化学習、Reinforcement Learning from Human Feedback（RLHF）について解説します。
基礎編では、GPT-1からChatGPTやGPT-4へと至るLLMの開発史を振り返りながら、事前学習、SFT（教師あり学習）、RLHFの各フェーズの概要を紹介します。また、DeepSeekの開発で用いられたGRPO手法や、現在も未解決の課題についても取り上げます。
実践編ではより実践的な内容として、trlライブラリを用いた実際の実装方法を紹介します。市販のGPU（VRAM 16GB程度）でRLHFの実験を行う方法、学習を効率化する工夫、よくある失敗例とその対処法など、実際に強化学習に取り組む際に役立つ情報を幅広く共有します。 - 講演者紹介：
CyberAgent AI Lab所属のリサーチャ。専門分野は強化学習、プランニング、探索アルゴリズム。犬や猫や動物が好き。
プログラム
| 17:00-17:05 | オープニング |
| 17:05-18:10 | 基礎編：なぜLLMに強化学習が使われるのか（陣内様） ご発表50分+ QA15分を想定しております。 |
| 18:10-18:20 | 休憩 |
| 18:20-19:25 | 実践編：1 GPUでLLMをファインチューニングするためのコツ（陣内様） ご発表50分+ QA15分を想定しております。 |
| -19:30 | クロージング（質疑応答終了後に5分間程度） |
ターゲット
以下のような方をターゲットとします。人工知能学会の学会員でない方でもご参加いただけます。なお、参加者は機械学習・AI技術の基礎を理解していることを前提とします。
- LLMのための強化学習の動向に関心のある研究者・技術者
- LLMと強化学習の関連に関心のある方
録画コンテンツのオンデマンド視聴等について
ウェビナーの様子は運営サイドで録画します。レコーディング内容は、人工知能セミナー開催後に期間限定で参加者が視聴できるようにする予定です。
個人のPCやスマホやカメラ等に許可なく録画・撮影されることとないようお願いいたします。
不測の事情により運営サイドの判断で配信を停止する場合がございますことをご承知おきください。
また、本セミナーの内容は人工知能学会公式YouTubeチャンネルで後日公開する予定です。こちらは一部を抜粋して公開いたしますので、全ての内容を見てみたい方はセミナーへのご参加をお願いいたします。
担当者
- 企画委員（セミナー担当）： 太田真人（Sakana AI）
- 企画委員（セミナー担当）： 丹羽彩奈（MBZUAI）
第98回人工知能セミナー 参加申し込み
人工知能学会に未加入の方は、この機会にぜひ本学会のご入会をご検討ください。
→入会案内のページ
第98回人工知能セミナーへのお申込みフォームはこちら(Peatix)
Peatix:参加申込
参加申込みいただけますと、開催日前日までにご登録のメールアドレス宛にZoom URLなど参加方法等に関する情報を送付致します。