お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用申請及び審査がございます。詳細はヘルプページをご確認ください。

このエントリーをはてなブックマークに追加

Mar

30

機械学習のエンジニアのためのTransformers読書会 #35

Registration info

参加枠1

Free

Attendees
7

Attendees
hahaharock
_miyake
yuki99999999999999999999999999
HaradaMasahiro
KanSAKAMOTO
kozo2
fregean
View Attendee List
Start Date
2024/03/30(Sat) 22:00 ~ 23:00
Registration Period

2024/03/17(Sun) 12:01 〜
2024/03/30(Sat) 23:00まで

Location

オンライン

参加者への情報
(参加者と発表者のみに公開されます)
出席登録
(イベント開始時間の2時間前から終了時間まで、参加者のみに公開されます)

Description

要旨

この読書会は「機械学習エンジニアのためのTransformers」を取り上げます。

毎回担当者を決めて、本に軽く目を通しながら、担当者が公式リポジトリのコードを実行していきます。参加者の手元に本がある前提で、発表用のスライドなどは用意しません。この読書会は担当者の負荷をできるだけ小さくするという方針で実施します。このような進め方が初めてなので、会を進めながらより良い方法を模索していきます。

各回の担当者は事前にコードの動作確認だけお願いします。資料の準備は必須ではありませんが、準備して頂いても大丈夫です。この読書会では、担当者に「よくわかっている」ことを求めません!むしろ "「わからない」を連発して周りからの助けを求める感じ" でOKです!ですので希望者になることを「重荷に」感じてもらうことはありません!

不特定多数が参加するオンラインイベントのため、原著の内容そのものは画面共有しない方針とします。ご了承ください。

一方、下記の原著のための GitHub リポジトリの内容は画面共有可能と捉え、活用する方針です。

開催ペースは月に2、3回程度を想定しています。毎回、最後に次以降の開催日時を決めます。基本的に土曜日の22:00〜23:00の枠として、日は担当者、オーガナイザーの都合で決めさせてください。

開催日時

2024年3月30日(土)22:00〜23:00

場所

DiscordのPyData-JPのボイスチャンネル「PyDataOsaka読書会」で行います。 当イベントに参加申し込み頂くと、DiscordPyData-JPのサーバへの招待リンクを当イベントページで確認できます。

書籍の目次

今回は「10.2.4 トークナイザーの学習」から読んでいきます。

10 Transformerをゼロから学習する
    10.2 トークナイザーの構築
        10.2.4 トークナイザーの学習
        10.2.5 Hubにカスタムトークナイザーを保存する
    10.3 ゼロから始めるモデルの学習
        10.3.1 事前学習の目的の話
        10.3.2 モデルの初期化
        10.3.3 データローダーの実装
        10.3.4 学習ループの定義
        10.3.5 学習の実行
    10.4 結果と分析
    10.5 まとめ

当日の流れ

時間 内容
22:00-22:05 概要説明
22:05-22:50 読書会
22:50-23:00 次回日時・担当者の決定

その他

  • PyData Osakaについてはこちらをご参照ください。
  • hackMDの使用方法についてはこちらをご参照ください。

Media View all Media

If you add event media, up to 3 items will be shown here.

Group

PyData Osaka

Number of events 68

Members 487

Ended

2024/03/30(Sat)

22:00
23:00

You cannot RSVP if you are already participating in another event at the same date.

Registration Period
2024/03/17(Sun) 12:01 〜
2024/03/30(Sat) 23:00

Location

オンライン

オンライン

Attendees(7)

hahaharock

hahaharock

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

_miyake

_miyake

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

yuki99999999999999999999999999

yuki99999999999999999999999999

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

HaradaMasahiro

HaradaMasahiro

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

KanSAKAMOTO

KanSAKAMOTO

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

kozo2

kozo2

機械学習のエンジニアのためのTransformers読書会 #35 に参加を申し込みました!

fregean

fregean

I joined 機械学習のエンジニアのためのTransformers読書会 #35!

Attendees (7)