[フレーム]
はてなブックマークアプリ

サクサク読めて、
アプリ限定の機能も多数!

アプリで開く

気に入った記事をブックマーク

  • 気に入った記事を保存できます
    保存した記事の一覧は、はてなブックマークで確認・編集ができます
  • 記事を読んだ感想やメモを書き残せます
  • 非公開でブックマークすることもできます
適切な情報に変更

エントリーの編集

loading...

エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。

タイトルガイドライン

このページのオーナーなので以下のアクションを実行できます

タイトル、本文などの情報を
再取得することができます
コメントを非表示にできます コメント表示の設定

ブックマークしました

ここにツイート内容が記載されます https://b.hatena.ne.jp/URLはspanで囲んでください

Twitterで共有

ONにすると、次回以降このダイアログを飛ばしてTwitterに遷移します

907users がブックマーク コメント 30

ガイドラインをご確認の上、良識あるコメントにご協力ください

0 / 0
入力したタグを追加

現在プライベートモードです 設定を変更する

おすすめタグタグについて

よく使うタグ

GPT-1→GPT-2→GPT-3→GPT-3.5→ChatGPT→GPT-4までの進化の軌跡と違いをまとめてみた|スタビジ

907 users toukei-lab.com

ガイドラインをご確認の上、良識あるコメントにご協力ください

0 / 0
入力したタグを追加

現在プライベートモードです 設定を変更する

おすすめタグタグについて

よく使うタグ

はてなブックマーク

はてなブックマークで
関心をシェアしよう

みんなの興味と感想が集まることで
新しい発見や、深堀りがもっと楽しく

ユーザー登録

アカウントをお持ちの方はログインページへ

記事へのコメント30件

  • 注目コメント
  • 新着コメント
blogpants
進化の仕組みを理解しようと思って訪れてみたけど、ドラゴンボール並のインフレが起きたことしか理解できなかった( ́∇`)

その他
matsuedon
なるほど、わからん。なんだかすごいなぁ。

その他
nemoba
教師ありの一つ目が間違ってるね。あと、GPT-2は、単純なスケールアップ以外にも、In-context Learningによる精度向上を目指してる。これが今のプロンプトエンジニアリング笑に繋がってる。でも、良い資料

その他
shunkeen
"「英語に翻訳して」という文章の後に確率的に近づく言葉をつないでいったら翻訳タスク的なことができるようになった"/In-context Learning。UI/UXの変化もさることながら、Vicunaを見るとRLHFが欠かせない技術にも感じる。

その他
blueboy
(単に)量の拡大が質の変化をもたらした、というわけではない。量の拡大がそのまま性能の向上に結びつくように、システムを変更した(RNN からTransformerにした)。その意義は情報圧縮をなくしたこと。 https://x.gd/1HJgc

その他
sqrt
仕組みが分かっても何故この仕組みであのアウトプットになるのかさっぱり分からんやつ

その他
zkq
難しくてよくわからんが、教師データを作成するために途上国の人が低賃金で働かされているって話もあったが、それがファインチューニングで不要になったのか。ここにどれほどのものが詰まっているのかが肝になりそう

その他
tettekete37564
あたまに入ってこない。僕の脳みそに100回ぐらい強化学習させてください

その他
kat00
"Pretrained "

その他
sun330
人間の脳のニューロンって何個くらい使われてるんだっけ...とふいに思った...

その他
ryosuke-fujii
簡単には理解した。GTP3までは論文公開されてるのね

その他
juejue
またここにもイーロンマスクか。ChatGPTといいスペースXといいテスラといい、すげーなこの人。

その他
yamada_k
これはどんな人向けなのかな。

その他
ginga0118
わかりやすい

その他
degucho
倫理観のないやつ使いたいんだよなあ

その他
tach
参考

その他
grocio
教示なし学習でどうして翻訳ができるのかがわからなかったけど、次のサイトがすごくわかりやすい。逆翻訳を噛ませることがミソらしい。https://deeplearning.hatenablog.com/entry/unsupervised_machine_translation

その他
renowan
なるほど分からん!

その他
pwatermark
数字で見てみるとマジで規模が違うんだけど、それもこれも(表記間違ってるけど)教師なし学習で行けるようにしたからなんだよね

その他
dlive1
GPTとはGenerative Pretrained Transformerの略であり、Transformerをベースにした事前学習生成モデル.GPT-3.5にあたるChatGPTの登場で多くの人が触れるインターフェースになり広く普及

その他
ET777
なるほどわからない。ラベル付けいらないのかあ/私は文章のプロではないし、確率的に、とは実際に自分でもやっている気がする。そこまで意思で串刺してないというか

その他
yarumato
"Transformer(2017)→GPT-1(2018)→GPT-2(2019)→GPT-3(2020)までは一般ユーザーが利用できるUI不在。GPT-3.5にあたるChatGPT(2022)の登場でUI提供、広く普及。"

その他
ntstn
質的変更もあるだろうけど、自分の知能では「量イズパワー!」以上の事は読み取れませんでした。

その他
bike-a-to-z
お、スタビジの人じゃん。gptが出た頃の解説みてお世話になったよ。

その他
udofukui
なるほどわからん。

その他
Sinraptor
ほとんど量的な変化しか起きていない。画期的な技術が開発されたわけではなく、本質は変わっていない。

その他
matsuedon
matsuedon なるほど、わからん。なんだかすごいなぁ。

2023年04月06日 リンク

その他
nemoba
nemoba 教師ありの一つ目が間違ってるね。あと、GPT-2は、単純なスケールアップ以外にも、In-context Learningによる精度向上を目指してる。これが今のプロンプトエンジニアリング笑に繋がってる。でも、良い資料

2023年04月06日 リンク

その他
zkq
zkq 難しくてよくわからんが、教師データを作成するために途上国の人が低賃金で働かされているって話もあったが、それがファインチューニングで不要になったのか。ここにどれほどのものが詰まっているのかが肝になりそう

2023年04月06日 リンク

その他
dpdp
なるほど

その他
blueboy
blueboy (単に)量の拡大が質の変化をもたらした、というわけではない。量の拡大がそのまま性能の向上に結びつくように、システムを変更した(RNN からTransformerにした)。その意義は情報圧縮をなくしたこと。 https://x.gd/1HJgc

2023年04月06日 リンク

その他
sqrt
sqrt 仕組みが分かっても何故この仕組みであのアウトプットになるのかさっぱり分からんやつ

2023年04月06日 リンク

その他
Shinwiki
chatMBR?/訂正

その他
baca-aho-doji
ちょっとこの分野おいていかれてるので関連記事含めて読む。

その他
blogpants
blogpants 進化の仕組みを理解しようと思って訪れてみたけど、ドラゴンボール並のインフレが起きたことしか理解できなかった( ́∇`)

2023年04月06日 リンク

その他
shunkeen
shunkeen "「英語に翻訳して」という文章の後に確率的に近づく言葉をつないでいったら翻訳タスク的なことができるようになった"/In-context Learning。UI/UXの変化もさることながら、Vicunaを見るとRLHFが欠かせない技術にも感じる。

2023年04月06日 リンク

その他

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

リンクを埋め込む

以下のコードをコピーしてサイトに埋め込むことができます

プレビュー
アプリのスクリーンショット
いまの話題をアプリでチェック!
  • バナー広告なし
  • ミュート機能あり
  • ダークモード搭載
アプリをダウンロード

関連記事

usersに達しました!

さんが1番目にブックマークした記事「GPT-1→GPT-2→GPT-3...」が注目されています。

気持ちをシェアしよう

ツイートする

GPT-1→GPT-2→GPT-3→GPT-3.5→ChatGPT→GPT-4までの進化の軌跡と違いをまとめてみた|スタビジ

当サイト【スタビジ】の本記事では、昨今のAIの進化のきっかけになっているGPTシリーズについてまとめて... 当サイト【スタビジ】の本記事では、昨今のAIの進化のきっかけになっているGPTシリーズについてまとめていきたいと思います。GPT-1から始まりGPT-2、GPT-3、そしてChatGPTであるGPT-3.5、GPT-4と進化してきました。この進化の軌跡と違いについて解説していきます。 こんにちは! データサイエンティストのウマたん(@statistics1012)です! この記事では最近のAIブームの火付け役になったGPTシリーズについて簡単にまとめていきたいと思います。

ブックマークしたユーザー

  • deep-dive2024年08月04日 deep-dive
  • catcoswavist2023年12月12日 catcoswavist
  • s-akiyoshi2023年12月11日 s-akiyoshi
  • repunit2023年12月11日 repunit
  • Hamukoro2023年12月11日 Hamukoro
  • mIkura2023年12月11日 mIkura
  • miamitohoku2023年12月10日 miamitohoku
  • zakki_512023年12月10日 zakki_51
  • discophunk2023年12月02日 discophunk
  • norisuke32023年11月10日 norisuke3
  • techtech05212023年09月04日 techtech0521
  • t330333032023年07月16日 t33033303
  • mmc_HTNA2023年07月08日 mmc_HTNA
  • hayabusato2023年07月06日 hayabusato
  • thaturn2023年06月21日 thaturn
  • godlivedasadevildog2023年06月12日 godlivedasadevildog
  • i-v-m2023年06月12日 i-v-m
  • mkotatsu2023年06月12日 mkotatsu
すべてのユーザーの
詳細を表示します

ブックマークしたすべてのユーザー

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

同時期にブックマークされた記事

いま人気の記事 - 企業メディア

企業メディアをもっと読む

はてなブックマーク

公式Twitter

はてなのサービス

Copyright © 2005-2025 Hatena. All Rights Reserved.
設定を変更しましたx

AltStyle によって変換されたページ (->オリジナル) /