- 技術的特異点/シンギュラリティ190【技術・AI】
607 ：オーバーテクナナシー[sage]：2020/08/04(火) 00:07:24.20 ID:FZaD5vUL - GANとかも評価用データを使って出した結果を則
学習用データにフィードバックしてるようなもんだから
どんどん重くなるか
最後はスパコン勝負になってしまうなあ
|
- 技術的特異点/シンギュラリティ190【技術・AI】
619 ：オーバーテクナナシー[sage]：2020/08/04(火) 06:16:15.83 ID:FZaD5vUL - 社会スレは元々は長文改行氏専用だったか
最近は勤労嵐がお気に入りだな
1000まで行ったけど次が立つ雰囲気は無し
ttps://www.infoq.com/jp/news/2020/08/openai-gpt3-language-model/
たとえば、テキストの合成では、「GPT-3サンプルはまだ意味的にドキュメントレベルで繰り返され、
十分に長いパッセージで一貫性を失い始め、矛盾し、時々不連続な文章や段落が含まれます。」
このモデルは、「チーズを冷蔵庫に入れたら、溶けますか？」などの「常識的な物理学」の質問にも問題がある。
gpt3は1750億パラメータでもまだこの位
https://webbigdata.jp/ai/post-6070
＞なお、ヒントン先生は「GPT3の壮観なパフォーマンスから未来を推定すると、生命、宇宙、および全てに対する答えは
たったの4兆398億のパラメーターであることが示唆されます」とツイートされてました。GPT-3の最大モデルは
1750億パラメータらしいので、AIは後40倍弱でデミゴッド、すなわち半神の領域ぐらいには達するのでしょうか？
ちなみに4兆だったら10年以内に行けるって試算もあるらしいので、
＿＿＿
富岳からもう一頑張りするくらいスケールアップしたら、ひょっとして行けちゃったり？
まあいわゆるエクサスケールということなんだろうなあと
|
- 技術的特異点/シンギュラリティ190【技術・AI】
682 ：オーバーテクナナシー[sage]：2020/08/04(火) 20:23:33.01 ID:FZaD5vUL - 当面の目標は疑似汎用AIくらいまでじゃないのかな
GPTシリーズを軸に、東ロボくんのような各種の専門技能や知識を使えるAI多数種を呼び出す形にする程度
|