今週の気になるAIニュース

強化学習から目標達成を優先してその他の指示を無視する、というのは理解できる。 LLMにとって指示は目標の指示も条件設定の指示も同じで、拘束条件の中で目標を達成とか解りそうにないと思う。 でも「シャットダウンのリスクを察知 […]

溜まってたので少し古いのも含む。 巨大LLMがたった1つのパラメータで崩壊するというの、逆に言うと同レイヤーはその1つ以外パラメータにその他の情報が分散されているってことだな。 CNNの画像認識では、チャンネル内に重複す […]

コンテンツモデレーション用のAI、これからはチャットAI作るのでもこういったものが必要になってくるんだろうなぁ。 そして、LLMの単体性能ではなく、どれだけいろいろなオプションを入れているかが肝になってきたり。 そしてA […]

この間新しいテストが出る度にOpenAIがやっぱり最強に戻るって書いたが、今度はOpenAIがテストデータを出してきた。 サイズは小さく範囲も限定的だが、論文を見るとやっぱり他のテストよりもかなり深く考えられているように […]

AIがreCAPTCHAを突破とのことだが、もはやreCAPTCHAはロボットを排除するためじゃなくて、もっぱら機械学習用のデータ収集のために使われているんじゃないかな・・・ 新しいプロンプトエンジニアリングのテクニック […]

ベンチャーのAi2はGPT-4o超えを主張するがGoogleは控えめにGPT-3.5を超えたとリリース。 どちらが正しいのかは分からないけど、実感としてはGPT-3.5超えあたりが本当なんじゃないかって気が・・・ そして […]

OpenAIに匹敵するLLMを作ったと思ったらOpenAIは新しい機能を出してくるといういつもの流れ。 だけどパラメーター数が少なくて性能が高いというレポートは注目に値する。 オンプレミスで気軽に使えるサイズでそこそこの […]

HTMLから中身の文章だけを取り出すLLM、データ収集をしていた時にこういったのが欲しかった。 ただ今はもういろんなサイトがクローリング禁止になってるので、使える場所はどうなのかな。 LLaMaも既にデータを持っていて新 […]

ブレインストーミング用AIだとかアイデア出し用AIだとか「よく分からんけどとりあえずAI」案件の典型だと思ってたんだけど、ここまで来れば馬鹿にできないものになっているんだろうか。 今度その手の案件を提案するときのソースと […]

GPT-o1登場。 新しいモデルというよりもプロンプトエンジニアリングのテクニックやマルチエージェントを駆使して推論の性能を向上させたものに見える。 従来の4oにプロンプトエンジニアリングマシマシでやったのとの比較や既存 […]