GPT-4.5 released
Scott WuがSonnet3.7と比較してる アーキテクトとしてはGPT4.5の方が強くてSonnetの方が実際のコーディングは強いのか。 まあ両方をリリース前に触ってて製品にSonnetを入れる決定をしてるんだから、そういうことなんだろうな
ScottWu46 GPT-4.5 has been awesome to work with. On our agentic coding benchmarks it already shows massive improvements over o1 and 4o. Excited to see the models' continued trajectory on code!
One interesting data point: though GPT-4.5 and Claude 3.7 Sonnet score similarly on our overall benchmark, we find that GPT-4.5 spikes more heavily on tasks involving architecture and cross-system interactions whereas Claude 3.7 Sonnet spikes more on raw coding and code editing.
As AI takes on increasingly complex tasks, we believe that multi-model agents that incorporate each model’s unique strengths will perform best. GPT-4.5は素晴らしい操作ができました。私たちのエージェントコーディングベンチマークでは、すでにo1と4oよりも大幅な改善が見られます。コード上でのモデルの継続的な軌跡を見るのが楽しみです!
興味深いデータポイントとして、GPT-4.5とClaude 3.7 Sonnetは全体的なベンチマークでほぼ同じスコアを示していますが、GPT-4.5はアーキテクチャやシステム間の相互作用を伴うタスクでより大きく上昇し、Claude 3.7 Sonnetは生のコーディングとコード編集でより急増することがわかりました。
AIがますます複雑化するタスクに取り組む中、各モデルのユニークな強みを組み込んだマルチモデルエージェントが最高のパフォーマンスを発揮すると考えています。
「」の画像を渡してChatGPT 4.5に清書させる
(4.5)清書したイラストのイメージは次の通りです。
おっ、画像の要素をよく把握しているな(期待)
a.svg
<svg xmlns="http://www.w3.org/2000/svg" width="600" height="600" viewBox="0 0 600 600">
<style>
.frame { fill: none; stroke: black; stroke-width: 3; rx: 15; }
.box { fill: none; stroke: black; stroke-width: 3; }
.text { font-size: 20px; font-family: Arial; text-anchor: middle; dominant-baseline: central; }
.face { stroke: black; fill: none; stroke-width: 3; }
</style>
<!-- 第一コマ -->
<rect class="frame" x="20" y="20" width="260" height="260"/>
<circle class="face" cx="80" cy="220" r="25"/>
<path class="face" d="M70 225 q10 -10 20 0"/>
<path class="face" d="M70 215 q5 -5 10 0"/>
<circle class="face" cx="160" cy="160" r="25"/>
<path class="face" d="M150 165 q10 10 20 0"/>
<path class="face" d="M150 155 q5 5 10 0"/>
<rect class="box" x="140" y="190" width="40" height="40"/>
<rect class="box" x="140" y="150" width="40" height="40"/>
<text class="text" x="160" y="170">A</text>
<text class="text" x="160" y="210">A</text>
<circle class="face" cx="160" cy="120" r="25"/>
<path class="face" d="M150 125 q10 10 20 0"/>
<path class="face" d="M150 115 q5 5 10 0"/>
<!-- 第二コマ -->
<rect class="frame" x="320" y="20" width="260" height="260"/>
<!-- (同様にBを描く、位置だけ320右へずらす) -->
<!-- 第三コマ -->
<rect class="frame" x="170" y="320" width="260" height="260"/>
<!-- (同様にCを描く、位置だけ300下へずらす) -->
<!-- 必要に応じてBとCの詳細な描画を追加 -->
</svg>
ぜんぜんだめじゃん!ww
しかし図のアウトプット能力が追いついていないけど図の理解能力はかなり高まっている 自分の中でSVGをレンダリングして画像として取り込み比較するようなツールがつけばうまくいくまで何回か内部で繰り返すことできちんとタスクがこなせるようになるかも
日記2025-02-27←日記2025-02-28→日記2025-03-01 100日前 日記2024-11-20 1年前 日記2024-02-28