実測方法
やっていること
6モデルに毎朝8時(JST)、同じ3つの課題を1回ずつ投げて、応答時間・トークン数・正答を記録しています。全部運営者自身のAPI代で、1日あたり数円です。
- 日本語要約(約120字): 判定
length_between:80:160;contains:ネットワーク - 計算((37×76)+27): 判定
contains:2839 - JSON抽出: 判定
valid_json
測り方
- 応答時間はリクエスト送信から本文受信まで(運営者の回線込み)。他の環境では変わります
- 503などのエラーは1回だけ再試行し、それでも落ちたら「落ちた」と記録します
- 料金は各社公式ページの数字を人手で転記し、週1で照合します
- 1日1回の計測なので、日ごとのぶれは大きめです。傾向は複数日の平均で見てください
出典
- https://developers.openai.com/api/docs/models/gpt-6-luna
- https://platform.claude.com/docs/en/about-claude/pricing
- https://ai.google.dev/gemini-api/docs/pricing
- https://developers.openai.com/api/docs/models/gpt-6-sol
- https://platform.claude.com/docs/en/about-claude/pricing
- https://ai.google.dev/gemini-api/docs/pricing
生データは /data/ に日付ごとのJSONで置いています。