{ "date": "2026-10-06", "results": [ { "id": "openai-gpt-6-luna", "vendor": "OpenAI", "model": "gpt-6-luna", "price_in": 0.1, "price_out": 0.5, "tasks": { "jp-summary": { "latency_s": 5.16, "text": "インターネットは、共通の通信規約で世界中のコンピューターや機器を結ぶ「ネットワークのネットワーク」である。民間・公共・学術・企業・政府の多様なネットワークが、電子・無線・光技術で地域から世界規模まで接続され、ウェブ、電子メール、電話、ファイル共有など幅広い情報やサービスを提供する。", "usage": { "prompt_tokens": 132, "completion_tokens": 292, "total_tokens": 424, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 184, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true }, "arithmetic": { "latency_s": 1.34, "text": "2839", "usage": { "prompt_tokens": 28, "completion_tokens": 43, "total_tokens": 71, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 32, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true }, "json-extract": { "latency_s": 2.02, "text": "{\"name\":\"Foo Pro\",\"price_jpy\":12800,\"released\":\"2026年3月\"}", "usage": { "prompt_tokens": 75, "completion_tokens": 63, "total_tokens": 138, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 33, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true } } }, { "id": "anthropic-haiku-4-5", "vendor": "Anthropic", "model": "claude-haiku-4-5", "price_in": 1.0, "price_out": 5.0, "tasks": { "jp-summary": { "latency_s": 2.31, "text": "インターネットは、インターネット・プロトコル・スイートを用いてネットワークと機器間で通信する世界規模の相互接続コンピュータネットワークシステムである。民間・公共・学術・企業・政府ネットワークなど、各種電子・無線・光ネットワーク技術で結合されたネットワークの集合体である。ウェブ、電子メール、電話、ファイル共有など多様な情報資源とサービスを提供する。", "usage": { "input_tokens": 142, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 153, "service_tier": "standard", "inference_geo": "not_available" }, "pass": false }, "arithmetic": { "latency_s": 0.5, "text": "2839", "usage": { "input_tokens": 36, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 6, "service_tier": "standard", "inference_geo": "not_available" }, "pass": true }, "json-extract": { "latency_s": 0.65, "text": "```json\n{\"name\": \"Foo Pro\", \"price_jpy\": 12800, \"released\": \"2026-03\"}\n```", "usage": { "input_tokens": 93, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 35, "service_tier": "standard", "inference_geo": "not_available" }, "pass": true } } }, { "id": "google-gemini-3-5-flash-lite", "vendor": "Google", "model": "gemini-3.5-flash-lite", "price_in": 0.3, "price_out": 2.5, "tasks": { "jp-summary": { "latency_s": 0.85, "text": "インターネットは、多様なネットワークを電子的・無線・光技術で接続した世界規模の巨大な通信網である。プライベートから政府系まで幅広いネットワークから構成され、ウェブサイトや電子メール、ファイル共有など、膨大な情報資源やサービスをやり取りする役割を担っている。（127文字）", "usage": { "promptTokenCount": 125, "candidatesTokenCount": 68, "totalTokenCount": 193, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 125 } ], "serviceTier": "standard" }, "pass": true }, "arithmetic": { "latency_s": 0.62, "text": "2839", "usage": { "promptTokenCount": 23, "candidatesTokenCount": 4, "totalTokenCount": 27, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 23 } ], "serviceTier": "standard" }, "pass": true }, "json-extract": { "latency_s": 0.64, "text": "{\"name\": \"Foo Pro\", \"price_jpy\": 12800, \"released\": \"2026-03\"}", "usage": { "promptTokenCount": 65, "candidatesTokenCount": 32, "totalTokenCount": 97, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 65 } ], "serviceTier": "standard" }, "pass": true } } }, { "id": "openai-gpt-6-sol", "vendor": "OpenAI", "model": "gpt-6-sol", "price_in": 2.0, "price_out": 10.0, "tasks": { "jp-summary": { "latency_s": 3.36, "text": "インターネットは、共通の通信規約で世界中の機器やネットワークを結ぶ「ネットワークのネットワーク」である。民間、公共、学術、企業、政府のネットワークが電子・無線・光技術で接続され、ウェブ、電子メール、通話、ファイル共有など多様なサービスを提供する。", "usage": { "prompt_tokens": 132, "completion_tokens": 208, "total_tokens": 340, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 112, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true }, "arithmetic": { "latency_s": 1.58, "text": "2839", "usage": { "prompt_tokens": 28, "completion_tokens": 42, "total_tokens": 70, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 31, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true }, "json-extract": { "latency_s": 1.03, "text": "{\"name\":\"Foo Pro\",\"price_jpy\":12800,\"released\":\"2026-03\"}", "usage": { "prompt_tokens": 75, "completion_tokens": 23, "total_tokens": 98, "prompt_tokens_details": { "cached_tokens": 0, "cache_write_tokens": 0, "audio_tokens": 0 }, "completion_tokens_details": { "reasoning_tokens": 0, "audio_tokens": 0, "accepted_prediction_tokens": 0, "rejected_prediction_tokens": 0 } }, "pass": true } } }, { "id": "anthropic-sonnet-5", "vendor": "Anthropic", "model": "claude-sonnet-5", "price_in": 2.0, "price_out": 10.0, "tasks": { "jp-summary": { "latency_s": 2.09, "text": "インターネットは、インターネットプロトコル群を用いて世界中のコンピュータネットワークを相互に接続した「ネットワークのネットワーク」であり、電子・無線・光通信技術によって民間・公共・学術・政府の各種ネットワークを結びつけ、ウェブや電子メール、電話、ファイル共有など多様な情報資源とサービスを提供している。(144字)", "usage": { "input_tokens": 190, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 137, "output_tokens_details": { "thinking_tokens": 0 }, "service_tier": "standard", "inference_geo": "global" }, "pass": true }, "arithmetic": { "latency_s": 1.0, "text": "2839", "usage": { "input_tokens": 34, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 28, "output_tokens_details": { "thinking_tokens": 24 }, "service_tier": "standard", "inference_geo": "global" }, "pass": true }, "json-extract": { "latency_s": 1.37, "text": "{\"name\": \"Foo Pro\", \"price_jpy\": 12800, \"released\": \"2026-03\"}", "usage": { "input_tokens": 95, "cache_creation_input_tokens": 0, "cache_read_input_tokens": 0, "cache_creation": { "ephemeral_5m_input_tokens": 0, "ephemeral_1h_input_tokens": 0 }, "output_tokens": 86, "output_tokens_details": { "thinking_tokens": 50 }, "service_tier": "standard", "inference_geo": "global" }, "pass": true } } }, { "id": "google-gemini-3-8-flash", "vendor": "Google", "model": "gemini-3.8-flash", "price_in": 0.75, "price_out": 3.75, "tasks": { "jp-summary": { "latency_s": 4.22, "text": "インターネットは、共通プロトコルを用い多様な通信技術で機器やネットワークを結ぶ世界的な複合網である。民間や政府など多岐にわたる規模のネットワークで構成され、ウェブや電子メール、ファイル共有など膨大な情報資源やサービスを提供している。", "usage": { "promptTokenCount": 125, "candidatesTokenCount": 58, "totalTokenCount": 1247, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 125 } ], "thoughtsTokenCount": 1064, "serviceTier": "standard" }, "pass": true }, "arithmetic": { "latency_s": 1.97, "text": "2839", "usage": { "promptTokenCount": 23, "candidatesTokenCount": 4, "totalTokenCount": 139, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 23 } ], "thoughtsTokenCount": 112, "serviceTier": "standard" }, "pass": true }, "json-extract": { "latency_s": 4.11, "text": "{\"name\": \"Foo Pro\", \"price_jpy\": 12800, \"released\": \"2026-03\"}", "usage": { "promptTokenCount": 65, "candidatesTokenCount": 32, "totalTokenCount": 511, "promptTokensDetails": [ { "modality": "TEXT", "tokenCount": 65 } ], "thoughtsTokenCount": 414, "serviceTier": "standard" }, "retried_after": "http503: {'code': 503, 'message': 'This model is currently experiencing high dem", "pass": true } } } ] }