人々は本当に OpenAI の新しいチャットボットに月額 200 ドルを支払うのでしょうか?

テッククランチイベント

OpenAIの月額200ドルのサブスクリプションに加入しました。
質問があれば返信していただければ、このスレッドに再投稿します。pic.twitter.com/oTQxbPxnoP

— ギャレット・スコット 🕳 (@thegarrettscott) 2024 年 12 月 5 日

しかし、X の多くの人は、o1 プロ モードの回答が 200 ドル レベルであるとは確信していないようです。

「OpenAIは、通常のo1では失敗するがo1-proでは成功するプロンプトの具体的な例を何か公開していますか？」と、英国のコンピューター科学者サイモン・ウィリソン氏は尋ねた。「その優位性を示す具体的な例を一つでも見たいのです。」

それはもっともな疑問です。これは世界で最も高額なチャットボットサブスクリプションですから。このサービスには、レート制限の解除やOpenAIの他のモデルへの無制限アクセスといった特典も付いてきます。しかし、年間2,400ドルは決して安い金額ではありませんし、特にo1プロモードの価値提案は依然として不透明です。

失敗例を見つけるのに時間はかかりませんでした。O1プロモードは数独で苦戦し、人間なら誰でもわかる錯覚ジョークでつまずいてしまいます。

o1 と o1-pro はどちらもここで失敗しました。おそらく、視覚的な制限が原因だと思います (数独パズルと同じです) https://t.co/mAVK7WxBrq pic.twitter.com/O9boSv7ZGt

— ティボール・ブラホ (@btibor91) 2024 年 12 月 5 日

OpenAI の内部ベンチマークによると、コーディングと数学の問題では、o1 プロ モードのパフォーマンスは標準の o1 よりわずかに優れているだけです。

OpenAIは、O1プロモードの一貫性を示すために、同じベンチマークで「より厳格な」評価を実施しました。モデルは4回中4回正解した場合にのみ、問題を解いたとみなされました。しかし、これらのテストでも改善は劇的ではありませんでした。

OpenAIのCEOサム・アルトマン氏はかつて、OpenAIは「計測するにはあまりにも安価な知能に向かう」道を歩んでいると書いていたが、木曜日にChatGPT Proはほとんどの人向けではないと何度も明言せざるを得なかった。

「ほとんどのユーザーは、[ChatGPT] Plus レベルの o1 に非常に満足するでしょう」と彼は X で述べています。「ほぼすべてのユーザーは、無料レベルまたは Plus レベルで最適なサービスを受けられるでしょう。」

では、一体誰のためのサービスなのでしょうか？「『e』を使わずにイチゴについて3段落のエッセイを書いてください」とか「この数学オリンピックの問題を解いてください」といった、くだらない質問に月200ドルも払う人がいるのでしょうか？標準的なO1でも同じ質問に満足のいく答えが出せないという保証もないのに、苦労して稼いだお金を喜んで手放してくれるのでしょうか？

カーネギーメロン大学の機械学習准教授で あり、Amplify Partnersのベンチャーパートナーでもあるアミート・タルウォーカー氏に意見を尋ねた。「価格を10倍に引き上げるのは大きなリスクに思えます」と、同氏はTechCrunchへのメールで語った。「この機能への需要がどれくらいあるかは、数週間後にはもっとよく分かると思います。」

UCLAのコンピューター科学者ガイ・ファン・デン・ブルック氏は、より率直な評価を示した。「価格設定が妥当かどうかは分かりません」と彼はTechCrunchに語った。「高価な推論モデルが標準になるかどうかも分かりません。」

o1 は「ほとんどのタスクにおいてほとんどの人間よりも優れている」。なぜなら、確かに人間は記憶喪失の肉体のないマルチターンチャットインターフェースの中にのみ存在するからだ https://t.co/zbLY2BG5pQ

— エイダン・マクロー (@aidan_mclau) 2024 年 12 月 6 日

寛大な見方をすれば、これはマーケティング上の失策と言えるでしょう。O1プロモードが「最も難しい問題」を解決するのに最適だと説明しても、見込み客にとってはあまり意味がありません。また、このモデルが「より長く思考」し、「知性」を発揮できるという漠然とした説明も意味がありません。ウィリソン氏が指摘するように、この性能向上の具体的な例がなければ、価格が10倍になるどころか、そもそも価格を上げること自体を正当化するのは難しいでしょう。

これは年間2400ドルもかかるAIモデルの面白い推奨プロンプトだ

OpenAI がこれらの定型サンプルプロンプトを ASI まで維持してくれることを願っています pic.twitter.com/JQ5vLKxWWR

— ディーン・W・ボール（@deanwball）2024年12月6日

私の知る限り、対象は専門分野の専門家です。OpenAIは、「一流機関」の少数の医学研究者にChatGPT Proへの無料アクセスを提供する予定で、これにはo1プロモードが含まれます。医療においてはミスが大きな問題となります。OpenAIの元最高研究責任者であるボブ・マクグルー氏がXで指摘したように、o1プロモードの最大の魅力は、信頼性の向上にあると言えるでしょう。

しばらく o1 と o1-pro で遊んでいました。

これらは非常に優れていると同時に、少し変わっています。また、ほとんどの人にとって、ほとんどの場合、あまり向いていません。価値を引き出すには、解決すべき特定の難しい問題が本当に必要です。しかし、もしあなたがそのような問題を抱えているなら、これは非常に大きな意味を持ちます。

— イーサン・モリック（@emollick）2024年12月5日

マクグルー氏はまた、o1プロモードは彼が「知能の過剰」と呼ぶものの一例であると述べた。これは、シンプルなテキストベースのインターフェースの根本的な限界により、ユーザー（そしておそらくモデルの開発者）が「追加の知能」から価値を引き出す方法を知らないことを意味する。OpenAIの他のモデルと同様に、o1プロモードとインタラクトする唯一の方法はChatGPTを介することであり、マクグルー氏の指摘通り、ChatGPTは完璧ではない。

しかし、200ドルという価格設定は期待値を高めてしまうのも事実です。ソーシャルメディアでの初期の反響を見る限り、ChatGPT Proは決して万能とは言えません。

バイオを見る