他のAIと比較したQwenの特徴、そしてQwenに何を任せるか

Transcript

1. 他のAIと比較したQwenの特徴、そしてQwenに何を任せ るか いちご(黒崎 祥弘) / 合同会社ソネット 代表 AI導入活用支援・AI研修講師・アプリケーションエンジニア
2. 皆さん Qwen といえば 何が特徴 だと思います か Qwen Meetup Tokyo #1 2
3. Qwen といえばローカル LLM 手元の PC で動く、というイメージが強い でも最新の Qwen3.8-Flash-Next は、圧縮しても 約85GB 現実的なのは 27B。目安は 16〜24GB（快適なら24GB級） Qwen Meetup Tokyo #1 3
4. そんないいPCは持ってません Qwen Meetup Tokyo #1 4
5. だから今日は クラウド API で使う話 をする ローカルで動かせなくても、API なら今日から使える。 そこで何が強みになるかを見ていきます。 Qwen Meetup Tokyo #1 5
6. Max は Code Arena(WebDev)で Opus 5 と並んでいる 9/2 に 1位。翌日 Fable 5.1 が出て 2位。Opus 5 とは 1点差(Arena.ai の投稿、9/3) Qwen Meetup Tokyo #1 6
7. 「明日から Claude Code をやめて、Qwen に 乗り換えますか?」 ……うーん。 Qwen Meetup Tokyo #1 7
8. 乗り換えは保留して今回は 安さに絞る Max は評判がいい。でも「明日から乗り換える」までは、まだ言えない 安くても、判断がおぼつかないと やり取りが続いて意味がない だから見るのは 「安さでどこまで行けるか。どこなら任せられるか」 目を向けるのは Max ではなく、Flash Qwen Meetup Tokyo #1 8
9. Qwen の強みのもう一つは 安さ USD / 100万トークン(入力 / 出力) モデル 入力 出力 Qwen3.8 Flash $0.15 $0.47 Claude Haiku 4.5 $1.00 $5.00 GPT-5.6 Luna $0.20 $1.20 Qwen3.8 Max $2.00 $6.00 Claude Sonnet 5 $2.00 $10.00 Claude Opus 5 $5.00 $25.00 Flash は Haiku の 7分の1。Max も Sonnet より安い Qwen Meetup Tokyo #1 9
10. Qwen の強みのもう一つは 安さ USD / 100万トークン(入力 / 出力) モデル 入力 出力 Qwen3.8 Flash $0.15 $0.47 Claude Haiku 4.5 $1.00 $5.00 GPT-5.6 Luna $0.20 $1.20 Qwen3.8 Max $2.00 $6.00 Claude Sonnet 5 $2.00 $10.00 Claude Opus 5 $5.00 $25.00 Flash は Haiku の 7分の1。Max も Sonnet より安い Qwen Meetup Tokyo #1 ⼊⼒ 出⼒ USD / 100万トークン Qwen3.8 Flash $0.15 $0.47 Claude Haiku 4.5 $1.00 $5.00 GPT-5.6 Luna $0.20 $1.20 Qwen3.8 Max $2.00 Claude Sonnet 5 $2.00 Claude Opus 5 $6.00 $10.00 $5.00 $5 $10 $15 $20 $25.00 $25 10
11. 安いモデルの出番は アプリに組み込む AI 来た問い合わせを分類して、担当に振り分ける 口コミを要約して、店長に渡す メールの署名から連絡先を拾って、顧客台帳に入れる 返信の下書きや一次レビューをして、最後は人が見る API 料金がそのまま原価になる場所。ここで安さが効く Qwen Meetup Tokyo #1 11
12. 同じ仕事を 全モデルに同時投げる アプリを作った 各社の API キーを入れると、同じ入力を各社のモデルに同時に送って、出力と秒と費用が横に並 ぶ。 Claude Opus 5 が、モデル名を伏せて 1〜5点で採点する。 Qwen Meetup Tokyo #1 12
13. 投げた仕事はこの5つ 仕事 入力の抜粋(誤字や口語はわざと残した) 問い合わせの分類 「注文番号12345のやつまだ届いてないんですけど？？配達完了ってなってるけど受け取ってないです」 口コミの要約 「★☆☆☆☆ 子連れNGですね。ベビーチェアなし、隣がタバコ吸ってて煙くる」「★★★☆☆ ふつう」 署名の抽出 「(株)ﾌｭｰﾁｬｰﾛｼﾞｯｸ 営業部 / 佐藤太郎 / TEL 03-1234-5678(代表) / 090-1234-5678」 UI文言の翻訳 「8. 混み合ってます。少し待ってからもう一度」「10. 同期完了」 返信の下書き 「来月末で解約したいです。予算の都合でツール整理することになったので。手続き教えてください」 Qwen Meetup Tokyo #1 13
14. 結果 モデル 分類 要約 抽出 翻訳 返信 平均 1回の費用 Qwen3.8 Flash 4 4 2 3 4 3.4 $0.00007 Claude Opus 5 5 5 5 4 3 4.4 $0.01230 Claude Sonnet 5 5 3 3 3 5 3.8 $0.00282 Claude Haiku 4.5 3 4 2 2 4 3.0 $0.00107 GPT-5.6 Sol 5 4 2 5 5 4.2 $0.00424 GPT-5.6 Terra 2 4 2 5 3 3.2 $0.00168 GPT-5.6 Luna 5 4 4 5 5 4.6 $0.00026 Gemini 3.8 Flash 5 5 2 4 3 3.8 $0.00055 Gemini 3.5 Flash-Lite 3 3 1 3 3 2.6 $0.00033 Qwen Meetup Tokyo #1 14
15. 結果 モデル 分類 要約 抽出 翻訳 返信 平均 1回の費用 Qwen3.8 Flash 4 4 2 3 4 3.4 $0.00007 Claude Opus 5 5 5 5 4 3 4.4 $0.01230 Claude Sonnet 5 5 3 3 3 5 3.8 $0.00282 Claude Haiku 4.5 3 4 2 2 4 3.0 $0.00107 GPT-5.6 Sol 5 4 2 5 5 4.2 $0.00424 GPT-5.6 Terra 2 4 2 5 3 3.2 $0.00168 GPT-5.6 Luna 5 4 4 5 5 4.6 $0.00026 Gemini 3.8 Flash 5 5 2 4 3 3.8 $0.00055 Gemini 3.5 Flash-Lite 3 3 1 3 3 2.6 $0.00033 Qwen Meetup Tokyo #1 USD / 1回（Opusは表⽰上限） Qwen3.8 Flash $0.00007 Claude Opus 5 Claude Sonnet 5 Claude Haiku 4.5 $0.00107 GPT-5.6 Sol GPT-5.6 Terra $0.00168 GPT-5.6 Luna $0.00026 Gemini 3.8 Flash $0.00055 Gemini 3.5 Flash-Lite $0.00033 $0.001 $0.002 $0.01230 → $0.00282 $0.00424 $0.003 $0.004 $0.005 15
16. 結果を点の順に並べると GPT-5.6 Luna Claude Opus 5 GPT-5.6 Sol Claude Sonnet 5 Gemini 3.8 Flash Qwen3.8 Flash GPT-5.6 Terra Claude Haiku 4.5 Gemini 3.5 Flash-Lite Qwen Meetup Tokyo #1 平均点(5点満点、審査員は Opus 5) 1 2 2.6 3.0 3 3.2 3.4 3.8 3.8 4 4.2 4.4 4.6 5 1回の費⽤ $0.00026 $0.01230 $0.00424 $0.00282 $0.00055 $0.00007 $0.00168 $0.00107 $0.00033 16
17. 判断が要るタスクは まだ弱い 仕事 署名の抽 出 UI文言の 翻訳 何が起きたか 「営業部」は部署なのに 役職として抜き出した(Qwen Flash ほか6モデル)。半角カナの社名もそのまま。正しく 読めたのは Opus と Luna だけ 意味は合っているが 「The system is busy」のような直訳寄りで、10行のトーンが揃わない。GPT 3種は全部5点 これは何の情報か、この製品らしい言い方はどれか、を考えさせると外す Qwen Meetup Tokyo #1 17
18. 日本語が たまに不自然 口コミ要約の「悪い点」、同じ入力から: モデル Qwen3.8 Flash 出力 行列や狭い店内による窮屈さ、量不足、禁煙ゾーニング不備。 Claude Opus 5 土曜夜は30分以上の行列、相席、レジ前の混雑。量に対して価格がやや高め、喫煙席の煙やベビーチェア不 足も指摘。 意味は取れる。でも「普通に考えたらそうはならない」言い回しが出る Qwen Meetup Tokyo #1 18
19. 定型業務は うまくいった 解約メールへの返信の下書き。審査員の点とコメント: モデル 点 1回 審査員のコメント Qwen3.8 Flash 4 $0.00006 字数と引き止め回数は適切。具体的な手順が示されず引き継ぎ止まり Claude Haiku 4.5 4 $0.0013 字数と引き止め回数は適切。手続き案内が「別途連絡」と曖昧 同じ点で、値段は 20分の1。翻訳も Flash 3点、Haiku 2点(見出し行を勝手に足した) Qwen Meetup Tokyo #1 19
20. 引っ掛け署名でも 差出人を拾えた 本文に「返送先の住所」「貸会議室の住所」「サポート窓口のメール」「検品センターの電話」を混 ぜ、署名には住所を書かない。 結果 返送先や会場の住所を差出人の住所にした 0モデル(全モデルが null) サポート窓口のメールや検品センターの電話を拾った 0モデル 「営業部」を役職にした 8モデル(正解は Sonnet と Opus だけ) Qwen Flash も引っ掛からなかった。1回 $0.00008 Qwen Meetup Tokyo #1 20
21. 結論は 定型業務を任せる こと モデル 平均点 1回 月10万回 月100万回 Claude Haiku 4.5 3.0 $0.0011 $107 $1,070 Qwen3.8 Flash 3.4 $0.00007 $7 $70 GPT-5.6 Luna 4.6 $0.0003 $26 $260 今まで Haiku でやっていた定型業務は、Qwen Flash に置き換えられる。 点は上で、費用は 15分の1 Qwen Meetup Tokyo #1 21
22. 月10万回ならこうなる ⽉10万回のときの API 料⾦(USD / ⽉) $107 Claude Haiku 4.5 $26 GPT-5.6 Luna Qwen3.8 Flash $7 $25 $50 $75 $100 1日 3,300回で月10万回。Haiku を Qwen Flash に替えると、月 $100 浮く。100万回なら $1,000 Qwen Meetup Tokyo #1 22
23. 任せるもの任せないもの 仕事 理由 任せる 要約、返信の下書き、翻訳 Haiku と同等か上。費用は15分の1 条件つき 分類、抽出 ルールを1行足すか、答え合わせをつける 任せない 判断が要る仕事、お客さんに見せる文章 深く考える仕事は苦手。日本語がたまに不自然 Qwen Meetup Tokyo #1 23
24. 定型は Qwen に 判断はまだ人と上位モデルに アプリの操作込みの詳しい版は、日曜に YouTube に上げます。 YouTube @ichigoooo015 Qwen Meetup Tokyo #1 24