Claude 3 勉強会

Claude 3 勉強会 システムエンジニア友の会 2024/4/7 2024/4/7 システムエンジニア友の会 1

本日のお品書き • はじめに • Claude 3 • Claude 3 • Claude 3 • Claude 3 • Claude 3 • おわりに 2024/4/7 概要 事例 特徴 使い方の案 演習 システムエンジニア友の会 2

はじめに 2024/4/7 システムエンジニア友の会 3

この勉強会の概要 • 最近話題のClaude 3を使ってみて、凄さを味わう • 技術的な内容は含まない • LLM、Transformer、RAG、Fine-tuning、API、etc. • 「あたくしにはそう言う難しいことは分かりませんが」的な • Claude 3でもChatGPTでもいいけど、便利な道具を使っていい 気分になろう！ 2024/4/7 システムエンジニア友の会 4

参加者アンケート Ｑ． 仕事や趣味で使っている 対話型AIは？ さすがの ChatGPT 2024/4/7 システムエンジニア友の会 5

自己紹介 • Quatrex（僕） • インフラ系＆マネジメント系のSE • この業界で早幾年／ITは趣味と実益 • https://twitter.com/Quatrex • システムエンジニア友の会 • SEの、SEによる、SEのための友の会 • SEやIT業界の人、老若男女問わず、 皆で幸せになることを目指す • https://setk.connpass.com/ 2024/4/7 システムエンジニア友の会 6

• https://twitter.com/Quatrex
• https://setk.connpass.com/

Claude 3 概要 2024/4/7 システムエンジニア友の会 7

Claudeの概要 • Anthropic社の生成AIサービス • 歴史 • 2021年、Anthropic社設立 • 2023年3月14日、Claude公開 • 2023年7月11日、Claude 2公開 • 2024年3月4日、Claude 3公開 2024/4/7 システムエンジニア友の会 進歩がめちゃ早い！ 8

Claude 3のモデル No. モデル名 特長 日本語訳 1 Opus 最も知性が高い 作品 － ○ 2 Sonnet バランス型 十四行詩 ○ ○ 3 Haiku 軽量型 俳句 2024/4/7 システムエンジニア友の会 Web無料版 ※制限あるらしい － Web有料版 ○ 9

Claude 3はGPT-4を超えたのか？ ★ ★ ★ • 「Chatbot Arena」のランキン グ（ユーザーによる割と公平な 評価） • 4/7現在、Opusが1位で、GPT4を超えたと言ってよい状況 • SonnetやHaikuも好成績 • とはいえGPT-4とは僅差、 Gemini Proが後を追う 参考： https://huggingface.co/spaces/lmsys/chatbot -arena-leaderboard 2024/4/7 システムエンジニア友の会 10

• https://huggingface.co/spaces/lmsys/chatbot-arena-leaderboard

Claudeの認知度はまだまだ低い 参考：https://twitter.com/ytiskw/status/1773566755576729634 2024/4/7 システムエンジニア友の会 11

• https://twitter.com/ytiskw/status/1773566755576729634

Claudeへの入力は学習に使われる？ (･＿･;).｡oO（本当…？） 参考：Claude Proに機密データを入力したいのですが、会話を見ることができるのは誰ですか? 2024/4/7 システムエンジニア友の会 12

• https://support.anthropic.com/ja/articles/8325621-claude-proに機密データを入力したいのですが-会話を見ることができるのは誰ですか

チャットデータはずっと残る？ • 個人利用は90日で削除 • 出来の良いアウトプットは、 別途保存しましょう 参考：個人データをどのくらいの期間保存しますか? 2024/4/7 システムエンジニア友の会 13

• https://support.anthropic.com/ja/articles/7996866-個人データをどのくらいの期間保存しますか

Claude 3 事例 2024/4/7 システムエンジニア友の会 14

事例①：ちょっとした文章生成 • セミナーのサムネイル画像 を元に、冒頭挨拶を作って もらうというアクロバット な手軽さ 参考：https://twitter.com/masahirochaen/status/1776196850258985102 2024/4/7 システムエンジニア友の会 15

• https://twitter.com/masahirochaen/status/1776196850258985102

事例②：画像資料からのデータ起こし 適当に数字作ってる！ 参考：https://transcope.io/column/claude3 2024/4/7 システムエンジニア友の会 16

• https://transcope.io/column/claude3

事例③：ニュース記事作成 この記事でXのTLがざわついた記憶 • 筆者の感想は「そこそこ使えるじゃん」という所感。 • 微調整が必要な箇所があり、背景となる知識が足りていなかったり、余計 な情報が多かったりする。 • ITmedia NEWSのトンマナ（トーン＆マナー）に合っていない箇所もち らほらある。 • "バリ取り"をすれば土台にはなるレベル。 • GPT-3.5やGPT-4に比べて、与えた情報をもとに背景を読み取る努力が見 られるのがいい。 参考：https://www.itmedia.co.jp/news/articles/2403/08/news064.html 2024/4/7 システムエンジニア友の会 17

• https://www.itmedia.co.jp/news/articles/2403/08/news064.html

Claude 3 特徴 by Quatrex 2024/4/7 システムエンジニア友の会 18

外側から見たClaude 3 • 地頭がスゴイ • アウトプットの解像度と整合性 • 一般知識がかなりある • 常識、技術、制度、法律など幅広く • 多国語対応 • プログラミングも出来る • 固有知識には限界がある • 企業の情報 • 有名人の情報 • 固有知識が怪しいくせに、偽情報を流暢に喋る （ハルシネーション） 2024/4/7 システムエンジニア友の会 これが厄介 19

外側から見たClaude 3 Claude 3の中身（雰囲気） テキスト、画像 テキスト 人間 2024/4/7 スゴイ地頭 システムエンジニア友の会 かなりの 一般知識 固有知識 に限界 外 部 連 携 は 無 し 20

Claude 3 vs ChatGPT 地頭 vs 周辺機能 の様相。※Quatrexの感想です。 No. 項目 1 地頭 2 周辺機能 3 料金 2024/4/7 Claude 3 ChatGPT ◎ △ ○ ◎ ・簡素な機能とUI ・Webブラウジング ・Code Interpreter ・DALLE3 $20/月 $20/月 システムエンジニア友の会 21

Claude 3 使い方の案 2024/4/7 システムエンジニア友の会 22

Claude 3の使い方のポイント • 正しい情報をインプットする • テキストやPDFファイルを添付してあげる • アウトプットは検証可能なものにする • 利用者がチェックできる内容 • プログラムならコンパイラがある • 逆に正しくなくてもいい（感想や創作） よく知らないことを聞いて 納得してはいけない！ • 最高のアウトプットを得たいなら、お金を払ってOpusを使う 2024/4/7 システムエンジニア友の会 23

公式のプロンプトライブラリ 参考：https://docs.anthropic.com/claude/prompt-library 2024/4/7 システムエンジニア友の会 24

• https://docs.anthropic.com/claude/prompt-library

プロンプトエンジニアリングって必要？ • Claude 3は、理由はよく分からんがスゴく賢い。 • 適当なプロンプト（インプット）でも、いろいろ汲み取ってくれてアウト プットを作ってくれる。 • 幸いチャット方式だし、適当なプロンプトを繰り返してアウトプットの精 度を上げる方法も全然アリ。 • 生産性を上げるには、むしろ適当プロンプトが有利。 アウトプットの品質・物量 生産性 ＝ インプットに掛ける時間 2024/4/7 システムエンジニア友の会 25

参加者アンケート② Ｑ．（対話型AIを使っている方へ）主な使い方は？ • コーディングの補助。特になれない言語の 時とか • コード生成や情報検索、画像生成用プロン プト生成等 • コード生成、実装方法の問い合わせ • 必要なExcel関数やPythonの相談 • メモの整理／画像を入力したりしての調べ 物や翻訳など • メールの文面、書類作成、記事要約、語彙 を広げる、思考の整理 • ある言葉や概念について調べる。理解度1 ～5のうち、1を2にするために使うイメー ジ。 • RPA構築で困った時に相談 • 結果をJSONで出力させて、文章ではなく てデータとして活用する • 関数の作成、エラーメッセージの読解 2024/4/7 • 調べ物／検索エンジンの代替 • 土日のタスク管理。タスク管理をしてくれ る人がいないと、ダラダラ過ごしてしまい 無駄になるので。 システムエンジニア友の会 26

Claude 3 演習 2024/4/7 システムエンジニア友の会 27

演習①：難しい文書を理解したい • いろいろサマってもらう • 学ぶ必要のある技術記事 • 企業のIR資料 • 青空文庫の名作（冒涜かも…） 2024/4/7 システムエンジニア友の会 28

演習②：画像を理解したい • 画像から何かをアウトプットしてもらう • 風景写真で場所を特定（できるかも？） • グラフ類のコメントを書いてもらう • アプリ画面のWebページ化 2024/4/7 システムエンジニア友の会 29

演習③：フリー演習 • できるだけ無茶振りしてください • 無理にでも何かが返ってくるはず • 自分の常識を脇に置いておくのがポイント 2024/4/7 システムエンジニア友の会 30

おわりに 2024/4/7 システムエンジニア友の会 31

参加者アンケート③ Ｑ．対話型AIで出来たら嬉しいことを妄想すると？（抜粋） • ドラえもん（2票！） • 授業資料作り／技術書を自動的に漫画に変換する • 記事執筆の時間を短縮できたらいいなと思っています！ • 要件定義で確認するべき事を教えて欲しい。設計書を書いて欲しい。 • 個人に合わせた専門的なアドバイス(書籍、医療、法律、投資)など古典から最新の正確な情報 • カベウチ人生相談／経営相談 • 自分という人格をもう一つ作る • 個々に感情を持ったゲームの街人と冒険すること 2024/4/7 システムエンジニア友の会 32

生成AIの早すぎる進歩に脱帽 • ここ1年くらい、ChatGPTが正義、だと思っていた。 • Claude 3が、その状況を覆してきた。 • Geminiも頑張ってるし、Command R+とかいうヤバそうなの も出てきた。 • 今は変革の時、新しいものを素直に受け入れたもの勝ち。 • 一方で、冷静な目線も大切。生成AIで出来ること、出来ないこ との見極めが大切。 2024/4/7 システムエンジニア友の会 33

システムエンジニア友の会より • コラボ企画、持ち込み企画、お待ちしております。 • 勉強会の運営担当同士のコミュニケーションもやりましょう。 • 友の会からのアプローチをさせて頂くかも。 • 本日はどうも有難うございました！ • 次の企画をお楽しみに！ 2024/4/7 システムエンジニア友の会 34