「2024年問題」に本気で取り組む！言葉だけじゃないDXを目指すAI活用の現在地 - 生成AIからAIエージェントへ -

C3-BIM ユーザーが投稿した質問文 AIからの回答質問文に対してAIがBIMデータを活用して回答回答に関連した部屋の情報 AIからの回答に関連した部屋情報を表示し、 R2-BIM（ダッシュボード）へリンク関連性が高い社内外の文書質問文や回答をもとに関連性が高い、社内外のドキュメントへのリンクを表示

46.

C3-BIMの狙い単なるチャットUIだけだと、質問文（プロンプト）によって得られる情報の精度が左右されてしまう AIによって回答や回答に関連したBIMデータを解析し、それらに関連した社内外の情報ソースを検索し表示することで、本人が意図していないが業務に必要な情報を得ることができる

47.

システムイメージ

48.

Azure AI Searchのベクトル解析ベクトル化：あらかじめ検索対象となる文書データの内容を数値的なベクトルに変換しておく類似度の計算：投稿された質問文も同様にベクトル化し、類似度を計算するランキング：類似度スコアに基づいて関連性の高い検索結果を返す

49.

文書（PDF）の解析について PDF以外にText、Excel、Word、PowerPoint、CSVなどのファイル形式を解析対象にすることが可能 PDF解析はテキスト抽出を行った上で、解析をかけている

50.

仕事できるくん https://www.docswell.com/s/HoloLab/5382V1-holoconf24_a6

https://www.docswell.com/s/HoloLab/5382V1-holoconf24_a6

51.

仕事できるくん AIの解析結果要求水準書で求められている内容とBIMデータを比較して、解析した結果をレポート表示

52.

仕事できるくんの狙い文書を入手文書をアップロード文書から要件を抽出文書から要件を抽出設計図書から情報を入手 BIMから情報を入手要件を満たしてるか確認要件を満たしてるか確認熟練技術者仕事できるくん ChatGPTがやっている部分

53.

仕事できるくんの狙い熟練技術者の経験知をプロンプト化し、活用できるようにする熟練技術者の教育コストを抑える AIを介した技術継承

54.

Lang Chain Agent 言語モデルに渡されたツールを用いて、モデル自体が「次にどのようなアクションをとるか」を決定し、実行し、観測し、完了するまでを繰り返す機能ユーザーからの質問文をもとにプロンプトを作成し、その中でツールを指定することで固有のプロジェクト情報（BIMデータ）をベースにした回答を作成する

55.

エージェント？ Image by Pete Linforth from Pixabay

56.

OpenAI DevDay (2023) “最終的には、コンピューターに必要なことを頼むだけで、これらのタスクをすべてやってくれるようになるだろう。” “今回紹介するGPTsはGPTのカスタムバージョンであり、命令、拡張知識、およびアクションを組み合わせたものだ。” “これらはAIエージェントへの第一歩であり、我々は時間をかけてその機能を増やしていく予定だ”

57.

OpenAIがAI進展の5段階スケール Level1 : チャットボット（Chatbots） Level2 : 推論者（Reasoners） Level3 : エージェント（Agents） Level4 : 発明家（Innovators） Level5 : 組織（Organizations）イマココ

58.

GPTs 自分好みのChatGPTを作成できる機能欲しい情報源（テキスト、ファイルなど）をアップロードすると、その情報源を利用して回答してくれるようになる他人がつくったGPTを使うこともできる画像生成、添削、論文検索、デザイン… チームでGPTを共有するプランも登場

59.

出展：ガートナー（August 2024）

60.

AIエージェントとは人がいちいち指示をしなくとも、自分でやることを考えて、様々なツールを活用して目標に向かってタスクをこなしていくAIの仕組みのこと仕事の支援にとどまらず完了を目指す

61.

社会シミュレーションGenerative Agents スタンフォード大学とGoogleの共同研究であるエージェント論文自律的に動作する25名のAIエージェントを仮想の町に住ませて、実際に2日間動かして社会シミュレーションを実施した市長（町長）の選出、パーティーなどが開催された https://arxiv.org/abs/2304.03442

https://arxiv.org/abs/2304.03442

62.

開発者を代替するAIエンジニア 2024年3月12日にCognition社が「Devin」を発表世界初のAIエンジニア支援型ではなく自律型で実際にタスクをこなすことができる仕様変更の対応、バグの発見と修正、デバッグ、デプロイ… 2024年10月10日現在でWaiting List申請受付中 https://www.youtube.com/watch?v=fjHtjT7GO1c

https://www.youtube.com/watch?v=fjHtjT7GO1c

63.

AIエージェントユーザー AIエージェントアウトプットタスク必要なツールを選択し、組み合わせてタスクを実行インターネット情報ファイル情報プログラムの実行ツールソフトウェア他のAIエージェント

64.

方向性はよさそう！

65.

仕事できるくんの場合ユーザー AIエージェントアウトプット図書をアップロードする必要なツールを選択し、組み合わせてタスクを実行図書情報を読み取る BIMデータを取得するツールレポートを生成する

66.

AIエージェントを活用してみて組み合わせることで回答の精度はあがる対応できる業務の範囲が広がる AIエージェント自体を組み合わせていくことで、さらに業務の範囲が広がる可能性がある現在の業務（AS-IS）について分析し、理想的な業務のありかた（TOBE）について定義することが重要

67.

まとめ

68.

これまでのソフトウェアづくりユーザーとユーザーが求めているもの（情報、商品、体験）をどうつなげるかつなげ方を試行錯誤するところがソフトウェア開発の本丸インプット→仕組み→アウトプット仕組み＝検索、レコメンド、アルゴリズム、ユーザーインタフェース… 求めているもの（情報、商品、体験…）ユーザーソフトウェア

69.

AI時代のソフトウェアづくりつなげ方の一部あるいは大部分を生成AIに任せるようにパーソナライズの進化と深化多様なインプットを受け取ることができるユーザーが求めるアウトプット方式を選ぶことができる「予め用意したものを提供する」から「必要なものがリアルタイムで生成される」へ求めているもの（情報、商品、体験…）ユーザーソフトウェア

70.

https://speakerdeck.com/masahiro_nishimi/llmdedekiru-shi-eru-sheng-cheng-aieziento?slide=31