国立研究開発法人産業技術総合研究所(産総研)は5月26日、「生成AI品質マネジメントガイドライン第1版」の発行を発表した。
同ガイドラインは、他社が開発しオンラインサービスやオープンソースソフトウェアとして提供されるLLMを部品として利用し、生成AIシステムを開発、運用する企業を主な対象とし、利用者に一定の品質を備えたシステムを提供するため、開発・運用者が行うべき事項を体系的に示している。
同ガイドラインでは、主なコンポーネントとして基盤モデル以外に、プロンプトとその周辺、RAG関連コンポーネント、外部連携コンポーネント、入力フィルター、出力フィルター、HMIコンポーネントを取り上げている。LLM利用AIシステムの品質マネジメントの基本的な流れは下記の通り。
1.LLM利用AIシステムの想定用途からその品質要件を導出する
2.そこから各コンポーネントに対する品質要件を導出する
3.各コンポーネントに品質要件を満たすための管理策を行う
同ガイドラインでは、LLMを利用したAIシステムを構成するコンポーネントごとに要件となる品質特性を示し、それらを実現するための管理策を記載している。
同ガイドラインの詳細は、5月27日に開催される2025年度人工知能学会全国大会のチュートリアル講演で発表される。
# | 言葉 | 意味 |
---|---|---|
5 | 品質 | ひんしつ (品質) : quality (of a product or a service) |
4 | 要件 | ようけん (要件) : 1. important matter 2. requirement; requisite; necessary condition; sine qua non |
3 | 開発 | かいはつ (開発) : development; exploitation |
2 | 生成 | せいせい (生成) : creation; generation; formation; derivation |
2 | 発表 | はっぴょう (発表) : announcement; publication; presenting; statement; communique; making known; breaking (news story); expressing (one's opinion); releasing; unveiling |
2 | 提供 | ていきょう (提供) : 1. offer; tender; providing; supplying; making available; donating (blood, organs, etc.) 2. sponsoring (a TV program) |
2 | 運用 | うんよう (運用) : 1. making use of; application; practical use; effective management (e.g. of funds) 2. operation; handling; steering (esp. a boat) |
2 | 主な | おもな (主な) : chief; main; principal; important |
2 | 示す | しめす (示す) : 1. to (take out and) show; to demonstrate; to tell; to exemplify; to make apparent 2. to point out (finger, clock hand, needle, etc.) |
2 | 導出 | どうしゅつ (導出) : derivation (e.g. in math, logic); drawing (conclusion, summary etc.); leading (e.g. to a conclusion, opinion, etc.) |
2 | 各 | かく (各) : each; every; all |
2 | 管理 | かんり (管理) : control; management (e.g. of a business) |
2 | 策 | さく (策) : 1. plan; policy; means; measure; stratagem; scheme 2. fifth principle of the Eight Principles of Yong; right upward flick |
1 | 国立研究開発法人 | こくりつけんきゅうかいはつほうじん (国立研究開発法人) : national research and development agency |
1 | 産業技術総合研究所 | さんぎょうぎじゅつそうごうけんきゅうしょ (産業技術総合研究所) : National Institute of Advanced Industrial Science and Technology; NAIST (organization) |
1 | 産総研 | さんそうけん (産総研) : National Institute of Advanced Industrial Science and Technology (abbr); AIST (organization) |
1 | 第 | だい (第) : prefix for forming ordinal numbers |
1 | 版 | はん (版) : 1. edition; version; printing; impression; implementation (e.g. software) 2. plate; block; cast |
1 | 発行 | はっこう (発行) : 1. publication; issue (of journal, newspaper, etc.) 2. issue (of banknotes, bonds, passport, etc.) |
1 | 他社 | たしゃ (他社) : another company; other company |
1 | 部品 | ぶひん (部品) : parts; accessories; components |
1 | 企業 | きぎょう (企業) : enterprise; business; company; corporation |
1 | 対象 | たいしょう (対象) : target; object (of worship, study, etc.); subject (of taxation, etc.) |
1 | 利用者 | りようしゃ (利用者) : user; end-user; consumer |
1 | 一定 | いってい (一定) : fixed; settled; constant; definite; uniform; regularized; regularised; defined; standardized; standardised; certain; prescribed |
1 | 備える | そなえる (備える) : 1. to furnish with; to equip with; to provide; to install 2. to prepare for; to make preparations for; to make provision for |
1 | 事項 | じこう (事項) : matter; item; facts |
1 | 体系的 | たいけいてき (体系的) : systematic |
1 | 基盤 | きばん (基盤) : 1. foundation; basis; base; footing; infrastructure 2. bedrock |
1 | 周辺 | しゅうへん (周辺) : 1. circumference; outskirts; environs; around; in the area of; in the vicinity of 2. (computer) peripheral |
1 | 関連 | かんれん (関連) : relation; connection; relevance |
1 | 外部 | がいぶ (外部) : 1. outside (e.g. of a building); exterior 2. outside (of a group, company, etc.); outside world |
1 | 連携 | れんけい (連携) : cooperation; coordination; link |
1 | 入力 | にゅうりょく (入力) : input; (data) entry |
1 | 出力 | しゅつりょく (出力) : output (electrical, signal, etc.) |
1 | 取り上げる | とりあげる (取り上げる) : 1. to pick up 2. to adopt (e.g. a proposal); to accept; to take up (a topic, complaint, etc.); to listen to; to deal with; to feature |
1 | 基本的 | きほんてき (基本的) : fundamental; basic |
1 | 流れ | ながれ (流れ) : 1. flow (of a fluid or gas); stream; current 2. flow (of people, things); passage (of time); tide; passing; (changing) trends; tendency |
1 | 下記 | かき (下記) : the following |
1 | 通り | とおり (通り) : 1. avenue; street; way; road 2. coming and going; street traffic |
1 | 想定 | そうてい (想定) : hypothesis; supposition; assumption |
1 | 用途 | ようと (用途) : use; service; purpose |
1 | 対する | たいする (対する) : 1. to face (each other); to be facing 2. to be directed toward (the future, etc.); to be in response to; to be related to |
1 | 満たす | みたす (満たす) : 1. to satisfy (conditions, one's appetite, etc.); to meet (e.g. demands); to fulfill; to gratify 2. to fill (e.g. a cup); to pack; to supply |
1 | 構成 | こうせい (構成) : composition; construction; formation; makeup; structure; organization; organisation |
1 | ごと | ごと (毎) : each; every |
1 | 特性 | とくせい (特性) : special characteristic; special quality; trait; idiosyncrasy; peculiarity |
1 | 実現 | じつげん (実現) : implementation (e.g. of a system); materialization; materialisation; realization; realisation; actualization; actualisation |
1 | 記載 | きさい (記載) : mention (in a document); record; entry; statement; listing |
1 | 詳細 | しょうさい (詳細) : 1. details; particulars; specifics 2. detailed; specific; minute |
1 | 開催 | かいさい (開催) : holding (a conference, exhibition, etc.); opening; hosting (e.g. the Olympics) |
1 | 年度 | ねんど (年度) : 1. fiscal year (usu. April 1 to March 31 in Japan); financial year 2. academic year; school year |
1 | 人工知能 | じんこうちのう (人工知能) : artificial intelligence; AI |
1 | 学会 | がっかい (学会) : learned society; scientific society; academy; academic meeting; academic conference |
1 | 全国大会 | ぜんこくたいかい (全国大会) : national convention; national competition; national athletic meet |
1 | 講演 | こうえん (講演) : lecture; address; speech |