講演抄録/キーワード |
講演名 |
2023-03-06 14:14
映像検索における効率的なプロンプトエンジニアリングの検討 ○鈴木和也・千葉晃裕・植木一也(明星大) |
抄録 |
(和) |
近年,Vision and Language の技術が発展している.それに伴い,映像検索の分野も発展している.本研究では,Vision and Language の手法を映像検索に用いる際,入力となるクエリ文の変化による精度の変化を検証した.検証した内容は,検証内容 1「クエリ文の最初にフレーズを付与する」,検証内容 2「クエリ文内の重要語を文末もしくは文頭につける」の 2 種類である.結果として,検証内容 2「クエリ文内の重要語を文末もしくは文頭につける」は有効であった.特に文末に重要語をつけた場合多くのパターンで精度が向上した.検証内容 1「クエリ文の最初にフレーズを付与する」はフレーズによって結果が異なる.精度が向上するフレーズでは特に CLIP 及び SLIP で有効であった.また,クエリ文とプロンプトエンジニアリングをした文の 2 つを用いて検索をすると,大きく精度が向上することが少なくなったがより多くのクエリ文で精度が向上するようになった. |
(英) |
In recent years, Vision and Language technologies have been developed. In addition, the field of video retrieval has been developing along with it. In this study, we examined the accuracy of using Vision and Language techniques for video retrieval by changing the input query sentences. We conduct two types of validation: validation 1 "Adding a phrase at the beginning of a query sentence" and validation 2 "Adding an important word in a query sentence at the end or the beginning of a sentence". As a result, validation 2 "Adding important words in the query sentence to the end or the beginning of the sentence," was effective. "Adding the important words at the end of the sentence" improved the accuracy in many patterns. The result of validation 1 "Appending a phrase to the beginning of a query sentence" varied depending on the phrase. The phrases that improved accuracy were particularly effective for CLIP and SLIP. When two query sentences and a promptengineered sentence were used in the search, accuracy was improved in more query sentences, although the number of cases where accuracy was greatly improved was reduced. |
キーワード |
(和) |
Vision and Language / プロンプトエンジニアリング / 映像検索 / / / / / |
(英) |
Vision and Language / Prompt Engineering / Video retrieval / / / / / |
文献情報 |
映情学技報, vol. 47, pp. 103-106, 2023年3月. |
資料番号 |
|
発行日 |
2023-02-27 (AIT) |
ISSN |
Print edition: ISSN 1342-6893 Online edition: ISSN 2424-1970 |
PDFダウンロード |
|
研究会情報 |
研究会 |
AIT IIEEJ AS CG-ARTS |
開催期間 |
2023-03-06 - 2023-03-06 |
開催地(和) |
東京工芸大学中野C |
開催地(英) |
Tokyo Polytechnic Univ. (Nakano) |
テーマ(和) |
映像表現・芸術科学フォーラム2023(Expressive Japan 2023) |
テーマ(英) |
Expressive Japan 2023 |
講演論文情報の詳細 |
申込み研究会 |
IIEEJ |
会議コード |
2023-03-AIT-IIEEJ-AS-ARTS |
本文の言語 |
日本語 |
タイトル(和) |
映像検索における効率的なプロンプトエンジニアリングの検討 |
サブタイトル(和) |
|
タイトル(英) |
Investigation of efficient prompt engineering for video retrieval |
サブタイトル(英) |
|
キーワード(1)(和/英) |
Vision and Language / Vision and Language |
キーワード(2)(和/英) |
プロンプトエンジニアリング / Prompt Engineering |
キーワード(3)(和/英) |
映像検索 / Video retrieval |
キーワード(4)(和/英) |
/ |
キーワード(5)(和/英) |
/ |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
鈴木 和也 / Kazuya Suzuki / スズキ カズヤ |
第1著者 所属(和/英) |
明星大学 (略称: 明星大)
Meisei University (略称: Meisei Univ.) |
第2著者 氏名(和/英/ヨミ) |
千葉 晃裕 / Akihiro Chiba / チバ アキヒロ |
第2著者 所属(和/英) |
明星大学 (略称: 明星大)
Meisei University (略称: Meisei Univ.) |
第3著者 氏名(和/英/ヨミ) |
植木 一也 / Kazuya Ueki / ウエキ カズヤ |
第3著者 所属(和/英) |
明星大学 (略称: 明星大)
Meisei University (略称: Meisei Univ.) |
第4著者 氏名(和/英/ヨミ) |
/ / |
第4著者 所属(和/英) |
(略称: )
(略称: ) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2023-03-06 14:14:00 |
発表時間 |
12分 |
申込先研究会 |
IIEEJ |
資料番号 |
AIT2023-63 |
巻番号(vol) |
vol.47 |
号番号(no) |
no.9 |
ページ範囲 |
pp.103-106 |
ページ数 |
4 |
発行日 |
2023-02-27 (AIT) |