| 講演抄録/キーワード |
| 講演名 |
2026-10-08 14:45
ゼロショット構成画像検索における内部特徴量を用いた検索失敗の事前予測に関する検討 ○上杉健大・斉藤直輝・前田圭介・小川貴弘・長谷山美紀(北大) |
| 抄録 |
(和) |
ゼロショット構成画像検索は,参照画像と変更を指示
する修正テキストから目的画像を検索する画像検索手
法であるが,目的画像が検索上位から大きく外れる破
滅的失敗をしばしば引き起こす.本稿では,凍結され
た合成クエリ埋め込みに線形プローブを適用し,この
失敗をギャラリー参照前に予測できるかを検証する.
4 つのベンチマークと 5 つのエンコーダを対象とした
実験において,平均 AUROC 0.767 を達成し,ラベルを
用いない検索前予測を上回った.さらに,この予測信
号が主として修正テキストの埋め込みに由来すること
を示す. |
| (英) |
Zero-shot composed image retrieval (ZS-CIR) retrieves a target image
from a reference image and a modification text specifying the intended
change, but it often suffers catastrophic failures in which the target
is ranked far below the top of the retrieved list. This paper applies a
linear probe to frozen composed-query embeddings and examines whether
such failures can be predicted before the gallery is accessed. Across
four benchmarks and five encoders, the probe attains a mean AUROC of
0.767, exceeding label-free pre-retrieval predictors. We further show
that this predictive signal originates primarily from the
modification-text embedding. |
| キーワード |
(和) |
ゼロショット構成画像検索 / 検索前失敗予測 / クエリ性能予測 / / / / / |
| (英) |
Zero-shot composed image retrieval / Pre-retrieval failure prediction / Query performance prediction / / / / / |
| 文献情報 |
映情学技報 |
| 資料番号 |
|
| 発行日 |
|
| ISSN |
Online edition: ISSN 2424-1970 |
| PDFダウンロード |
|
| 研究会情報 |
| 研究会 |
IEICE-SIS BCT |
| 開催期間 |
2026-10-08 - 2026-10-09 |
| 開催地(和) |
鹿児島大学 郡元キャンパス内稲盛アカデミー棟 |
| 開催地(英) |
Kagoshima Univ. |
| テーマ(和) |
システム実現技術,近距離通信応用システム,知的マルチメディア処理システム,放送・通信連携,一般 |
| テーマ(英) |
|
| 講演論文情報の詳細 |
| 申込み研究会 |
IEICE-SIS |
| 会議コード |
2026-10-SIS-BCT |
| 本文の言語 |
日本語 |
| タイトル(和) |
ゼロショット構成画像検索における内部特徴量を用いた検索失敗の事前予測に関する検討 |
| サブタイトル(和) |
|
| タイトル(英) |
A Note on Pre-retrieval Failure Prediction Using Internal Representations in Zero-shot Composed Image Retrieval |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
ゼロショット構成画像検索 / Zero-shot composed image retrieval |
| キーワード(2)(和/英) |
検索前失敗予測 / Pre-retrieval failure prediction |
| キーワード(3)(和/英) |
クエリ性能予測 / Query performance prediction |
| キーワード(4)(和/英) |
/ |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
上杉 健大 / Kenta Uesugi / ウエスギ ケンタ |
| 第1著者 所属(和/英) |
北海道大学 (略称: 北大)
Hokkaido University (略称: Hokkaido Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
斉藤 直輝 / Naoki Saito / サイトウ ナオキ |
| 第2著者 所属(和/英) |
北海道大学 (略称: 北大)
Hokkaido University (略称: Hokkaido Univ.) |
| 第3著者 氏名(和/英/ヨミ) |
前田 圭介 / Keisuke Maeda / マエダ ケイスケ |
| 第3著者 所属(和/英) |
北海道大学 (略称: 北大)
Hokkaido University (略称: Hokkaido Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
小川 貴弘 / Takahiro Ogawa / オガワ タカヒロ |
| 第4著者 所属(和/英) |
北海道大学 (略称: 北大)
Hokkaido University (略称: Hokkaido Univ.) |
| 第5著者 氏名(和/英/ヨミ) |
長谷山 美紀 / Miki Haseyama / ハセヤマ ミキ |
| 第5著者 所属(和/英) |
北海道大学 (略称: 北大)
Hokkaido University (略称: Hokkaido Univ.) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2026-10-08 14:45:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
IEICE-SIS |
| 資料番号 |
|
| 巻番号(vol) |
vol.50 |
| 号番号(no) |
|
| ページ範囲 |
|
| ページ数 |
|
| 発行日 |
|