服装の個別アイテムの特徴に注目して曖昧なファッションの表現をAIが自動で解釈する技術を開発
早稲田大学
株式会社ZOZO NEXT
<早稲田大学・ZOZO研究所 共同研究成果>
服装の個別アイテムの特徴に注目して
曖昧なファッションの表現をAIが自動で解釈する技術を開発
詳細は早稲田大学Webサイトをご覧ください。
【画像:https://kyodonewsprwire.jp/img/202308077850-O1-pgYn2fLE】
【表:https://kyodonewsprwire.jp/prwfile/release/M102172/202308077850/_prw_PT1fl_y4m03dP4.png】
早稲田大学(東京都新宿区、総長:田中愛治)大学院創造理工学研究科博士後期課程および株式会社ZOZO NEXT(本社:千葉県千葉市、代表取締役CEO:澤田宏太郎)の研究開発組織、ZOZO研究所に在籍する清水良太郎(しみずりょうたろう)、早稲田大学理工学術院 教授の後藤正幸(ごとうまさゆき)、およびZOZO研究所の中村拓磨(なかむらたくま)による研究グループは、ファッションへのイメージを自動的に学習・解釈し、ユーザーからの曖昧な問いに対する回答を得るための「Fashion Intelligence System」※1の精度を向上させた上で、新たな機能を実現するための機械学習モデルを開発しました。
今回開発したモデルでは、「この服装の上半身(下半身、靴など)はどのくらいカジュアルか」「この服装の上半身をもう少しビジネスカジュアルにするとどのような服装になるか」などのユーザーからのより詳細な質問への回答を得ることができます。
本研究成果は、オランダのエルゼビア社が発行する『Knowledge-Based Systems』(論文名:Partial visual-semantic embedding: Fine-grained outfit image representation with massive volumes of tags via angular-based contrastive learning)にて2023年7月28日(現地時間)にVersion of Record(最終公開版)としてオンラインで掲載されました。
■今回の研究で新たに実現しようとしたこと
従来のFashion Intelligence System では、全身の服装の画像を一括で学習しており、その中に含まれる個別のアイテム(Tシャツ、パンツ、スカートなど)に関する詳細な質問への回答を得る機能を有していませんでした。
本研究では、Fashion Intelligence Systemの機能を強化し、
1 )「この服装をもう少しフォーマルにしたらどんな服装になるか?」
2 )「この服装はどれくらいカジュアルか?」
3 )「この服装をカジュアルにしている要素は何か?」
といった質問に加え、
4)「この服装の上半身(下半身、靴など)のカジュアル度はどのくらいか」
5)「この服装の上半身をもう少しビジネスカジュアルにするとどんな服装になるか」
など、服装に含まれる個別のアイテムに注目した詳細な質問への回答も可能にしようと試みました。これらの問いに対する回答を自動的に獲得することで、ユーザーの認識の幅を広げ、ファッション(服装・着こなし)の解釈や興味喚起のための一助となることを目指しています。
【画像:https://kyodonewsprwire.jp/img/202308077850-O2-12OGw6U2】
■研究の波及効果や社会的影響
本研究の成果により、Fashion Intelligence Systemが回答可能な質問の範囲が広がり、ユーザーのより詳細な質問に回答することが可能になります。これにより、ファッション特有の曖昧性を軽減し、ファッションに関するユーザーのあらゆる(着る服や購入するアイテムなどの)選択・行動を支援することが期待されます。
■用語解説
※1 Fashion Intelligence System
本研究グループが開発した、ファッションを自動的に解釈し、ユーザーと協働することで、ファッションに関する新しい知識の発見と新しい価値の創造を促進する仕組みです(https://doi.org/10.1016/j.eswa.2022.119167)。人々の好みや価値観、文化的背景によって評価やイメージが異なる「ファッション」を対象とした、新しい知識の生成と発見を想定しています。
本技術では、全身の服装の画像と当該画像に付与された複数のタグ(ファッション特有の曖昧な表現が含まれた文字情報)の集合を同一ベクトル空間に写像させ、ベクトル空間における画像とタグの座標を活用することで機械学習を行っています。
■論文情報
雑誌名:Knowledge-Based Systems
論文名:Partial visual-semantic embedding: Fine-grained outfit image representation with massive volumes of tags via angular-based contrastive learning
執筆者名(所属機関名):Ryotaro Shimizu (Waseda University and ZOZO Research)、Takuma Nakamura (ZOZO Research)、Masayuki Goto (Waseda University)
掲載日(現地時間):2023年7月28日
掲載URL:https://www.sciencedirect.com/science/article/pii/S0950705123005415
DOI:10.1016/j.knosys.2023.110791
※記事にされる場合は、https://doi.org/10.1016/j.knosys.2023.110791の掲載をお願いいたします。
42歳MEGUMI、ヤンキー少女時代“衝撃の月収”に加藤浩次驚愕「高校生が?」
眞鍋かをり「腹たってきた。全部否定したい」臆測投稿に反論した星野源の胸中思う
山本由伸、6勝目狙う登板で序盤3回1失点 3回までの防御率5・81、4回以降は0・96
関根勤「公務員初任給」の駆け出し時代 かまいたち仰天のワケは
村重杏奈、9キロ減量美ボディー“イメージがらり”超ミニ美脚姿に絶賛「素晴らしいスタイル」
【DeNA】三浦監督「皆さんに触れ合ってもらえれば」愛馬リーゼントブルースがエスコン来場
59歳YOU”17歳年下女優”に「よく怒られてます」告白「あくなき向上心。真逆です」
【日本ハム】新庄監督「いいね~最高」“高速きつねダンス”披露のDeNA桑原を大絶賛
【日本ハム】守護神から一時外れる田中正義がベンチ入り 試合前は新庄監督からの激励に笑顔
少額の電子マネーでも違和感 警察官目指す大学生、特殊詐欺防ぐ
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
柏原崇(45)現在を調べてみた結果、相変わらずかっこよすぎた!
大原櫻子、ガーシー暴露後初のSNS投稿に賛否の声「イメージ最悪になった」
「暴露します」松本人志飲み会参加セクシー女優「衝撃作」発売「言えなくてずっと溜めてた」
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
浜崎あゆみ、子供の写真公開に疑いの声止まず「よそのお宅の子供?」
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
漫才師の今くるよさん死去 膵がんのため
大谷翔平被弾投手が悪態ついて退場処分!次打者フリーマンと対戦中に判定巡り塁審と口論
金正恩の妹・金与正関連のネタ投稿がTwitterで大量に出回る
何があった!?「エアコン」が想定外の壊れ具合!投稿者に話を聞いた
柏原崇(45)現在を調べてみた結果、相変わらずかっこよすぎた!
玉置浩二の妻、青田典子(53)の現在がとんでもない事になっていると話題に
ユーチューバーもこう氏、元彼女・成海瑠奈について赤裸々告白
元めちゃイケメンバーの三中元克(32)現在は何をしているのか調べてみた!
TikTokを賑わす「フエラムネごめんなサイダー味」がセブンイレブンで再販!じゅるるマスカットも買うなら今!
小倉優子、不自然な“二重ライン”にネット騒然「やっぱり整形?」
ガーシーが綾野剛のLINE公開でネット騒然「ショック」「すごいエンタメ」
岡本夏生(56)、1600日ぶりにブログを更新した現在が衝撃
大原櫻子、ガーシー暴露後初のSNS投稿に賛否の声「イメージ最悪になった」
42歳MEGUMI、ヤンキー少女時代“衝撃の月収”に加藤浩次驚愕「高校生が?」
眞鍋かをり「腹たってきた。全部否定したい」臆測投稿に反論した星野源の胸中思う
山本由伸、6勝目狙う登板で序盤3回1失点 3回までの防御率5・81、4回以降は0・96
関根勤「公務員初任給」の駆け出し時代 かまいたち仰天のワケは
村重杏奈、9キロ減量美ボディー“イメージがらり”超ミニ美脚姿に絶賛「素晴らしいスタイル」
【DeNA】三浦監督「皆さんに触れ合ってもらえれば」愛馬リーゼントブルースがエスコン来場
【日本ハム】守護神から一時外れる田中正義がベンチ入り 試合前は新庄監督からの激励に笑顔
59歳YOU”17歳年下女優”に「よく怒られてます」告白「あくなき向上心。真逆です」
【日本ハム】新庄監督「いいね~最高」“高速きつねダンス”披露のDeNA桑原を大絶賛
少額の電子マネーでも違和感 警察官目指す大学生、特殊詐欺防ぐ