映像・3次元情報処理

技術カテゴリ紹介

実世界データとしての映像、音響、3D点群などのメディア情報の解析により、現実世界そのものをサイバー世界に射影し、時間・空間的に制御可能にする技術と、サイバー世界に射影された現実世界そのものを反映する超高臨場メタバースを活用して、距離や時差を超えたコミュニケーションを実現し、人の活動・能力の幅を拡張するための研究を行っています。

研究紹介

  1. 3D点群メディア処理技術
  2. 映像音響メディア処理技術

文献リスト

2024

その他

  1. 佐藤将吾, 吉田大我, 谷田隆一, "天候や日照条件に左右されない街本来の「真の色」を推定する技術", 画像ラボ 2024年1月号, 2024.

2023

論文

  1. Shogo Sato, Yasuhiro Yao, Taiga Yoshida, Shingo Ando, Jun Shimamura,  "Shadow Detection Based on Luminance-LiDAR Intensity Uncorrelation", IEICE Transactions on Information and Systems, 2023.

国際会議

  1. Shogo Sato, Yasuhiro Yao, Taiga Yoshida, Takuhiro Kaneko, Shingo Ando, Jun Shimamura, "Unsupervised Intrinsic Image Decomposition with LiDAR Intensity", CVPR, 2023.

国内会議

  1. 堤公孝, "全天球画像とアンビソニックスを用いた音源分離", 立体メディア研究会, 2023.
  2. ウ 小軍, 谷田 隆一, 島村 潤, "階層構造に基づく大規模3D点群データのインタラクティブ可視化", 映像表現・芸術科学フォーラム, 2023.
  3. 菊地由実, 井元麻衣子, 深津真二, "コンテンツ視聴における社会的存在感の検討と評価", ヒューマン情報処理研究会, 2023.
  4. 井元麻衣子, 菊地由実, 深津真二, "複数の視聴覚刺激の時間ずれが視聴覚統合の時間窓に与える影響", ヒューマン情報処理研究会, 2023.
  5. 松元崇裕, 千明裕,望月崇由, "高密度な色付き3次元点群空間における欠損部の自動補完手法について", PRMU, 2023.
  6. 塚谷俊介, 杉本祐樹, 吉田大我, 島村潤, "点群セグメンテーションのための物体内部点を用いた境界領域の対照学習手法", 第29回画像センシングシンポジウム, 2023.
  7. 青木政勝, 阿部直人, 小長井俊介, 島村潤, "空中写真から抽出した地物形状の補正", 第29回 画像センシングシンポジウム, 2023.
  8. 倉田夏奈, 渡邊真由子, 谷田隆一, 島村潤, "サーモグラフィとRGB画像の統合処理に向けたNeRFの応用”, MIRU, 2023.
  9. Shogo Sato, Yasuhiro Yao, Taiga Yoshida, Takuhiro Kaneko, Shingo Ando, Jun Shimamura, "Unsupervised Intrinsic Image Decomposition with LiDAR Intensity", MIRU, 2023.
  10. 辻真彦, 松元崇裕, 吉田大我, 千明裕, "カメラと3D-LiDARを活用した画像による自己位置推定手法の提案”, MIRU, 2023.
  11. 松元崇裕, 千明裕, 望月崇由, "高密度な色付き点群の欠損補完手法と点群彩色DNNの学習方法に関する比較検討”, MIRU, 2023.
  12. ウ小軍, 谷田隆一, 島村潤, "大規模3D点群データの階層的構造解析", MIRU, 2023.
  13. 青木政勝, 阿部直人, 小長井俊介, 島村潤, "空中写真から抽出した地物形状の補正", MIRU, 2023.
  14. 小長井俊介, 阿部直人, 吉田大我, 谷田隆一, "DNN建物抽出結果の整列化効果検討報告", MIRU, 2023.
  15. Shogo Sato, Yasuhiro Yao, Taiga Yoshida, Takuhiro Kaneko, Shingo Ando, Jun Shimamura, "Unsupervised Intrinsic Image Decomposition with LiDAR Intensity", FIT, 2023.
  16. ウ小軍, 谷田隆一, "大規模3D点群データから高精細移動経路検出手法", FIT, 2023.
  17. 井元麻衣子, 菊地由実, 深津真二, "ユーザの各種動作時における映像と音の時間ズレが視聴覚統合に与える影響の検討", ヒューマン情報処理研究会, 2023.
  18. 紺谷精一, 黒住隆行, 深津真二, "大規模野外空間へのNeRF適用に関する考察", パターン認識・メディア理解研究会, 2023.
  19. 中嶋淳一, 深津真二, "リアルタイム4倍動画超解像の効率的モデルに関する検証", 映像情報メディア学会冬季大会, 2023.
  20. 山田翔大, 黒住隆行, "複数条件から作成した学習済みNeRFを組み合わせた3Dシーン再構成", 映像情報メディア学会冬季大会, 2023.
  21. 宮川和, 中島靖之, 千石大樹, "ペダル操作に連動したWebRTCを用いたリアルタイム自転車走行体験システム", 映像情報メディア学会冬季大会, 2023.
  22. 堤公孝, "音源分離と深度推定を用いた音響空間再構成", 映像情報メディア学会冬季大会, 2023.
  23. 堤公孝, "画像と時系列音響情報を用いた音源分離", 映像情報メディア学会冬季大会, 2023.

その他

  1. 谷田隆一, 吉田大我, "サイバー空間の空間表現性を高める点群メディア処理技術", 通信ソサイエティマガジン 67号, 2023.

2022

論文

  1. Kazuhiko Murasaki, Shingo Ando, Jun Shimamura, "Semi-Supervised Representation Learning via Triplet Loss Based on Explicit Class Ratio of Unlabeled Data", IEICE Trans. Inf. Syst., 2022.
  2. Kana Kurata, Yasuhiro Yao, Shingo Ando, Naoki Ito, and Jun Shimamura, "Aggregative Input Convolution for Large-scale Point Cloud Semantic Segmentation", IIEEJ Transactions on Image Electronics and Visual Computing, 2022.

国内会議

  1. 八尾泰洋, 石川涼一, 安藤慎吾, 島村潤, 大石岳史, "LiDARと多視点ステレオのEarly Fusionの一検討", 3次元画像コンファレンス, 2022.
  2. 黒住隆行, 芹澤優花, 長谷川馨亮, 深津真二, "ライブ配信イベントに参加する複数のリモート観客の映像同期の検討", 画像工学研究会, 2022.
  3. 今泉健太, 堤公孝, "セマンティックセグメンテーションを活用したインペインティング",画像電子学会年次大会, 2022.
  4. 堤公孝, "大規模スピーカアレイを用いた音響ホログラフィの応用", 映像情報メディア学会年次大会, 2022.
  5. 小長井俊介, 阿部直人, 青木政勝, 島村潤, "標高データを利用した空中写真からの建物抽出", 画像電子学会年次大会, 2022.
  6. 羽田理恵, 今泉健太, 堤公孝, "広域での空間音響再現のための音響プロキシ", 立体メディア技術研究会, 2022.
  7. 堤公孝, 今泉健太, "全天球画像を用いたモノラル信号からの空間音響生成", 立体メディア研究会, 2022.
  8. 片山淳, 安藤慎吾, 島村潤, "STDPの学習への貢献", 汎用人工知能研究会, 2022.
  9. 片山淳, 吉田大我, 島村潤, "位相シーケンサによる概念生成", 汎用人工知能研究会, 2022.
  10. 塚谷 俊介, 杉本 祐樹, 伊藤 直己, 島村 潤, "幹推定に基づく欠損領域を含む点群樹木検出手法", 画像電子学会研究会, 2022.
  11. 今泉健太, 堤公孝, "スペクトログラム画像に対するインペインティングによる突発音除去", 映像情報メディア学会冬季大会, 2022.
  12. 杉本祐樹, 塚谷俊介, 伊藤直己, 吉田大我, 島村潤, "3次元点群の柱状物体インスタンス化における過分割・過検出抑制手法", 映像情報メディア学会冬季大会, 2022.

その他

  1. 八尾泰洋, "LiDARとその特徴", 映像情報メディア学会誌, 2022.

2021

論文

  1. Yasuhiro Yao, Ryoichi Ishikawa, Shingo Ando, Kana Kurata, Naoki Ito, Jun Shimamura, Takeshi Oishi, "Non-Learning Stereo-Aided Depth Completion Under Mis-Projection via Selective Stereo Matching", IEEE Access, 2021.
  2. Motohiro Takagi, Kazuya Hayase, Masaki Kitahara, Jun Shimamura, "Building Change Detection by Using Past Map Information and Optical Aerial Images", IEICE Trans. Inf. Syst. , 2021.

国際会議

  1. Kana Kurata, Yasuhiro Yao, Shingo Ando, Naoki Ito and Jun Shimamura, "Aggregative Input Convolution for Large-Scale Point Cloud Semantic Segmentation", IEVC, 2021

国内会議

  1. 千明裕, "新しいスポーツ観戦体験創造のための取り組み", 第24回CSシンポジウム, 2021.
  2. 佐藤将吾, 八尾泰洋, 安藤慎吾, 島村潤, "LiDAR光反射強度に基づいた日影領域検出補正技術の提案と実証", パターン認識・メディア理解研究会, 2021.
  3. 堤公孝, "球面調和級数展開を用いた多視点映像生成におけるニューラルネットを用いた画質改善", 立体メディア研究会, 2021.

その他

  1. 八尾泰洋, 石川涼一, 安藤慎吾, 倉田夏菜, 伊藤直己, 島村潤, 大石岳史, "単一時刻の計測からのターゲットレスなステレオカメラと3D LiDAR間の外部キャリブレーション", 画像ラボ, 2021.

表彰

  1. 先進映像協会 ルミエール・ジャパン・アワード2021 3D部門 グランプリ:文化庁, IMAGICA GROUP, NTTコミュニケーションズ, 日本電信電話, さらい, IMAGICA エンタテインメントメディアサービス, ”発見!南極に恐竜がいた! Hidden Stereo Ver”, 2021.