SEARCH
検索詳細斉藤 直輝 (サイトウ ナオキ)
| 数理・データサイエンス教育研究センター 実践教育プログラム部門 | 助教 |
大規模言語モデル・AIエージェント・ロボット基盤モデル・情報検索・マルチモーダル情報処理に関する研究に従事.論文・特許・対話データなど多様な情報を対象として,対話からの性格特性推定,産学連携支援のための知識発見,ロボット知能の高度化など,人とAI・ロボットの知的協調を支援する情報解析技術の実社会応用について研究を実施している.
IEEE,電子情報通信学会,人工知能学会,日本ロボット学会 会員.博士(情報科学).
研究者基本情報
■ 学位■ URL
researchmap URLホームページURL■ ID 各種
研究者番号
- 00798225
研究キーワード研究分野
経歴
■ 経歴経歴
- 2026年04月 - 現在
北海道大学, 数理・データサイエンス教育研究センター, 助教 - 2023年04月 - 2026年03月
北海道大学, 総合IR本部, 助教 - 2022年09月 - 2023年03月
北海道大学, 総合IR室, 助教 - 2019年10月 - 2022年08月
釧路工業高等専門学校, 創造工学科, 助教 - 2019年04月 - 2019年09月
北海道大学, 大学院情報科学研究院, 博士研究員 - 2016年04月 - 2018年09月
北海学園大学, 工学部, 非常勤講師
- 2016年04月 - 2019年03月, 北海道大学, 大学院情報科学研究科, メディアネットワーク専攻 博士後期課程
- 2014年04月 - 2016年03月, 北海道大学, 大学院情報科学研究科, メディアネットワーク専攻 修士課程
- 2012年04月 - 2014年03月, 釧路工業高等専門学校, 専攻科, 電子情報システム工学専攻
- 2007年04月 - 2012年03月, 釧路工業高等専門学校, Department of Electronic Engineering, 電子工学科
研究活動情報
■ 受賞- 2019年01月, The 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia IWAIT Best Paper Award
Classification of Tourism Categories Based on Heterogeneous Features Considering Existence of Reliable Results
斉藤直輝;小川貴弘;浅水仁;長谷山美紀 - 2018年02月, IEEE Sapporo Section, 2017 IEEE Sapporo Section Paper Awards Encouragement Award
A Tourism Category Classification Method Based on Estimation of Reliable Decision
斉藤直輝;小川貴弘;浅水仁;長谷山美紀 - 2016年10月, IEEE Consumer Electronics Society, 1st Prize IEEE GCCE 2016 Excellent Poster Award
A Tourism Category Classification Method Based on Estimation of Reliable Decision
斉藤直輝;小川貴弘;浅水仁;長谷山美紀 - 2015年02月, IEEE Sapporo Section, The 2015 IEEE Sapporo Section Student Paper Contest Encouraging Prize
画像共有サービスにおける投稿画像の分類結果の信頼度推定に関する検討
斉藤直輝;小川貴弘;浅水仁;長谷山美紀 - 2012年, 平成24年度 釧路しんきん地域貢献助成制度 学生研究奨励賞
- DIAL: Database-Informed Interactive Multi-Agent System Loop for Personalized Image Generation
Taiyo Sato; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
ICASSP 2026 - 2026 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), 13262, 13266, IEEE, 2026年05月03日, [査読有り]
研究論文(国際会議プロシーディングス) - LLM-in-the-Loop Descriptor Prompt Refinement for Dialogue-Based Big Five Personality Recognition
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Yoshioka; Takeshi Konno; Takahiro Ogawa; Miki Haseyama
2026 IEEE 2nd International Conference on Consumer Technology (ICCT-Pacific), 270, 273, IEEE, 2026年03月28日, [査読有り]
研究論文(国際会議プロシーディングス) - Unified Scene Graph Forecasting Considering Node Birth and Disappearance
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2026 IEEE 2nd International Conference on Consumer Technology (ICCT-Pacific), 345, 348, IEEE, 2026年03月28日, [査読有り]
研究論文(国際会議プロシーディングス) - Discrete Prompt Tuning via Recursive Utilization of Black-Box Multimodal Large Language Model for Personalized Visual Emotion Recognition
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
IEEE Access, 14, 57920, 57932, Institute of Electrical and Electronics Engineers (IEEE), 2026年, [査読有り]
研究論文(学術雑誌) - Similar Image Generation via Human-like Iterative Prompt Refinement with Multimodal Large Language Model
Taiyo Sato; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2025 IEEE 14th Global Conference on Consumer Electronics (GCCE), 246, 247, IEEE, 2025年09月23日, [査読有り]
研究論文(国際会議プロシーディングス) - Enhancing Image Classifier Robustness via Prompt-Based Counterfactual Data-Augmentation with Intermediate Transitions
Tomoya Mitsui; Ren Togo; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2025 IEEE 14th Global Conference on Consumer Electronics (GCCE), 1267, 1268, IEEE, 2025年09月23日, [査読有り]
研究論文(国際会議プロシーディングス) - Personalized Visual Emotion Classification through Discrete Prompt Tuning of Large Multimodal Model
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
2025 IEEE International Conference on Consumer Electronics - Taiwan (ICCE-Taiwan), 35, 36, IEEE, 2025年07月16日, [査読有り]
研究論文(国際会議プロシーディングス) - Expert Comment Generation Considering Sports Skill Level Using a Large Multimodal Model with Video and Spatial-Temporal Motion Features
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
Sensors, 2025年01月14日, [査読有り]
研究論文(学術雑誌) - Multimodal large language modelのin-context learningによる車載カメラ映像を用いた高速道路附属物および植生の異常検出
太齊蓮; 李想; 五箇亮太; 斉藤直輝; 前田圭介; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀
AI・データサイエンス論文集, 6, 3, 393, 405, 2025年, [査読有り]
日本語, 研究論文(学術雑誌) - Expert Comment Generation from Sports Videos Using Multimodal LLM
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Huang-Chia Shih; Satoshi Asamizu; Miki Haseyama
INTERNATIONAL WORKSHOP ON ADVANCED IMAGING TECHNOLOGY, IWAIT 2025, 13510, 2025年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Triplet Synthesis for Enhancing Composed Image Retrieval via Counterfactual Image Generation.
Kenta Uesugi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
ICASSP, 1, 5, 2025年, [査読有り]
研究論文(国際会議プロシーディングス) - Graph Convolutional Network-based Sports Skill-level Recognition via Deep Metric Learning
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2024 International Technical Conference on Circuits/Systems, Computers, and Communications (ITC-CSCC), 15, 1, 4, IEEE, 2024年07月02日, [査読有り]
研究論文(国際会議プロシーディングス) - Expert–Novice Level Classification Using Graph Convolutional Network Introducing Confidence-Aware Node-Level Attention Mechanism
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
Sensors, 2024年05月10日
研究論文(学術雑誌) - Confidence-Aware Spatial-Temporal Attention Graph Convolutional Network for Skeleton-Based Expert-Novice Level Classification
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
ICASSP 2024 - 2024 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), IEEE, 2024年04月14日
研究論文(国際会議プロシーディングス) - Personalized Visual Emotion Classification via In-context Learning in Multimodal LLM.
Ryo Takahashi; Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Miki Haseyama
GCCE, 1167, 1168, 2024年
研究論文(国際会議プロシーディングス) - Zero-shot Composed Video Retrieval with Projection Module Bridging Modality Gap.
Kenta Uesugi; Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Miki Haseyama
GCCE, 6, 7, 2024年
研究論文(国際会議プロシーディングス) - Multi-Modal Gaussian Process Latent Variable Model With Semi-Supervised Label Dequantization
Keisuke Maeda; Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
IEEE Access, 2024年
研究論文(学術雑誌) - 地下鉄トンネル点検における技術者のモーションデータを用いた熟練度分類 -説明可能なGraph Convolutional Networkの導入-
清野 竜生; 斉藤 直輝; 前田 圭介; 小川 貴弘; 長谷山 美紀
AI・データサイエンス論文集, 5, 1, 101, 109, 公益社団法人 土木学会, 2024年
日本語, インフラ設備の正確かつ効率的な維持管理業務を遂行するためには,熟練技術者が有する優れた点検技術(熟練技術)を若手技術者へ継承する必要がある.多くの時間と労力を要する熟練技術の継承を支援するためには,点検に重要な動作を明確にする必要がある.しかしながら,従来の研究では,視線・動作などの生体情報を用いた熟練度分類と点検技術の熟練度と生体情報間の関連性分析に留まっている.そこで本論文では,若手技術者への技術継承支援に向け,熟練度分類および分類に重要な要素を可視化する手法を提案する.提案手法では,点検中の技術者から得られたモーションデータを用いて,熟練度分類の確信度を考慮することで重要な要素を強調するAttention機構を導入したグラフ畳み込みネットワークにより,説明可能な熟練度分類を実現する. - Visual Emotion Recognition Through Multimodal Cyclic-Label Dequantized Gaussian Process Latent Variable Model.
Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Satoshi Asamizu; Miki Haseyama
Journal of Robotics and Mechatronics, 35, 5, 1321, 1330, 2023年10月
研究論文(学術雑誌) - Skill Level Classification Using Motion Data via Spatial Temporal Graph Convolutional Network,” IEEE Global Conference on Consumer Electronics
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
IEEE Global Conference on Consumer Electronics, 245, 246, 2023年10月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Proficiency-level Estimation Using Heterogeneous Features via Label Dequantized CCA
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
IEEE International Conference on Consumer Electronics-Taiwan, 813, 814, 2023年07月, [査読有り]
研究論文(国際会議プロシーディングス) - 画像の感情推定のためのラベル逆量子化を導入した正準相関分析
斉藤直輝; 前田圭介; 小川貴弘; 浅水仁; 長谷山美紀
電子情報通信学会論文誌(D), J106-D, 05, 337, 348, The Institute of Electronics, Information and Communication Engineers, 2023年05月, [査読有り], [筆頭著者]
日本語, 研究論文(学術雑誌), 本論文では,画像の感情推定のためのラベル逆量子化を導入した正準相関分析であるSupervised Multi-view Canonical Correlation Analysis via Cyclic Label Dequantization (sMVCCA-CLD)を提案する.ラベルから算出される特徴量(ラベル特徴量)の次元数は他の特徴量と比較して小さいため,従来のCCAでは,構築する空間の次元数の低下により特徴量間の相関関係の表現が困難となる問題点が存在する.そこで,sMVCCA-CLDでは,ラベル特徴量の次元数をラベル逆量子化により増加させながら,特徴量間の相関を最大化することで,次元数の制約を受けない共通潜在空間の構築を可能とする.更に,感情が円環状に配置されることを考慮してラベル逆量子化を行うことで,感情推定に適した共通潜在空間の構築を可能とする.以上で構築された空間に射影された新たな特徴量を利用することで,高精度な感情推定が可能となる. - Multi-modal label dequantized gaussian process latent variable model for ordinal label estimation
Masanao Matsumoto; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
ICASSP, IEEE International Conference on Acoustics, Speech and Signal Processing - Proceedings, 2021-June, 3985, 3989, 2021年, [査読有り]
研究論文(国際会議プロシーディングス) - Rubber Material Property Prediction Using Electron Microscope Images of Internal Structures Taken under Multiple Conditions.
Ren Togo; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
Sensors, 21, 6, 2088, 2088, 2021年, [査読有り]
研究論文(学術雑誌) - Supervised Fractional-Order Embedding Multiview Canonical Correlation Analysis via Ordinal Label Dequantization for Image Interest Estimation
Masanao Matsumoto; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
IEEE Access, 9, 21810, 21822, Institute of Electrical and Electronics Engineers (IEEE), 2021年, [査読有り]
英語, 研究論文(学術雑誌) - Interest Estimation for Images Using Eye Gaze-based Visual and Text Features via DLPCCA
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2020 IEEE 2nd Global Conference on Life Sciences and Technologies (LifeTech), 3, 4, IEEE, 2020年03月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Interest Level Estimation to Video Using Facial Expression-aware Visual Features
K. Yamamoto; D. Nishikawa; N. Saito; R. Harakawa; M. Iwahashi; S. Asamizu
5th STI-Gigaku, 2020年
英語, 研究論文(国際会議プロシーディングス) - Interest Estimation for Images Based on Eye Gaze-based Visual and Text Features
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE 8th Global Conference on Consumer Electronics (GCCE), 481, 482, IEEE, 2019年10月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Convolutional Sparse Coding-based Anomalous Event Detection in Surveillance Videos
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE International Conference on Consumer Electronics - Taiwan (ICCE-TW), IEEE, 2019年05月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Chronic gastritis detection from gastric X-ray images via deep autoencoding Gaussian mixture models
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE 1st Global Conference on Life Sciences and Technologies, LifeTech 2019, 231, 232, 2019年03月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Estimation of emotions evoked by images based on multiple gaze-based CNN features
Taiga Matsui; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2019 IEEE 1st Global Conference on Life Sciences and Technologies, LifeTech 2019, 194, 195, 2019年03月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Estimating Regions of Deterioration in Electron Microscope Images of Rubber Materials via a Transfer Learning-Based Anomaly Detection Model.
Ren Togo; Naoki Saito 0006; Takahiro Ogawa; Miki Haseyama
IEEE Access, 7, 162395, 162404, 2019年, [査読有り]
研究論文(学術雑誌) - Gaze-based Visual Feature Extraction via DLPCCA for Visual Sentiment Estimation
T. Matsui; N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of the 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia, 11049, 2019年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Classification of Tourism Categories Based on Heterogeneous Features Considering Existence of Reliable Results
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of the 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia, 11049, 2019年, [査読有り], [筆頭著者]
英語, 研究論文(国際会議プロシーディングス) - The Friction Properties of Firebrat Scales
Y. Hirai; N. Okuda; N. Saito; T. Ogawa; R. Machida; S. Nomura; M. Ôhara; M. Haseyama; M. Shimomura
Biomimetics, 4, 1, 2019年01月, [査読有り]
英語, 研究論文(学術雑誌) - Tourism Category Classification on Image Sharing Services Through Estimation of Existence of Reliable Results
斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀
ACM International Conference on Multimedia Retrieval, 493, 496, ACM, 2018年06月, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Tourism Category Classification Based on Novel Decision-making Process from Multiple Results
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
in Proceedings of The 2nd GI-CoRE GSQ, GSB & IGM Joint Symposium, 2018年, [筆頭著者]
英語, 研究論文(国際会議プロシーディングス) - Missing Image Data Estimation via Iterative Convolutional Sparse Coding
M. Matsumoto; N. Saito; T. Ogawa; M. Haseyama
Proceedings of 2018 IEEE 7th Global Conference on Consumer Electronics (GCCE), 169, 170, IEEE, 2018年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Identification of Reliable Results for Rubber Material Property Estimation Using Scanning Electron Microscope Images and Mix Proportions
斉藤 直輝
Proceedings of the 32nd International Technical Conference on Circuits/Systems, Computers and Communications (ITC-CSCC), 265, 266, 2017年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - 画像共有サービスに投稿される画像の観光名所に関するカテゴリー分類
斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀
電子情報通信学会論文誌 D, 99, 9, 848, 860, IEICE, the Institute of Electronics, Information and Communication Engineers, 2016年09月01日, [査読有り]
日本語, 研究論文(学術雑誌), 本論文では,画像共有サービスに投稿される画像の観光名所に関するカテゴリー(観光カテゴリー)の分類手法を提案する.提案手法では,画像共有サービスにおいて画像とともに投稿される様々なデータの中で,位置座標が観光カテゴリーの分類に最も効果的であることに注目する.更に,このデータに基づいた分類において誤りが発生する場合を,分類結果から導出される確信度に基づいて判定する.誤分類と判定された場合,提案手法では,画像及びタグの特徴に基づいた分類結果を求め,それらを各々の分類精度に注目して統合することで,最終的な分類結果を高精度に推定可能とする.このとき,位置座標による分類結果に基づいて分類候補の観光カテゴリーを限定することで,多クラス分類問題におけるクラス数を減少させ,より正確な分類を可能とする.以上の提案手法によって,異なる種類のデータの分類精度が互いに大きく異なる場合に従来手法では困難であった高精度な最終分類結果の取得が可能となる. - A Confidence-aware Method for User Activity Genre Classification Based on Heterogeneous Features from Image Sharing Services
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of International Workshop on Advanced Image Technology 2016 (IWAIT), 2016年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - A Touism Category Classification Method Based on Estimation of Reliable Decision
Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2016 IEEE 5TH GLOBAL CONFERENCE ON CONSUMER ELECTRONICS, 52, 53, 2016年, [査読有り]
英語, 研究論文(国際会議プロシーディングス) - Estimation of Salient Region Based on Support Vector Machine for Scanning Electron Microphotographs
N. Saito; T. Ogawa; Y. Hirai; M. Haseyama
in Proceedings of Engineering Neo-Biomimetics VI and Satellite Workshop at Lake Biwa, 50, 2015年, [筆頭著者]
英語, 研究論文(国際会議プロシーディングス)
- Towards Realistic Formulation of Detection-aware Scene Graph Anticipation
T. Seino; N. Saito; T. Ogawa; S. Asamizu; M. Haseyama, 第29回 画像の認識・理解シンポジウム (MIRU), 2026年 - Attention- and Interference-Guided Adaptive VLM-LLM Merging for Improved Perception-Reasoning Trade-offs
T. Mitsui; R. Togo; N. Saito; T. Ogawa; M. Haseyama, 第29回 画像の認識・理解シンポジウム (MIRU), 2026年 - 相互作用強度の制御に基づく分散型 LLM マルチエージェントシステムの集団挙動解析に関する検討
佐藤太陽; 前田圭介; 斉藤直輝; 小川貴弘; 長谷山美紀, 人工知能学会全国大会, 2026年 - 語彙表現を用いたComposed Image Retrievalの解釈性向上に関する検討
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 第18回データ工学と情報マネジメントに関するフォーラム (DEIM), 2026年 - [特別講演]高速道路の日常点検効率化に向けたセマンティックセグメンテーションモデルと大規模視覚言語モデルに基づく異常検出技術
太齊蓮; 李想; 五箇亮太; 斉藤直輝; 前田圭介; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告, 50, 5, 339, 343, 2026年 - [特別講演]高速道路の日常点検効率化に向けたハイスピードカメラ画像からのひび割れ検出技術の構築
蘭子文; 前田圭介; 斉藤直輝; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告, 50, 5, 344, 347, 2026年 - 大規模言語モデルを用いた対話文における話者の性格推定に関する検討 -自己修正機構によるプロンプト最適化の導入-
高橋諒; 斉藤直輝; 前田圭介; 吉岡隆宏; 紺野剛史; 小川貴弘; 長谷山美紀, HCGシンポジウム, 2025年 - データベース適応型マルチエージェントシステムによる反復的なパーソナライズ画像生成に関する検討
佐藤太陽; 前田圭介; 斉藤直輝; 小川貴弘; 長谷山美紀, 令和7年度 電気・情報関係学会北海道支部連合大会, 174, 175, 2025年 - 推論強化と視覚保持の両立のための VLM と LLM のモデルマージ手法に関する検討
三ツ井智哉; 藤後廉; 斉藤直輝; 小川貴弘; 長谷山美紀, 令和7年度電気・情報関係学会北海道支部連合大会, 172, 173, 2025年 - Leveraging counterfactuals for automatic composed image retrieval dataset generation with in-context learning
K. Uesugi; N. Saito; K. Maeda; T. Ogawa; M. Haseyama, 第28回 画像の認識・理解シンポジウム (MIRU), 2025年 - 学習データ生成によるComposed Image Retrievalの高精度化に関する検討-テキスト整形処理を用いた反実仮想画像生成モデルの導入-
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 人工知能学会全国大会論文集(Web), 39th, 2025年 - 共同研究者の選定支援に向けた深層距離学習による類似研究プロジェクトの検索に関する検討
斉藤直輝; 水谷祐輔; 小川貴弘; 長谷山美紀; 長谷山美紀, 人工知能学会全国大会論文集(Web), 39th, 2025年 - テキストプロンプト最適化を導入したマルチモーダルLLMによる画像の感情分類の高精度化に関する検討
高橋諒; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025年 - 高速道路の日常点検効率化に向けたセマンティックセグメンテーションおよび深度推定による枯損木検出技術
斉藤直輝; 山本一輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025年 - 高速道路における橋梁点検効率化のための大規模視覚言語モデルを用いた技術者所見生成技術
清野竜生; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025年 - 半導体製造装置のセンサデータを用いた深層距離学習による類似事例検索に関する検討
斉藤直輝; 藤後廉; 前田圭介; 小林累輝; 中村隆央; 岡谷基弘; 数井誠人; 松沢貴仁; 小川貴弘; 長谷山美紀, 人工知能学会全国大会論文集(Web), 38th, 2024年 - モーションデータを用いたSpatial Temporal Attention Graph Convolutional Networkによる熟練度分類の高精度化に関する検討
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 映像情報メディア学会技術報告(Web), 48, 6(MMS2024 1-30/ME2024 17-46/AIT2024 1-30), 2024年 - 個人の感情誘起の類似性を考慮したMultimodal LLMによる画像の感情分類に関する検討
高橋諒; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2024, 2024年 - 反実仮想画像生成モデルを用いた構成画像検索におけるデータ拡張に関する検討
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2024, 2024年 - モーションおよび視線データを用いたSpatial Temporal Attention GCNによる熟練度分類に関する検討
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 人工知能学会全国大会論文集(Web), 38th, 2024年 - ECサイトのアパレル商品に対する購買意欲の度合いの推定に関する検討
宮内拓実; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 56, 2023年03月 - Spatial Temporal Attention Graph Convolutional Networkによるモーションデータを用いた熟練度の分類に関する検討
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2023, 2023年 - 画像の感情推定のためのラベル逆量子化を導入した正準相関分析
斉藤直輝; 前田圭介; 小川貴弘; 浅水仁; 長谷山美紀, 電子情報通信学会論文誌 D(Web), J106-D, 5, 2023年 - 視線情報を用いた正準相関分析によるプログラミングの理解度推定に関する研究
清野竜生; 斉藤直輝; 浅水仁, 令和4年東北・北海道地区高等専門学校専攻科産学連携シンポジウム, 2022年 - IoT デバイスを用いた野生動物の目撃情報共有サービスの検討
本田瑛暉; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 55, 69, 74, 2022年
速報,短報,研究ノート等(大学,研究機関紀要) - 正準相関分析を利用した共通潜在空間の構築に基づくプログラミングの理解度推定に関する検討
清野竜生; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 55, 65, 68, 2022年
速報,短報,研究ノート等(大学,研究機関紀要) - 視線情報を用いたプログラミングの理解度推定に関する初期検討
清野竜生; 斉藤直輝; 浅水仁, 令和3年度電気・情報関係学会北海道支部連合大会講演論文集, 103, 104, 2021年 - IoTデバイスを用いたエゾシカの目撃情報共有プラットフォームの検討
本田瑛暉; 斉藤直輝; 浅水仁, 令和3年東北・北海道地区高等専門学校専攻科産学連携シンポジウム, 2021年
会議報告等 - 映像視聴時の顔器官の動き情報を用いた関心の度合いの推定に関する検討
斉藤直輝; 山本浩太郎; 西川大地; 原川良介; 岩橋政宏; 浅水仁, 釧路工業高等専門学校紀要, 54, 65, 70, 2021年
速報,短報,研究ノート等(大学,研究機関紀要) - 画像注視時の視線データを用いた関心度の推定に関する検討 : ラベルの逆量子化を導入したsMVCCAによる推定精度の高精度化—A Note on Eye Gaze Based User-specific Interest Estimation for Images : Estimation Performance Improvement Based on sMVCCA including Ordinal Label Dequantization—ITS : Intelligent Transport Systems Technology
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 電子情報通信学会技術研究報告 = IEICE technical report : 信学技報, 119, 421, 73, 77, 2020年02月
電子情報通信学会, 日本語 - 画像注視時の視線データを用いた関心度の推定に関する検討 : ラベルの逆量子化を導入したsMVCCAによる推定精度の高精度化—A Note on Eye Gaze Based User-specific Interest Estimation for Images : Estimation Performance Improvement Based on sMVCCA including Ordinal Label Dequantization—マルチメディアストレージ ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 44, 6, 73, 77, 2020年02月
映像情報メディア学会, 日本語 - Supervised Multiview Canonical Correlation Analysis via Ordinal Label Dequantization for Image Interest Estimation
M. Matsumoto; N. Saito; T. Ogawa; M. Haseyama, 第23回 画像の認識・理解シンポジウム (MIRU2020), 9, 21810, 21822, 2020年 - 画像注視時の視線データを用いた関心度の推定に関する検討-ラベルの逆量子化を導入したsMVCCAによる推定精度の高精度化-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電子情報通信学会技術研究報告, 119, 421(ITS2019 30-56), 2020年
機関テクニカルレポート,技術報告書,プレプリント等 - 画像注視時の視線データを用いた関心の識別に関する検討 : 推定結果の統合による高精度化 (イメージ・メディア・クオリティ)
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 電子情報通信学会技術研究報告 = IEICE technical report : 信学技報, 119, 131, 17, 20, 2019年07月19日
電子情報通信学会, 日本語 - 視線データを用いた画像注視時に誘起される感情の推定に関する検討 : KDLPCCAに基づく特徴変換の導入による高精度化 (マルチメディアストレージ ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス)
松井 太我; 斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 43, 5, 323, 327, 2019年02月
映像情報メディア学会, 日本語 - 電子顕微鏡画像および配合量を用いたゴム材料の特性曲線の推定に関する検討 (マルチメディアストレージ ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス)
斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 43, 5, 261, 264, 2019年02月
映像情報メディア学会, 日本語 - 画像注視時の視線データを用いた関心の識別に関する検討-MvLFDAに基づく特徴量統合による高精度化-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 第22回画像の認識・理解シンポジウム (MIRU2019), 2019年 - 画像共有サービスに投稿される観光画像のカテゴリ分類に関する検討-分類結果の信頼性判定による高精度化-
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 第22回画像の認識・理解シンポジウム (MIRU2019), 2019年 - 画像注視時の視線データを用いた関心の識別に関する検討-LDCCAに基づく特徴量の射影による高精度化-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2019, 2019年 - 深層学習を用いた画像共有サービスに投稿される観光画像のカテゴリ分類の高精度化に関する検討 (マルチメディアストレージ ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス)
斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 42, 4, 161, 165, 2018年02月
映像情報メディア学会, 日本語 - 視線データを用いた画像注視時の感情推定に関する検討-正準相関分析に基づく画像特徴変換手法の導入-
松井太我; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2018, 2018年 - 反復型のMulti-channel Convolutional Sparse Codingを用いた欠損した画素値の推定に関する検討
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2018, 2018年 - 複数の条件で撮像された走査型電子顕微鏡画像を用いたゴム材料の物性値推定に関する検討 (メディア工学) -- (サマーセミナー2017 : 世界に羽ばたくビジョン技術)
斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 41, 29, 31, 34, 2017年09月
映像情報メディア学会, 日本語 - 電子顕微鏡画像および配合量を用いたゴム材料の物性値推定に関する検討 (マルチメディアストレージ コンシューマエレクトロニクス ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス)
斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 41, 5, 41, 45, 2017年02月
映像情報メディア学会, 日本語 - 生物の走査型電子顕微鏡像の撮像部位の分類における特徴選択方法に関する検討
斉藤直輝; 小川貴弘; 平井悠司; 長谷山美紀, 映像情報メディア学会技術報告, 40, 28(ME2016 88-115), 19‐20, 2016年08月24日
日本語 - 生物の走査型電子顕微鏡像の撮像部位の分類に関する検討 : カーネル法の導入による複数の分類結果統合の高精度化 (マルチメディアストレージ コンシューマエレクトロニクス ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス)
斉藤 直輝; 小川 貴弘; 平井 悠司; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 40, 6, 51, 54, 2016年02月
映像情報メディア学会, 日本語 - 複数の特徴を用いた観光画像の分類における正確な分類結果の推定方法の導入に関する検討
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 第19回画像の認識・理解シンポジウム (MIRU2016), 2016年 - マダラシミ鱗粉の摩擦特性
平井悠司; 奥田直人; 斉藤直輝; 小川貴弘; 町田龍一郎; 野村周平; 大原昌宏; 長谷山美紀; 下村政嗣, 第65回高分子討論会, 65, 2, 2016年 - 昆虫の体表面摩擦力測定
平井悠司; 奥田直人; 斉藤直輝; 小川貴弘; 町田龍一郎; 野村周平; 大原昌宏; 長谷山美紀; 下村政嗣, 第67回コロイドおよび界面化学討論会, 2016年 - 画像共有サービスにおける投稿画像の分類結果の信頼度推定に関する検討
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2015, ROMBUNNO.128, 2015年11月07日
日本語 - 画像共有サイトの投稿画像の高精度な分類に関する検討
斉藤 直輝; 小川 貴弘; 浅水 仁, 映像情報メディア学会技術報告 = ITE technical report, 39, 7, 71, 75, 2015年02月
映像情報メディア学会, 日本語 - 生物の走査型電子顕微鏡像の撮像部位の分類に関する検討 -分類精度を考慮した複数の分類結果の統合手法の導入-
斉藤直輝; 小川貴弘; 長谷山美紀, 第18回画像の認識・理解シンポジウム (MIRU2015), 2015年 - 画像共有サイトへの投稿画像およびそのメタデータに注目したマルチモーダル画像検索手法に関する検討
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2014, ROMBUNNO.141, 2014年10月25日
日本語 - スマートフォンを用いた睡眠時体動検出手法に関する考察
斉藤直輝; 浅水仁, 第15回DSPS教育者会議予稿集, 2013年 - スマートフォンを用いた睡眠時体動測定に関する検討
斉藤直輝; 浅水仁, 第14回DSPS教育者会議予稿集, 2012年
■ 共同研究・競争的資金等の研究課題
- 生成AIとの融合により潜在的嗜好を把握可能とするユーザ中心推薦技術の構築
科学研究費助成事業
2024年04月01日 - 2028年03月31日
長谷山 美紀; 斉藤 直輝; 小川 貴弘; 藤後 廉
日本学術振興会, 基盤研究(B), 北海道大学, 24K02942 - 細胞状態遷移における細胞質突起ダイナミクス評価:SICM解析への更なる機械学習の適用
科学研究費助成事業
2024年04月 - 2027年03月
水谷 祐輔; 三上 剛和; 斉藤直輝
本研究は、走査型イオンコンダクタンス顕微鏡(SICM)を用い、生きた細胞の頂上膜面の細胞質突起ダイナミクスを解析し、そのダイナミクスと細胞機能の関係性、重要性を解明することを目的としている。このダイナミクスの解析には、本研究を通して機械学習および生成AIを用いた細胞状態判別評価支援システムを構築し、画像判別、そして細胞状態の評価を自動化することを目指すものである。
本年度は、以下に示す課題に取り組んだ。
1. 画像データセットの収集と学習用データを用いたシステムの構築: 以前の課題で試作した構造判別評価システムを利用し,改良することを開始した。適宜、作業環境整備を進めている。実験モデルとしてマクロファージを利用するため、マクロファージの分化誘導前,分化誘導後の画像の中から選別し答えの付与を行った。なお、さらに新たな画像取得も行うことでデータセットの拡充を計画していたが、SICM装置の不具合に依り計画通りの画像取得ができておらず、今年度の実施は見送った。
2. 細胞質突起構造変化の遷移状態における構造ダイナミクスの時間的空間的測定: 細胞質突起構造の遷移状態をコントロールすることが可能な実験モデルとしてRAW264細胞を利用し、進めた。球形のRAW264細胞をLPS(Lipopolysaccharide)や二本鎖 RNA のPoly(I:C)で刺激し、数時間から24時間程度で発達した細胞突起を有するマクロファージ様細胞に分化誘導することが分かり、LPSやPoly(I:C)の濃度や可逆性の確認および検討を行った。LPSやPoly(I:C)といった分化誘導因子による効果測定については、マクロファージマーカーである炎症性サイトカインの発現、NO生産で計測し、一定の濃度の範囲で濃度に依存した効果の上昇が見られるが、上限があることが分かった。
日本学術振興会, 基盤研究(C), 北海道大学, 研究分担者, 24K09977
