SEARCH
Search Details
Saito Naoki
| Education and Research Center for Mathematical and Data Science Practical Education Program Division | Assistant Professor |
大規模言語モデル・AIエージェント・ロボット基盤モデル・情報検索・マルチモーダル情報処理に関する研究に従事．論文・特許・対話データなど多様な情報を対象として，対話からの性格特性推定，産学連携支援のための知識発見，ロボット知能の高度化など，人とAI・ロボットの知的協調を支援する情報解析技術の実社会応用について研究を実施している．
IEEE，電子情報通信学会，人工知能学会，日本ロボット学会 会員．博士(情報科学)．
Researcher basic information
■ Degree■ URL
researchmap URLホームページURL■ Various IDs
Researcher number
- 00798225
Research Keyword
- Biological signal processing
- Multimodal analysis
- Materials informatics
- Multimedia processing
- Signal processing
- Image processing
Career
■ CareerCareer
- Apr. 2026 - Present
Education and Research Center for Mathematical and Data Science, Hokkaido University - Apr. 2023 - Mar. 2026
Hokkaido University, Office of Institutional Research, Assistant Professor - Sep. 2022 - Mar. 2023
Hokkaido University, Office of Institutional Research, Assistant Professor - Oct. 2019 - Aug. 2022
National Institute of Technology, Kushiro College, Department of Creative Engineering, 助教 - Apr. 2019 - Sep. 2019
Hokkaido University, 大学院情報科学研究院, 博士研究員 - Apr. 2016 - Sep. 2018
Hokkai-Gakuen University, Faculty of Engineering, 非常勤講師
- Apr. 2016 - Mar. 2019, Hokkaido University, Graduate School of Information Science and Technology, Division of Media and Network Technologies
- Apr. 2014 - Mar. 2016, Hokkaido University, Graduate School of Information Science and Technology, Division of Media and Network Technologies
- Apr. 2012 - Mar. 2014, National Institute of Technology, Kushiro College, Advanced Engineering Course, Electronic Information System Engineering Course
- Apr. 2007 - Mar. 2012, National Institute of Technology, Kushiro College, Department of Electronic Engineering, 電子工学科
Research activity information
■ Awards- Jan. 2019, The 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia IWAIT Best Paper Award
Classification of Tourism Categories Based on Heterogeneous Features Considering Existence of Reliable Results
Naoki Saito;Takahiro Ogawa;Satoshi Asamizu;Miki Haseyama - Feb. 2018, IEEE Sapporo Section, 2017 IEEE Sapporo Section Paper Awards Encouragement Award
A Tourism Category Classification Method Based on Estimation of Reliable Decision
Naoki Saito;Takahiro Ogawa;Satoshi Asamizu;Miki Haseyama - Oct. 2016, IEEE Consumer Electronics Society, 1st Prize IEEE GCCE 2016 Excellent Poster Award
A Tourism Category Classification Method Based on Estimation of Reliable Decision
Naoki Saito;Takahiro Ogawa;Satoshi Asamizu;Miki Haseyama - Feb. 2015, IEEE Sapporo Section, The 2015 IEEE Sapporo Section Student Paper Contest Encouraging Prize
画像共有サービスにおける投稿画像の分類結果の信頼度推定に関する検討
Naoki Saito;Takahiro Ogawa;Satoshi Asamizu;Miki Haseyama - 2012, 平成24年度 釧路しんきん地域貢献助成制度 学生研究奨励賞
- DIAL: Database-Informed Interactive Multi-Agent System Loop for Personalized Image Generation
Taiyo Sato; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
ICASSP 2026 - 2026 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), 13262, 13266, IEEE, 03 May 2026, [Peer-reviewed]
International conference proceedings - LLM-in-the-Loop Descriptor Prompt Refinement for Dialogue-Based Big Five Personality Recognition
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Yoshioka; Takeshi Konno; Takahiro Ogawa; Miki Haseyama
2026 IEEE 2nd International Conference on Consumer Technology (ICCT-Pacific), 270, 273, IEEE, 28 Mar. 2026, [Peer-reviewed]
International conference proceedings - Unified Scene Graph Forecasting Considering Node Birth and Disappearance
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2026 IEEE 2nd International Conference on Consumer Technology (ICCT-Pacific), 345, 348, IEEE, 28 Mar. 2026, [Peer-reviewed]
International conference proceedings - Discrete Prompt Tuning via Recursive Utilization of Black-Box Multimodal Large Language Model for Personalized Visual Emotion Recognition
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
IEEE Access, 14, 57920, 57932, Institute of Electrical and Electronics Engineers (IEEE), 2026, [Peer-reviewed]
Scientific journal - Similar Image Generation via Human-like Iterative Prompt Refinement with Multimodal Large Language Model
Taiyo Sato; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2025 IEEE 14th Global Conference on Consumer Electronics (GCCE), 246, 247, IEEE, 23 Sep. 2025, [Peer-reviewed]
International conference proceedings - Enhancing Image Classifier Robustness via Prompt-Based Counterfactual Data-Augmentation with Intermediate Transitions
Tomoya Mitsui; Ren Togo; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2025 IEEE 14th Global Conference on Consumer Electronics (GCCE), 1267, 1268, IEEE, 23 Sep. 2025, [Peer-reviewed]
International conference proceedings - Personalized Visual Emotion Classification through Discrete Prompt Tuning of Large Multimodal Model
Ryo Takahashi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
2025 IEEE International Conference on Consumer Electronics - Taiwan (ICCE-Taiwan), 35, 36, IEEE, 16 Jul. 2025, [Peer-reviewed]
International conference proceedings - Expert Comment Generation Considering Sports Skill Level Using a Large Multimodal Model with Video and Spatial-Temporal Motion Features
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
Sensors, 14 Jan. 2025, [Peer-reviewed]
Scientific journal - Multimodal large language modelのin-context learningによる車載カメラ映像を用いた高速道路附属物および植生の異常検出
太齊蓮; 李想; 五箇亮太; 斉藤直輝; 前田圭介; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀
AI・データサイエンス論文集, 6, 3, 393, 405, 2025, [Peer-reviewed]
Japanese, Scientific journal - Expert Comment Generation from Sports Videos Using Multimodal LLM
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Huang-Chia Shih; Satoshi Asamizu; Miki Haseyama
INTERNATIONAL WORKSHOP ON ADVANCED IMAGING TECHNOLOGY, IWAIT 2025, 13510, 2025, [Peer-reviewed]
English, International conference proceedings - Triplet Synthesis for Enhancing Composed Image Retrieval via Counterfactual Image Generation.
Kenta Uesugi; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
ICASSP, 1, 5, 2025, [Peer-reviewed]
International conference proceedings - Graph Convolutional Network-based Sports Skill-level Recognition via Deep Metric Learning
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2024 International Technical Conference on Circuits/Systems, Computers, and Communications (ITC-CSCC), 15, 1, 4, IEEE, 02 Jul. 2024, [Peer-reviewed]
International conference proceedings - Expert–Novice Level Classification Using Graph Convolutional Network Introducing Confidence-Aware Node-Level Attention Mechanism
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
Sensors, 10 May 2024
Scientific journal - Confidence-Aware Spatial-Temporal Attention Graph Convolutional Network for Skeleton-Based Expert-Novice Level Classification
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
ICASSP 2024 - 2024 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), IEEE, 14 Apr. 2024
International conference proceedings - Personalized Visual Emotion Classification via In-context Learning in Multimodal LLM.
Ryo Takahashi; Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Miki Haseyama
GCCE, 1167, 1168, 2024
International conference proceedings - Zero-shot Composed Video Retrieval with Projection Module Bridging Modality Gap.
Kenta Uesugi; Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Miki Haseyama
GCCE, 6, 7, 2024
International conference proceedings - Multi-Modal Gaussian Process Latent Variable Model With Semi-Supervised Label Dequantization
Keisuke Maeda; Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
IEEE Access, 2024
Scientific journal - Expert-novice level classification using engineers’ motion data in subway tunnel inspections - Introduction of explainable graph convolutional network -
SEINO Tatsuki; SAITO Naoki; MAEDA Keisuke; OGAWA Takahiro; HASEYAMA Miki
Artificial Intelligence and Data Science, 5, 1, 101, 109, Japan Society of Civil Engineers, 2024
Japanese, Skill transfer to young engineers from senior engineers is a very important task in infrastructure equipment inspection. To support the skill transfer, an analysis method of the key factors of senior engineers skill is needed. However, conventional research has been limited to skill-level classification or analysis of the relationship between the skill level and biological data such as eye gaze and motion obtained from the engineers. This paper presents a method of classifying the skill level and visualization of its key factors to support the skill transfer. The proposed method employs a graph convolutional network introducing a novel attention mechanism for the classification and visualization. - Visual Emotion Recognition Through Multimodal Cyclic-Label Dequantized Gaussian Process Latent Variable Model.
Naoki Saito 0006; Keisuke Maeda; Takahiro Ogawa 0001; Satoshi Asamizu; Miki Haseyama
Journal of Robotics and Mechatronics, 35, 5, 1321, 1330, Oct. 2023
Scientific journal - Skill Level Classification Using Motion Data via Spatial Temporal Graph Convolutional Network,” IEEE Global Conference on Consumer Electronics
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
IEEE Global Conference on Consumer Electronics, 245, 246, Oct. 2023, [Peer-reviewed]
English, International conference proceedings - Proficiency-level Estimation Using Heterogeneous Features via Label Dequantized CCA
Tatsuki Seino; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
IEEE International Conference on Consumer Electronics-Taiwan, 813, 814, Jul. 2023, [Peer-reviewed]
International conference proceedings - Canonical Correlation Analysis Introducing Label Dequantization for Visual Emotion Recognition
SAITO Naoki; MAEDA Keisuke; OGAWA Takahiro; ASAMIZU Satoshi; HASEYAMA Miki
電子情報通信学会論文誌(D), J106-D, 05, 337, 348, The Institute of Electronics, Information and Communication Engineers, May 2023, [Peer-reviewed], [Lead author]
Japanese, Scientific journal, Supervised multi-view canonical correlation analysis via cyclic label dequantization (sMVCCA-CLD) for visual emotion recognition is presented in this paper. In the CCA approach, the dimension of latent common space is limited to the minimum dimension among those of all features. The dimension of label features i.e., the number of classes for label information, tends to be lower than those of the other features. Then the dimension of the latent common space constructed by CCA becomes lower. Therefore, there is a possibility of misssing important information that is necessary for the estimation from the latent common space due to the dimensionality constraint. To overcome this constraint, sMVCCA-CLD increases the dimension of the label features by the label dequantization process, and estimates the canonical correlation between multi-view features. In addition, sMVCCA-CLD performs the label dequantization considering that the emotions are represented by a cyclic model, e.g., Plutchik's and Mikel's wheels. Consequently, the construction of the latent common space for the accurate recognition of emotions becomes feasible. - Multi-modal label dequantized gaussian process latent variable model for ordinal label estimation
Masanao Matsumoto; Keisuke Maeda; Naoki Saito; Takahiro Ogawa; Miki Haseyama
ICASSP, IEEE International Conference on Acoustics, Speech and Signal Processing - Proceedings, 2021-June, 3985, 3989, 2021, [Peer-reviewed]
International conference proceedings - Rubber Material Property Prediction Using Electron Microscope Images of Internal Structures Taken under Multiple Conditions.
Ren Togo; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
Sensors, 21, 6, 2088, 2088, 2021, [Peer-reviewed]
Scientific journal - Supervised Fractional-Order Embedding Multiview Canonical Correlation Analysis via Ordinal Label Dequantization for Image Interest Estimation
Masanao Matsumoto; Naoki Saito; Keisuke Maeda; Takahiro Ogawa; Miki Haseyama
IEEE Access, 9, 21810, 21822, Institute of Electrical and Electronics Engineers (IEEE), 2021, [Peer-reviewed]
English, Scientific journal - Interest Estimation for Images Using Eye Gaze-based Visual and Text Features via DLPCCA
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2020 IEEE 2nd Global Conference on Life Sciences and Technologies (LifeTech), 3, 4, IEEE, Mar. 2020, [Peer-reviewed]
English, International conference proceedings - Interest Level Estimation to Video Using Facial Expression-aware Visual Features
K. Yamamoto; D. Nishikawa; N. Saito; R. Harakawa; M. Iwahashi; S. Asamizu
5th STI-Gigaku, 2020
English, International conference proceedings - Interest Estimation for Images Based on Eye Gaze-based Visual and Text Features
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE 8th Global Conference on Consumer Electronics (GCCE), 481, 482, IEEE, Oct. 2019, [Peer-reviewed]
English, International conference proceedings - Convolutional Sparse Coding-based Anomalous Event Detection in Surveillance Videos
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE International Conference on Consumer Electronics - Taiwan (ICCE-TW), IEEE, May 2019, [Peer-reviewed]
English, International conference proceedings - Chronic gastritis detection from gastric X-ray images via deep autoencoding Gaussian mixture models
Masanao Matsumoto; Naoki Saito; Takahiro Ogawa; Miki Haseyama
2019 IEEE 1st Global Conference on Life Sciences and Technologies, LifeTech 2019, 231, 232, Mar. 2019, [Peer-reviewed]
English, International conference proceedings - Estimation of emotions evoked by images based on multiple gaze-based CNN features
Taiga Matsui; Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2019 IEEE 1st Global Conference on Life Sciences and Technologies, LifeTech 2019, 194, 195, Mar. 2019, [Peer-reviewed]
English, International conference proceedings - Estimating Regions of Deterioration in Electron Microscope Images of Rubber Materials via a Transfer Learning-Based Anomaly Detection Model.
Ren Togo; Naoki Saito 0006; Takahiro Ogawa; Miki Haseyama
IEEE Access, 7, 162395, 162404, 2019, [Peer-reviewed]
Scientific journal - Gaze-based Visual Feature Extraction via DLPCCA for Visual Sentiment Estimation
T. Matsui; N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of the 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia, 11049, 2019, [Peer-reviewed]
English, International conference proceedings - Classification of Tourism Categories Based on Heterogeneous Features Considering Existence of Reliable Results
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of the 2019 joint International Workshop on Advanced Image Technology & International Forum on Medical Imaging in Asia, 11049, 2019, [Peer-reviewed], [Lead author]
English, International conference proceedings - The Friction Properties of Firebrat Scales
Y. Hirai; N. Okuda; N. Saito; T. Ogawa; R. Machida; S. Nomura; M. Ôhara; M. Haseyama; M. Shimomura
Biomimetics, 4, 1, Jan. 2019, [Peer-reviewed]
English, Scientific journal - Tourism Category Classification on Image Sharing Services Through Estimation of Existence of Reliable Results
Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
ACM International Conference on Multimedia Retrieval, 493, 496, ACM, Jun. 2018, [Peer-reviewed]
English, International conference proceedings - Tourism Category Classification Based on Novel Decision-making Process from Multiple Results
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
in Proceedings of The 2nd GI-CoRE GSQ, GSB & IGM Joint Symposium, 2018, [Lead author]
English, International conference proceedings - Missing Image Data Estimation via Iterative Convolutional Sparse Coding
M. Matsumoto; N. Saito; T. Ogawa; M. Haseyama
Proceedings of 2018 IEEE 7th Global Conference on Consumer Electronics (GCCE), 169, 170, IEEE, 2018, [Peer-reviewed]
English, International conference proceedings - Identification of Reliable Results for Rubber Material Property Estimation Using Scanning Electron Microscope Images and Mix Proportions
Naoki Saito
Proceedings of the 32nd International Technical Conference on Circuits/Systems, Computers and Communications (ITC-CSCC), 265, 266, 2017, [Peer-reviewed]
English, International conference proceedings - Category Classification of Tourism Images in Image Sharing Services
SAITO Naoki; OGAWA Takahiro; ASAMIZU Satoshi; HASEYAMA Miki
電子情報通信学会論文誌 D, 99, 9, 848, 860, IEICE, the Institute of Electronics, Information and Communication Engineers, 01 Sep. 2016, [Peer-reviewed]
Japanese, Scientific journal, 本論文では，画像共有サービスに投稿される画像の観光名所に関するカテゴリー（観光カテゴリー）の分類手法を提案する．提案手法では，画像共有サービスにおいて画像とともに投稿される様々なデータの中で，位置座標が観光カテゴリーの分類に最も効果的であることに注目する．更に，このデータに基づいた分類において誤りが発生する場合を，分類結果から導出される確信度に基づいて判定する．誤分類と判定された場合，提案手法では，画像及びタグの特徴に基づいた分類結果を求め，それらを各々の分類精度に注目して統合することで，最終的な分類結果を高精度に推定可能とする．このとき，位置座標による分類結果に基づいて分類候補の観光カテゴリーを限定することで，多クラス分類問題におけるクラス数を減少させ，より正確な分類を可能とする．以上の提案手法によって，異なる種類のデータの分類精度が互いに大きく異なる場合に従来手法では困難であった高精度な最終分類結果の取得が可能となる． - A Confidence-aware Method for User Activity Genre Classification Based on Heterogeneous Features from Image Sharing Services
N. Saito; T. Ogawa; S. Asamizu; M. Haseyama
Proceedings of International Workshop on Advanced Image Technology 2016 (IWAIT), 2016, [Peer-reviewed]
English, International conference proceedings - A Touism Category Classification Method Based on Estimation of Reliable Decision
Naoki Saito; Takahiro Ogawa; Satoshi Asamizu; Miki Haseyama
2016 IEEE 5TH GLOBAL CONFERENCE ON CONSUMER ELECTRONICS, 52, 53, 2016, [Peer-reviewed]
English, International conference proceedings - Estimation of Salient Region Based on Support Vector Machine for Scanning Electron Microphotographs
N. Saito; T. Ogawa; Y. Hirai; M. Haseyama
in Proceedings of Engineering Neo-Biomimetics VI and Satellite Workshop at Lake Biwa, 50, 2015, [Lead author]
English, International conference proceedings
- Towards Realistic Formulation of Detection-aware Scene Graph Anticipation
T. Seino; N. Saito; T. Ogawa; S. Asamizu; M. Haseyama, 第29回 画像の認識・理解シンポジウム (MIRU), 2026 - Attention- and Interference-Guided Adaptive VLM-LLM Merging for Improved Perception-Reasoning Trade-offs
T. Mitsui; R. Togo; N. Saito; T. Ogawa; M. Haseyama, 第29回 画像の認識・理解シンポジウム (MIRU), 2026 - 相互作用強度の制御に基づく分散型 LLM マルチエージェントシステムの集団挙動解析に関する検討
佐藤太陽; 前田圭介; 斉藤直輝; 小川貴弘; 長谷山美紀, 人工知能学会全国大会, 2026 - 語彙表現を用いたComposed Image Retrievalの解釈性向上に関する検討
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 第18回データ工学と情報マネジメントに関するフォーラム (DEIM), 2026 - ［特別講演］高速道路の日常点検効率化に向けたセマンティックセグメンテーションモデルと大規模視覚言語モデルに基づく異常検出技術
太齊蓮; 李想; 五箇亮太; 斉藤直輝; 前田圭介; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告, 50, 5, 339, 343, 2026 - ［特別講演］高速道路の日常点検効率化に向けたハイスピードカメラ画像からのひび割れ検出技術の構築
蘭子文; 前田圭介; 斉藤直輝; 鎌田文幸; 久保竜志; 川嵜裕二; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告, 50, 5, 344, 347, 2026 - 大規模言語モデルを用いた対話文における話者の性格推定に関する検討 －自己修正機構によるプロンプト最適化の導入－
高橋諒; 斉藤直輝; 前田圭介; 吉岡隆宏; 紺野剛史; 小川貴弘; 長谷山美紀, HCGシンポジウム, 2025 - データベース適応型マルチエージェントシステムによる反復的なパーソナライズ画像生成に関する検討
佐藤太陽; 前田圭介; 斉藤直輝; 小川貴弘; 長谷山美紀, 令和7年度 電気・情報関係学会北海道支部連合大会, 174, 175, 2025 - 推論強化と視覚保持の両立のための VLM と LLM のモデルマージ手法に関する検討
三ツ井智哉; 藤後廉; 斉藤直輝; 小川貴弘; 長谷山美紀, 令和7年度電気・情報関係学会北海道支部連合大会, 172, 173, 2025 - Leveraging counterfactuals for automatic composed image retrieval dataset generation with in-context learning
K. Uesugi; N. Saito; K. Maeda; T. Ogawa; M. Haseyama, 第28回 画像の認識・理解シンポジウム (MIRU), 2025 - A Note on Improving Accuracy in Composed Image Retrieval through Training Data Generation-Introduction of a Counterfactual Image Generation Model with Text Refinement-
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 人工知能学会全国大会論文集(Web), 39th, 2025 - A Note on Similar Research Project Retrieval via Deep Metric Learning to Support Selection of Co-researchers
斉藤直輝; 水谷祐輔; 小川貴弘; 長谷山美紀; 長谷山美紀, 人工知能学会全国大会論文集(Web), 39th, 2025 - A Note on Performance Improvement of Visual Emotion Classification via Multimodal LLM Introducing Text Prompt Optimization
高橋諒; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025 - Withered Tree Detection Technology by Semantic Segmentation and Depth Estimation for Efficient Daily Inspection on Highways
斉藤直輝; 山本一輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025 - Technology of Finding Generation Using Vision Language Model for Efficient Bridge Inspection on Highway
清野竜生; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 映像情報メディア学会技術報告(Web), 49, 4(MMS2025 1-40/ME2025 1-40/AIT2025 1-40/SIP2025 1-40), 2025 - A Note on Similar Case Retrieval via Deep Metric Learning Using Sensor Data Obtained from Semiconductor Manufacturing Equipment
斉藤直輝; 藤後廉; 前田圭介; 小林累輝; 中村隆央; 岡谷基弘; 数井誠人; 松沢貴仁; 小川貴弘; 長谷山美紀, 人工知能学会全国大会論文集(Web), 38th, 2024 - A Note on Performance Improvement of Expert-novice Classification by Spatial Temporal Attention Graph Convolutional Network Using Motion Data
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 映像情報メディア学会技術報告(Web), 48, 6(MMS2024 1-30/ME2024 17-46/AIT2024 1-30), 2024 - A note on emotion classification of images by multimodal LLM considering the similarity of individual emotion elicitation
高橋諒; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2024, 2024 - A Note on Data Augmentation in Composed Image Retrieval Using Counterfactual Image Generation Model
上杉健大; 斉藤直輝; 前田圭介; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2024, 2024 - A Note on Classification of Expert-novice Level Using Motion and Gaze Data via Spatial Temporal Attention GCN
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 人工知能学会全国大会論文集(Web), 38th, 2024 - ECサイトのアパレル商品に対する購買意欲の度合いの推定に関する検討
宮内拓実; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 56, Mar. 2023 - A Note on Classification of Proficiency-level Using Motion Data though Spatial Temporal Attention Graph Convolutional Network
清野竜生; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2023, 2023 - Canonical Correlation Analysis Introducing Label Dequantization for Visual Emotion Recognition
斉藤直輝; 前田圭介; 小川貴弘; 浅水仁; 長谷山美紀, 電子情報通信学会論文誌 D(Web), J106-D, 5, 2023 - 視線情報を用いた正準相関分析によるプログラミングの理解度推定に関する研究
清野竜生; 斉藤直輝; 浅水仁, 令和4年東北・北海道地区高等専門学校専攻科産学連携シンポジウム, 2022 - IoT デバイスを用いた野生動物の目撃情報共有サービスの検討
本田瑛暉; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 55, 69, 74, 2022
Report research institution - 正準相関分析を利用した共通潜在空間の構築に基づくプログラミングの理解度推定に関する検討
清野竜生; 斉藤直輝; 浅水仁, 釧路工業高等専門学校紀要, 55, 65, 68, 2022
Report research institution - 視線情報を用いたプログラミングの理解度推定に関する初期検討
清野竜生; 斉藤直輝; 浅水仁, 令和3年度電気・情報関係学会北海道支部連合大会講演論文集, 103, 104, 2021 - IoTデバイスを用いたエゾシカの目撃情報共有プラットフォームの検討
本田瑛暉; 斉藤直輝; 浅水仁, 令和3年東北・北海道地区高等専門学校専攻科産学連携シンポジウム, 2021
Meeting report - 映像視聴時の顔器官の動き情報を用いた関心の度合いの推定に関する検討
斉藤直輝; 山本浩太郎; 西川大地; 原川良介; 岩橋政宏; 浅水仁, 釧路工業高等専門学校紀要, 54, 65, 70, 2021
Report research institution - 画像注視時の視線データを用いた関心度の推定に関する検討 : ラベルの逆量子化を導入したsMVCCAによる推定精度の高精度化—A Note on Eye Gaze Based User-specific Interest Estimation for Images : Estimation Performance Improvement Based on sMVCCA including Ordinal Label Dequantization—ITS : Intelligent Transport Systems Technology
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 電子情報通信学会技術研究報告 = IEICE technical report : 信学技報, 119, 421, 73, 77, Feb. 2020
電子情報通信学会, Japanese - 画像注視時の視線データを用いた関心度の推定に関する検討 : ラベルの逆量子化を導入したsMVCCAによる推定精度の高精度化—A Note on Eye Gaze Based User-specific Interest Estimation for Images : Estimation Performance Improvement Based on sMVCCA including Ordinal Label Dequantization—マルチメディアストレージ ヒューマンインフォメーション メディア工学 映像表現&コンピュータグラフィックス
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 44, 6, 73, 77, Feb. 2020
映像情報メディア学会, Japanese - Supervised Multiview Canonical Correlation Analysis via Ordinal Label Dequantization for Image Interest Estimation
M. Matsumoto; N. Saito; T. Ogawa; M. Haseyama, 第23回 画像の認識・理解シンポジウム (MIRU2020), 9, 21810, 21822, 2020 - A Note on Eye Gaze Based User-specific Interest Estimation for Images-Estimation Performance Improvement Based on sMVCCA including Ordinal Label Dequantization-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電子情報通信学会技術研究報告, 119, 421(ITS2019 30-56), 2020
Technical report - A Note on Eye Gaze Based User-specific Interest Estimation for Images : Performance Improvement Based on Decision Level Fusion
松本 真直; 斉藤 直輝; 小川 貴弘; 長谷山 美紀, 電子情報通信学会技術研究報告 = IEICE technical report : 信学技報, 119, 131, 17, 20, 19 Jul. 2019
電子情報通信学会, Japanese - A Note on Eye Gaze-based Estimation of Emotion Evoked by Watching Images : Performance Improvement via Feature Transformation Based on KDLPCCA
松井 太我; 斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 43, 5, 323, 327, Feb. 2019
映像情報メディア学会, Japanese - A Note on Estimation of Characteristic Curve for Rubber Materials Using Electron Microscope Images and Mix Proportions
Naoki Saito; Takahiro Ogawa; Miki Haseyama, ITE Technical Report, 43, 5, 261, 264, Feb. 2019
映像情報メディア学会, Japanese - 画像注視時の視線データを用いた関心の識別に関する検討-MvLFDAに基づく特徴量統合による高精度化-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 第22回画像の認識・理解シンポジウム (MIRU2019), 2019 - 画像共有サービスに投稿される観光画像のカテゴリ分類に関する検討-分類結果の信頼性判定による高精度化-
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 第22回画像の認識・理解シンポジウム (MIRU2019), 2019 - 画像注視時の視線データを用いた関心の識別に関する検討-LDCCAに基づく特徴量の射影による高精度化-
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2019, 2019 - A Note on Accuracy Improvement of Category Classification for Tourism Images in Image Sharing Services Using Deep Learning
斉藤 直輝; 小川 貴弘; 浅水 仁; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 42, 4, 161, 165, Feb. 2018
映像情報メディア学会, Japanese - 視線データを用いた画像注視時の感情推定に関する検討-正準相関分析に基づく画像特徴変換手法の導入-
松井太我; 斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2018, 2018 - 反復型のMulti-channel Convolutional Sparse Codingを用いた欠損した画素値の推定に関する検討
松本真直; 斉藤直輝; 小川貴弘; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2018, 2018 - 複数の条件で撮像された走査型電子顕微鏡画像を用いたゴム材料の物性値推定に関する検討 (メディア工学) -- (サマーセミナー2017 : 世界に羽ばたくビジョン技術)
斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 41, 29, 31, 34, Sep. 2017
映像情報メディア学会, Japanese - A Note on Property Estimation Using Electron Microscope Images and Mix Proportions of Rubbers
斉藤 直輝; 小川 貴弘; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 41, 5, 41, 45, Feb. 2017
映像情報メディア学会, Japanese - 生物の走査型電子顕微鏡像の撮像部位の分類における特徴選択方法に関する検討
斉藤直輝; 小川貴弘; 平井悠司; 長谷山美紀, 映像情報メディア学会技術報告, 40, 28(ME2016 88-115), 19‐20, 24 Aug. 2016
Japanese - A Note on Photographed Part Classification from Scanning Electron Microphotographs of Biological Organisms : Classification Performance Improvement of Decision Level Fusion Based on Kernel Method
斉藤 直輝; 小川 貴弘; 平井 悠司; 長谷山 美紀, 映像情報メディア学会技術報告 = ITE technical report, 40, 6, 51, 54, Feb. 2016
映像情報メディア学会, Japanese - 複数の特徴を用いた観光画像の分類における正確な分類結果の推定方法の導入に関する検討
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 第19回画像の認識・理解シンポジウム (MIRU2016), 2016 - マダラシミ鱗粉の摩擦特性
平井悠司; 奥田直人; 斉藤直輝; 小川貴弘; 町田龍一郎; 野村周平; 大原昌宏; 長谷山美紀; 下村政嗣, 第65回高分子討論会, 65, 2, 2016 - 昆虫の体表面摩擦力測定
平井悠司; 奥田直人; 斉藤直輝; 小川貴弘; 町田龍一郎; 野村周平; 大原昌宏; 長谷山美紀; 下村政嗣, 第67回コロイドおよび界面化学討論会, 2016 - 画像共有サービスにおける投稿画像の分類結果の信頼度推定に関する検討
斉藤直輝; 小川貴弘; 浅水仁; 長谷山美紀, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2015, ROMBUNNO.128, 07 Nov. 2015
Japanese - A Note on Accurate Image Classification Method of Image Sharing Sites
斉藤 直輝; 小川 貴弘; 浅水 仁, 映像情報メディア学会技術報告 = ITE technical report, 39, 7, 71, 75, Feb. 2015
映像情報メディア学会, Japanese - 生物の走査型電子顕微鏡像の撮像部位の分類に関する検討 －分類精度を考慮した複数の分類結果の統合手法の導入－
斉藤直輝; 小川貴弘; 長谷山美紀, 第18回画像の認識・理解シンポジウム (MIRU2015), 2015 - 画像共有サイトへの投稿画像およびそのメタデータに注目したマルチモーダル画像検索手法に関する検討
SAITO NAOKI; OGAWA TAKAHIRO; ASAMIZU SATOSHI; HASEYAMA MIKI, 電気・情報関係学会北海道支部連合大会講演論文集(CD-ROM), 2014, ROMBUNNO.141, 25 Oct. 2014
Japanese - スマートフォンを用いた睡眠時体動検出手法に関する考察
斉藤直輝; 浅水仁, 第15回DSPS教育者会議予稿集, 2013 - Development of applications to tourism of Kushiro using augmented reality for smartpohone
斉藤直輝; 浅水仁, Research reports, Kushiro Technical College, 46, 31, 34, Dec. 2012
釧路工業高等専門学校, Japanese - スマートフォンを用いた睡眠時体動測定に関する検討
斉藤直輝; 浅水仁, 第14回DSPS教育者会議予稿集, 2012
- Apr. 2024 - Present
人工知能学会 - Apr. 2026
日本ロボット学会 - THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS
- IEEE
- Construction of a Composed Image Retrieval Framework Based on Causal Counterfactual Generation
Grants-in-Aid for Scientific Research
Apr. 2026 - Mar. 2029
斉藤 直輝
Japan Society for the Promotion of Science, Grant-in-Aid for Early-Career Scientists, Hokkaido University, 26K21225 - 生成AIとの融合により潜在的嗜好を把握可能とするユーザ中心推薦技術の構築
科学研究費助成事業
01 Apr. 2024 - 31 Mar. 2028
長谷山 美紀; 斉藤 直輝; 小川 貴弘; 藤後 廉
日本学術振興会, 基盤研究(B), 北海道大学, 24K02942 - Further application of machine learning to scanning ion conduction microscopy to analyze the dynamics of cell motility
Grants-in-Aid for Scientific Research
Apr. 2024 - Mar. 2027
水谷 祐輔; 三上 剛和; 斉藤直輝
本研究は、走査型イオンコンダクタンス顕微鏡（SICM）を用い、生きた細胞の頂上膜面の細胞質突起ダイナミクスを解析し、そのダイナミクスと細胞機能の関係性、重要性を解明することを目的としている。このダイナミクスの解析には、本研究を通して機械学習および生成AIを用いた細胞状態判別評価支援システムを構築し、画像判別、そして細胞状態の評価を自動化することを目指すものである。
本年度は、以下に示す課題に取り組んだ。
1. 画像データセットの収集と学習用データを用いたシステムの構築： 以前の課題で試作した構造判別評価システムを利用し，改良することを開始した。適宜、作業環境整備を進めている。実験モデルとしてマクロファージを利用するため、マクロファージの分化誘導前，分化誘導後の画像の中から選別し答えの付与を行った。なお、さらに新たな画像取得も行うことでデータセットの拡充を計画していたが、SICM装置の不具合に依り計画通りの画像取得ができておらず、今年度の実施は見送った。
2. 細胞質突起構造変化の遷移状態における構造ダイナミクスの時間的空間的測定： 細胞質突起構造の遷移状態をコントロールすることが可能な実験モデルとしてRAW264細胞を利用し、進めた。球形のRAW264細胞をLPS（Lipopolysaccharide）や二本鎖 RNA のPoly(I:C)で刺激し、数時間から24時間程度で発達した細胞突起を有するマクロファージ様細胞に分化誘導することが分かり、LPSやPoly(I:C)の濃度や可逆性の確認および検討を行った。LPSやPoly(I:C)といった分化誘導因子による効果測定については、マクロファージマーカーである炎症性サイトカインの発現、NO生産で計測し、一定の濃度の範囲で濃度に依存した効果の上昇が見られるが、上限があることが分かった。
Japan Society for the Promotion of Science, Grant-in-Aid for Scientific Research (C), Hokkaido University, Coinvestigator, 24K09977
