研究会懇親会のBBQを、丘陵公園で開催しました。4月から研究室に参加した学生たちの歓迎会やオープンハウスに参加して頂いた高専からの2名の学生さんたちとの懇親会も兼ねて実施されました。これからもよろしくお願いします。

8月1日に京都大学で開催された、電子情報通信学会「合意と共創」研究会で、以下の発表を行いました。

• リモートペアプログラミングのためのマルチモーダル情報に基づく対話分析支援環境の提案,
  ○菊池琉聖・羽山徹彩（長岡技科大）・大島心平（小山高専）
• 信学技報, vol. 124, no. 144, Consen2024-3, pp. 15-21, 2024年8月.

以下の「動画像データに基づく人間の行動認識」に関する研究成果がElsevior社のジャーナルSignal Processingに出版されました。

Hu Cui, Tessai Hayama, “Joint-Partition Group Attention for skeleton-based action recognition,” Signal Processing, Volume 224, 2024,

論文PDF:　https://doi.org/10.1016/j.sigpro.2024.109592

概要：スケルトンベースのアクション認識は、人間の関節の座標から行動を認識しますが、従来の方法では関節間の相関しか捉えられず、意味表現が不十分でした。本論文では、関節と身体部位の相関を包括的に捉えるために、Joint-Partition Group Attention（JPGA）を提案します。JPGAは関節と身体部位の異なる粒度サイズの相関を同時に捉えるメカニズムです。JPGAに基づいて構築したJoint-Partition Former（JPFormer）を用いた実験で、NTU-RGB+Dなどのデータセットにおいて最先端の結果を達成しました。

以下の「動画像データに基づく人間の行動認識」に関する研究成果がSpringer社のジャーナルMultimedia Systemsに出版されました。

Cui, H., Hayama, T. STSD: spatial–temporal semantic decomposition transformer for skeleton-based action recognition. Multimedia Systems 30, 43 (2024).

論文PDF:　https://rdcu.be/dw2iz

概要：本研究では、人間の行動を認識するためにスケルトンデータを用いた新しい方法を提案しています。従来の課題である人体の部位と動きの意味情報の活用を改善するため、空間的・時間的な関係を捉えるネットワークを開発しました。提案方法は、特に背景が複雑である場合や照明、カメラの角度が変わっても強い認識性能を示し、大規模なデータセットでのテストにおいても、最先端手法よりも良い精度を達成しました。

長谷川君（M2）が2023/12/4-8に開催のInternational Conference on Computers in Education (sub conf.: AIED , Artificial Intelligence in Education) @ Matsue で、以下の発表をしました。

• Takumi Hasegawa and Tessai Hayama. Developing a Video-based e-Learning System Incorporating a Fill-in-the- blank Question-type Concept Map.

「センサを用いた人間行動パターン認識」に関する研究と，「動画学習コンテンツの学習支援システム」に関する研究です。2024年4月に掲載されます。

• Mining User Activity Patterns from Time-Series Data Obtained from UWB Sensors in Indoor Environments
• Muhammad FAWAD RAHIM, Tessai HAYAMA
• Publication: IEICE TRANSACTIONS on Information and Systems

• Practical Application of an e-Learning Support System Incorporating a Fill-in-the-Blank Question-Type Concept Map
• Takumi HASEGAWA, Tessai HAYAMA
• Publication: IEICE TRANSACTIONS on Information and Systems

研究室BBQをしました。B3生の研究室配属、高専インターンシップ生、Nikolas君の送別会などを兼ねまして。雨予報でしたが、曇りながら、無事開催できました。

令和5年度電子情報通信学会甲信越支部大会（9/24, オンライン）で，学生が以下の発表をします

• コミュニティ構造がSNS上の画像情報拡散に与える影響の一考察
• 高野真社，羽山徹彩

以下の論文が国際会議KICSS2023に採択されました。

• Spatial-Temporal Unfold Transformer for Skeleton-based Human Action Recognition
  Hu Cui and Tessai Hayama

学生の研究，以下の2件がそれぞれ国際学会に採択されました。

• “Developing a Video-based e-Learning System Incorporating a Fill-in-the-blank Question-type Concept Map,” ICCE2023,
  Takumi Hasegawa and Tessai Hayama.
• “Extracting User Daily Routine Activity Patterns from UWB Sensor Data in Indoor Environment,” CollabTech2023,
  Rahim Muhammad Fawad and Tessai Hayama

研究内容としては，

• 思考を支援するためのe-Learningシステムと
• 屋内の人間の行動パターンを顕在化させるためのwearableシステム

になります。