　生体センシングは、目視では分からない微小な肌の明るさの変化から脈拍測定する。カメラが顔を認識すると、数秒で脈拍の検知が可能になる。トラッキング技術を用いて、顔が動いても計測を継続できる。また、太陽光の波長の影響を受けにくい近赤外線カメラを使うことで、車内の使用環境に対応する。競合他社や大学などが可視光カメラで脈拍を測定する技術を研究しているが、三菱電機では車載用を前提に可視光カメラではなく近赤外線カメラを使用している。

ドライバーモニタリング用カメラを使った脈拍測定の様子（クリックして拡大）

　会場では運転席を想定したデモンストレーションを実施したが、MaaS向けに乗員全員を検知することを目指している。開発技術は、医療用の脈拍センサーや肌に触れて測る接触型のセンサーと比べると誤差があるが、疲労や眠気、体調変化の検知に適用可能な精度で脈拍測定ができているという。ただ、化粧やヒゲが濃い場合は測定精度に影響が出る。今後は、体調変化や疲労を検出するアルゴリズムの開発と並行してさらなる精度向上に取り組む。

2人が同時に発言したことを分離して再生するデモを実施した（クリックして拡大）

　音声分離認識技術は、1台のドライバーモニタリング用カメラと4つのマイクで実現している。カメラで口の開き具合から発話しているかどうかを判断し、「運転席の人が喋っているときに運転席の方から聞こえる声がこれだ、というようにして発話を聞き分けている」（三菱電機の説明員）。

　マイクだけでも2人の音声をある程度分離することはできるが、カメラと組み合わせることで認識精度が向上する。マイクとカメラは安価なもので対応できる。現在は運転席と助手席の2人の会話が対象となっている。三菱電機では、なるべくカメラを増やさず、音声分離認識技術の対象を乗員全てに広げることを目指している。

三菱電機のMaaSキャビンは近赤外線カメラで脈拍測定、複数人の会話を聞き分け
三菱電機は2019年10月8日、「第46回東京モーターショー2019」（一般公開日：2019年10月24日～11月4日、東京ビッグサイト他）において、最新のセンシング技術とHMI（ヒューマンマシンインタフェース）技術を搭載したコンセプトキャビン「EMIRAI S」を出展すると発表した。
音声認識に視線や感情、眠気検知を組み合わせ、より柔軟なエージェントに
Nuance Communications（ニュアンス）は、消費者向けエレクトロニクス展示会「CES 2019」（2019年1月8～11日、米国ネバダ州ラスベガス）において、カメラによる視線検知と音声認識技術を組み合わせた開発中の新機能を披露した。開発技術は、POI（Point of Interest）検索やストリーミングサービス、リアルタイムな情報を得る場合にはクラウド連携が必要だが、それ以外については車載情報機器側で処理が終えられるという。
クルマの操作に関する音声認識は自前で、だからこそ「ハーイ、メルセデス」
メルセデス・ベンツ日本は2018年10月18日、東京都内で会見を開き、コンパクトカー「Aクラス」の新モデルを発表した。音声認識機能を充実させた新開発のインフォテインメントシステム「MBUX（メルセデスベンツユーザーエクスペリエンス）」を初めて採用したモデルとなる。
トヨタがSDL対応のディスプレイオーディオを標準装備に、ナビアプリはLINE
トヨタ自動車は2019年9月17日、東京都内で会見を開き、「カローラ」のセダンタイプとワゴンタイプを全面改良して、販売を開始したと発表した。セダンタイプは「カローラ」、ワゴンタイプは「カローラツーリング」に車名が変わる。
トヨタのカーナビからLINEを送れる、オープンソースのSDL対応カーナビを日本投入
トヨタ自動車とLINEは2018年10月15日、千葉市内で記者説明会を開き、LINEの各種サービスに対応したディーラー装着用車載情報機器（カーナビ）を同年12月から日本で発売すると発表した。ライン装着用では2019年夏以降、一部改良などの機会にさまざまな車種でSDL対応カーナビを設定する。
「あそこで曲がって」、乗員の指示に従って走る自動運転車
アイシン精機と名古屋大学、徳島大学は2018年10月25日、音声や視線、ジェスチャーで操作する自動運転車を開発したと発表した。