基于多模态数据融合分析的消费行为研究

客户介绍：

        浙江大学心理与行为科学系是我国高等院校中最早设立的心理学系之一，历史可追溯至 20 世纪 20 年代末的原国立浙江大学心理学系，其前身为陈立教授 1980 年创立的杭州大学心理学系。

        该系以应用心理学，尤其是工业心理学为特色，在国内心理学领域占据重要地位。它拥有应用心理学国家重点学科，以及我国心理学领域首个国家级实验室 —— 浙江大学工业心理学国家专业实验室。作为国务院学位委员会最早批准的硕士、博士学位授予权单位，心理学领域最早的国家理科基础科学研究与教学人才培养基地之一，还设有心理学一级学科博士点和博士后流动站。

        在科研方面，承担各类科研项目 280 余项，涵盖国家级、省部级项目及国际合作项目。在国际国内著名学术杂志发表论文 320 余篇，其中 140 余篇被 SCI、SSCI、EI 收录，出版教材和专著 10 余部，研究成果获国家及省部级奖近 20 项，还有 6 项国家授权专利。

 

研究方向：

        1、研究目的

        本研究旨在利用多模态人因感知终端，精准捕捉消费者在不同情境下的生理与行为变化，分析这些数据与消费者情绪状态之间的关联，从而揭示消费者情绪变化的内在机制。通过多维度的数据采集与分析，包括脉搏、皮电、动作行为等，本研究将为消费者情绪研究提供更为客观、全面的视角。

        2、研究方法

        多模态数据采集：采用多模态人因感知终端、摄像头等设备，同步采集消费者的生理信号（如脉搏、皮肤电导、皮肤温度等）和行为数据（如动作行为、面部表情等）。这些设备能够实时记录消费者在不同刺激下的反应。

        情绪诱发与实验设计：通过图片、视频、音乐等多种方式诱发消费者的情绪变化，并在实验过程中设置不同的消费情境，以观察消费者在自然和模拟环境中的情绪反应。

        数据分析与模型构建：运用先进的数据分析技术，如机器学习和深度学习算法，对采集到的多模态数据进行特征提取和融合，建立消费者情绪状态的分类模型。通过对数据的深度挖掘，揭示情绪变化的生理和行为指标，以及这些指标与消费者行为之间的关系。

        3、研究意义

        本研究将为消费者情绪研究提供新的方法和技术支持，有助于更深入地理解消费者的心理和行为机制。通过精准的情绪分析，企业可以更好地把握消费者需求，优化产品设计和服务体验，提升消费者满意度和忠诚度。此外，本研究的成果还可应用于广告效果评估、市场调研、用户体验优化等多个领域，为商业决策提供科学依据。

 

交付内容：

        多模态手环与计算套件，包含科研云平台1套、多模态人因感知终端10台、经验采样APP10套，为数据采集与分析提供有力支持。

        1. 多模态人因感知终端是一款集脉搏、皮电、体温、加速度、角速度、磁力计、气温、气压、湿度9个传感器为一体的多模态数据采集便携式手环，能实现所有传感器的同步数据采集，时间戳对齐，同步事件标记等。

        2. 经验采样APP：采集多模态人因感知终端的同时，能进行预约、文本模态数据的采集，能进行问卷信息的收集。

        3. 科研云平台：能帮助用户存储和分析采集到的各种生理行为指标原始数据，并对各模态数据进行特征分析与建模。