搜索结果: 1-15 共查到“计算机科学技术 多模态”相关记录36条 . 查询时间(0.221 秒)
一种融合视频多模态内容的人物可视化方法及装置（图）
视频多模态 人物可视化
2023/11/10
本发明涉及一种融合视频多模态内容的人物可视化方法及装置。该方法包括：抽取目标视频在各模态下的原始数据；依据各模态下抽取的原始数据的最小尺度，对齐各模态下的原始数据；基于对齐后的各模态下的原始数据，在设定尺度范围内依据不同模态特性提取模态特征数据；基于提取的模态特征数据，针对视频摘要的可视化形式进行人物可视化，并针对视频播放器的可视化形式进行人物可视化；基于视频播放器的可视化形式，进行视频播放及播放...
2023年5月18日上午，广东省重点领域研发计划新一代人工智能专项项目《多模态智能机器人视觉感知与人机交互关键技术研究及应用示范》（编号：2018B010108002）验收会在软件学院B7栋303室举行。广东省科学技术厅专家王欢与商惠敏，验收专家暨南大学张银炎教授等五人，华南理工大学科研院副处长韩双艳，软件学院副院长刘飞教授，项目负责人闵华清教授与吴庆耀教授，项目核心骨干人员朱金辉副教授以及各企业...
【CCIG2023】大会技术论坛多模态情感计算技术与应用成功举办（图）
多模态 情感计算 识别
2023/5/24
2023年5月11日，CCIG2023技术论坛“多模态情感计算技术与应用”在江苏省苏州市狮山国际会议中心太湖C厅成功举行。本次论坛由中国图象图形学学会（CSIG）主办，CSIG情感计算与理解专委会和CSIG机器视觉专委会承办、儿童发展与学习科学教育部重点实验室（东南大学）和南京工程学院计算机工程学院协办。论坛由东南大学郑文明教授和南京工程学院黄晓华教授担任共同主席。此次论坛邀请到了六位业内知名教授...
解码人类视觉神经表征是一项具有重要科学意义的挑战，可以揭示视觉处理机制并促进脑科学与人工智能的发展。然而，目前的神经解码方法难以泛化到训练数据以外的新类别，主要挑战在于现有方法未充分利用神经数据背后的多模态语义知识，且现有的可利用的配对（刺激-脑响应）训练数据很少。
考虑全局和局部帕累托前沿的多模态多目标优化算法
多模态多目标优化 局部收敛性 进化算法 种群多样性
2023/1/7
多模态多目标优化问题(Multimodal multi-objective optimization problems,MMOPs)是指具有多个全局或局部Pareto解集(Pareto solution sets,PSs)的多目标优化问题(Multi-objective optimization problems,MOPs).在这类问题中,Pareto前沿(Pareto front,PF)上相距很...
整合大规模多模态异质数据的统一计算框架（图）
整合大规模 多模态 异质数据 统一计算框架
2022/12/5
多模态数据的整合计算是数据科学和机器学习研究的热点问题。其中，整合单细胞多模态测序数据， 进行全面挖掘和解析，是单细胞数据分析的基础和核心环节之一。由于不同模态数据集间样本（细胞）缺少匹配信息，以及数据集间存在异质性，使得数据整合非常具有挑战性。
ACM国际多媒体会议（ACM Multimedia 2022）于2022年10月10日至14日在里斯本举办，会议上公布了多模态情感识别挑战赛 MuSe 2022（The Multimodal Sentiment in Real-life Media Challenge 2022）的结果。合肥工业大学计算机与信息学院的师生组队，首次参加该项赛事，斩获情绪反应检测赛道冠军，同时获得幽默检测赛道亚军。
2022年11月8日下午，广西民族大学人工智能学院邀请郑州大学电气与信息工程学院、军民融合研究院院长、博士生导师梁静教授作“多模态多目标优化方法研究”线上主题讲座。我院院长葛丽娜、副院长莫靖林，学院周永权教授、部分师生代表于博达楼418室、503室聆听。
【自然语言处理团队】国际最大规模多模态同步语言神经影像数据集发布（图）
自然语言处理 影像数据集 语言神经 多模态
2022/10/8
大脑在加工语言时，需要实时调动多个脑区的神经元进行协同工作。构建高时空分辨率的神经影像数据可以帮助我们更好地了解各个脑区以及脑区之间的协同合作，对于研究大脑的语言加工机制至关重要。当前已有的开源数据主要针对英文采集，只包括单一模态的神经影像数据，如高空间分辨率的功能核磁共振(fMRI)或高时间分辨率的脑磁图(MEG)，并且大多使用1小时以内的实验材料，数据规模有限，无法借助数据需求量大的计算模型进...
中央音乐学院音乐人工智能与音乐信息科技系建成全球首个带标注的多模态胡琴演奏数据库（图）
标注 多模态 胡琴演奏 数据库
2022/10/5
近期，中央音乐学院音乐人工智能与音乐信息科技系建成全球首个带标注的多模态胡琴演奏数据库(CCOM-HuQin)，该数据库由中央音乐学院民乐系表演专业的研究生参与录制，采用统一的高精度录制标准和科学可靠的标注体系，可广泛用于音高识别、音频转谱、乐谱跟随以及音视频分析、情感计算、表演生成等研究，填补了音乐科技领域中带标注的多模态中国民族乐器演奏数据库的空白，对弘扬中国民族音乐以及中西方音乐对比研究有重...
近日，南科大计算机系2019级本科生唐云龙以第一作者的身份在计算机视觉领域亚洲顶级会议Asian Conference on Computer Vision（ACCV2022）发表研究成果，题为Multi-modal Segment Assemblage Network for Ad Video Editing with Importance-Coherence Reward。本文由南方科技大学与...
“紫东太初”多模态大模型荣获世界人工智能大会SAIL大奖（图）
人工智能 SAIL 紫东太初
2022/9/1
2022年9月1日，2022世界人工智能大会在沪开幕。开幕式上，本届大会的最高奖项SAIL奖（Superior AI Leader，卓越人工智能引领者）正式发布，中国科学院自动化研究所和华为联合开发的全球首个三模态大模型“紫东太初”获奖。
日前，国家工业和信息化部公布了“2021年人工智能产业创新任务揭榜挂帅项目”立项名单，由自动化所牵头的“大规模多模态预训练模型的研发与行业应用”项目在1200余个申报项目中脱颖而出，获得优胜揭榜资格。
基于“紫东太初”三模态大模型和昇腾AI的多模态模型让手语学习更简单
紫东太初 手语学习 多模态模型
2022/6/18
近日，中国科学院自动化研究所等基于“紫东太初”三模态大模型、昇腾AI基础软硬件平台打造出手语多模态模型及手语教考一体机，方便听障人士理解和学习手语。