个人简介
招生专业
083500-软件工程
081203-计算机应用技术
招生方向
自然人机交互，实时智能计算
工作简历
2010-07~2010-08,英国Brunel University, School of Design, Visiting Professor
2009-10~2010-02,美国加州大学伯克利分校电子工程与计算机科学系, 高访学者
2002-04~现在, 中国科学院软件研究所, 研究员
1999-07~2002-04,中国科学院软件研究所, 副研究员
1991-06~1995-05,中国科学院图文计算机技术开发公司, 主任
教授课程
多通道人机交互
人机交互
实时智能系统
专利与奖励
奖励信息
（1） 笔式人机交互关键技术及应用, 二等奖, 国家级, 2018
（2） 笔式人机交互技术与应用, 一等奖, 省级, 2015
（3） 石化企业生产执行系统关键技术攻, 一等奖, 部委级, 2007
（4） 网络分布软件支撑平台及石化应用, 二等奖, 国家级, 2002
专利成果
（ 1 ） 自适应的历史数据压缩技术, 发明, 2005, 第 1 作者, 专利号: 02120383.0
（ 2 ） 一种动态三维光标显示方法, 发明, 2008, 第 1 作者, 专利号: 200710119807.7
（ 3 ） 一种面向移动设备的多通道中文输入法, 发明, 2010, 第 1 作者, 专利号: 200810115760.1
（ 4 ） 一种基于笔倾角信息的饼形菜单选择方法 , 发明, 2009, 第 3 作者, 专利号: 200810114639.7
（ 5 ） 一种生成多媒体概念图的方法 , 发明, 2009, 第 3 作者, 专利号: 200910089613.6
（ 6 ） 一种基于语音的多通道手写中文纠错方法, 发明, 2008, 第 5 作者, 专利号: 200810116585.8
（ 7 ） 智能物料配送的监控方法及系统, 发明, 2009, 第 1 作者, 专利号: 200610011949.7
（ 8 ） 服装生产加工企业的智能物料配送设备, 实用新型, 2006, 第 3 作者, 专利号: 200520073626.1
（ 9 ） 一种面向移动设备的多通道中文输入法, 发明, 2008, 第 1 作者, 专利号: 200810115760.1
（ 10 ） 一种基于业务实体的企业数据提取方法与系统, 发明, 2008, 第 3 作者, 专利号: 200810102402.7
（ 11 ） 一种基于物联网的公共实时数据管理云服务平台, 发明, 2014, 第 3 作者, 专利号: 2014101644538
（ 12 ） 一种实时多智能体系统的消息准入方法, 发明, 2014, 第 3 作者, 专利号: 201410138679.0
（ 13 ） 一种三维声呐点云环境中的移动物体检测与跟踪方法, 发明, 2016, 第 5 作者, 专利号: 2016112164887
（ 14 ） 一种基于卷积神经网络的人手图像区域检测方法, 发明, 2016, 第 4 作者, 专利号: 201610421211.1
（ 15 ） 一种基于草图交互的动画数据组织方法, 发明, 2018, 第 3 作者, 专利号: 2018100259866
（ 16 ） 一种视频多尺度可视化方法与交互方法, 发明, 2018, 第 3 作者, 专利号: 201810045958.0
（ 17 ） 一种基于草图交互的面向多模态数据的可视分析方法和系统, 发明, 2018, 第 4 作者, 专利号: 201810272683.4
（ 18 ） 一种基于超结点的常识语义图谱构建方法和装置以及基于连接预测的常识补全方法, 发明, 2018, 第 3 作者, 专利号: 201810320164.0
（ 19 ） 一种基于语义三角的领域知识图谱及查询方法, 发明, 2017, 第 1 作者, 专利号: 201710160270.2
（ 20 ） 一种面向社交媒体的敏感数据发现方法, 发明, 2020, 第 3 作者, 专利号: 202010523627.0
（ 21 ） 一种基于语义三角的领域知识图谱的生成方法及装置, 发明, 2019, 第 5 作者, 专利号: ZL201710727435.X
发表著作
（1） 系统集成与企业优化, System Integration and Enterprise Optimization, 中国经济出版社, 1999-12, 第 3 作者
（2） 过程系统技术与管理的综合集成研究, Integration of Technology and Management for Process Systems , 科学出版社, 2003-01, 第 2 作者
（3） 化工企业生产执行系统, Manufacturing Execution System for PetroChemical Industries, 化学工业出版社, 2007-01, 第 1 作者
科研项目
（ 1 ） 面向互联网规模的用户言语信息服务系统与应用验证, 主持, 国家级, 2013-01--2017-12
（ 2 ） 自然人机交互基础理论与方法研究, 主持, 国家级, 2013-01--2017-12
（ 3 ） 人机交互自然性计算原理, 主持, 国家级, 2016-07--2020-06
（ 4 ） 面向ZJ的人机融合智能技术研究, 主持, 研究所（学校）, 2018-03--2019-03
（ 5 ） 多通道智能交互框架与交互信息融合技术研究, 主持, 研究所（学校）, 2020-04--2021-10
（ 6 ） 面向xx智能化情报应用系统的体系架构研究与集成应用技术, 主持, 研究所（学校）, 2019-07--2021-06
参与会议
（1）工业认知计算 2017年智能制造技术及应用研讨会 2017-10-18
项目协作单位
中国石油化工股份有限公司
中国石油天然气股份有限公司
国家电网股份有限公司
国家审计署
近期论文
查看导师新发文章
（温馨提示：请注意重名现象，建议点开原文通过作者单位确认）
（1） Weakly Supervised Learning for Single Depth-Based Hand Shape Recovery, IEEE Transactions on Image Processing(IEEE TIP), 2021, 第 8 作者
（2） EmotionMap: Visual Analysis of Video Emotional Content on a Map, Journal of Computer Science and Technology (JCST), 2020, 第 6 作者
（3） SceneSketcher: Fine-Grained Image Retrieval with Scene Sketches, European Conference on Computer Vision (ECCV), 2020, 第 8 作者
（4） STA-GCN: two-stream graph convolutional network with spatial-temporal attention for hand gesture recognition, Vis. Comput, 2020, 第 6 作者
（5） Image-based Pose Representation for Action Recognition and Hand Gesture Recognition, IEEE International Conference on Automatic Face and Gesture Recognition (FG 2020), 2020, 第 5 作者
（6） An Efficient LSTM Network for Emotion Recognition from Multichannel EEG Signals, IEEE Transactions on Affective Computing, 2020, 第 9 作者
（7） Dataless Short Text Classification Based on Biterm Topic Model and Word Embeddings, Proceedings of the Twenty-Ninth International Joint Conference on Artificial Intelligence (IJCAI-20), 2020, 第 2 作者
（8） SketchGAN: Joint Sketch Completion and Recognition with Generative Adversarial Network, Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition(CVPR), 2019, 通讯作者
（9） 基于编解码网络的多姿态人脸图像正面化方法, 中国科学, 2019, 第 5 作者
（10） A context-aware animation data description and interaction method based on sketch, Journal of Beijing Institute of Technology, 2019, 第 4 作者
（11） Multi-scale visualization based on sketch interaction for massive surveillance video data, Personal and Ubiquitous Computing, 2019, 第 8 作者
（12） A context-aware animation data description and interaction method based on sketch, Journal of Beijing Institute of Technology, 2019, 第 4 作者
（13） Joint Hand Detection and Rotation Estimation Using CNN, IEEE Trans. Image Processing, 2018, 通讯作者
（14） Evaluating a 3-D virtual talking head on pronunciation learning, International Journal of Human Computer Studies, 2018, 第 4 作者
（15） An Empirical Study on the Interaction Capability of Arm Stretching, International Journal of Human-Computer Interaction, 2017, 第 5 作者
（16） Tilting-Twisting-Rolling: a pen-based technique for compass geometric construction, Science China Information Sciences, 2017, 第 4 作者
（17） Visualizing and Analyzing Video Content With Interactive Scalable Maps, IEEE TRANSACTIONS ON MULTIMEDIA, 2016, 第 4 作者
（18） Pactolus: A method for mid-air gesture segmentation within EMG, Conference on Human Factors in Computing Systems - Proceedings, 2016, 通讯作者
（19） An exploratory study of multimodal interaction modeling based on neural computation, SCIENCE CHINA-INFORMATION SCIENCES, 2016, 通讯作者
（20） Mining User-Aware Rare Sequential Topic Patterns in Document Streams, IEEE Transactions on Knowledge and Data Engineering, 2016, 第 5 作者
（21） An Interactive SpiralTape Video Summarization, IEEE TRANSACTIONS ON MULTIMEDIA, 2016, 通讯作者
（22） 3D Model-based Continuous Emotion Recognition, IEEE CVPR 2015, 2015, 通讯作者
（23） Staggered meshless solid-fluid coupling, ACM Transactions on Graphics, 2013, 通讯作者
（24） Interactive multi-scale structures for summarizing video content, Science China, 2013, 第 1 作者
（25） An exploration of pen tail gestures for interactions, International J. of Human Computer Studies, 2013, 通讯作者
（26） Sketch-based Annotation and Visualization in Video Authoring, IEEE Transactions on Multimedia, 2012, 第 3 作者
（27） Robust Maximum Likelihood Estimation by Sparse Bundle Adjustment Using the L1 Norm, IEEE CVPR 2012, 2012, 第 3 作者
（28） KnitSketch: A Sketch Pad for Conceptual Design of 2D Garment Patterns, IEEE Transactions on Automation Science and Engine, 2010, 通讯作者
（29） Visualizing Time-Series Data in ProcessLines: Design and Evaluation of a Process Enterprise Application, The 25th Annual ACM Symposium on Applied Computing, 2010, 通讯作者
（30） Robust Control-Theoretic Thermal Balancing for Server Clusters, IEEE International Parallel and Distributed Processing Symposium, 2010, 第 3 作者
（31） Feedback Thermal Control for Real-time Systems, IEEE Real-Time and Embedded Technology and Applications Symposium, 2010, 通讯作者
（32） Structuring and manipulating hand-drawn concept maps, Proceedingsc of the 13th International Conference on Intelligent User Interfaces, 2009, 通讯作者
（33） Synthesis Vis: A Web Site Supporting Collaborative Information Visualization, Conference on Computer Graphics, Imaging and Visualization: New Advances and Trends, 2009, 第 2 作者
（34） ProcessLine: Visualizing time-series data in process industry, IEEE Symposium on Visual Analytics Science and Technology, 2009, 第 2 作者
（35） Tilt menu: using the 3D orientation information of pen devices to extend the selection capability of pen-based user interfaces, 26th Annual CHI Conference on Human Factors in Computing Systems, 2008, 第 3 作者
（36） The tilt cursor: enhancing stimulus-response compatibility by providing 3d orientation cue of pen, Proceedings of the SIGCHI Conference on Human Factors in Computing Systems, 2007, 第 3 作者
（37） Crossmodal error dorrection of continuous handwriting recognition by speech, International Conference on Intelligent User Interfaces, 2007, 通讯作者
（38） Distributed Utilization Control for Real-Time Clusters with Load Balancing, Proceedings of 27th IEEE International Real-Time Systems Symposium, 2006, 第 2 作者
（39） Visualization of large hierarchical data by circle packing, Conference on Human Factors in Computing Systems - Proceedings, 2006, 第 4 作者
学术兼职
2017-10-20-今,SAC 情感交互标准化工作组, 组长
2015-07-08-今,国际标准组织ISO/IEC JTC1/SC35, 技术委员会委员
2014-03-08-2016-02-29,自动化学会人机交互与图形学专委会, 主任
2006-09-01-2016-12-31,中国仪器仪表学会MES分会, 常务理事
京公网安备 11010802027423号