范晓鹏科研成果

基本信息 Xiaopeng Fan 科研/Research 项目/Projects 教学/Teaching 新建主栏目 招生&招聘信息 名称 招生类别：本、硕、博 招聘类别：博士后、助理教授、副教授、教授等 研究方向：数据压缩、计算机视觉、虚拟现实、机器人运动规划 工作地点：本部、苏州研究院、深圳鹏城实验室 薪酬待遇：国家级青年人才年薪100万元、助理教授年薪35万元 最新消息：已入选哈工大苏州研究院首批入驻团队 基本信息 名称 二级教授、长聘教授、博导、智能接口与人机交互研究中心主任、认知智能与内容安全教育部重点实验室副主任、哈工大青年科学家工作室团队带头人、哈工大苏研院数字孪生与具身智能团队负责人。入选国家级高层次人才（2021）、教育部人才计划（2011年）、哈工大拔尖人才（2014年）、微软铸星计划（2010年）、哈工大百人计划（2010年）等。 作为副主编制定了IEEE1857国际标准，作为主要贡献者之一制定了AVS/AVS3等国家/行业标准，获发明专利20余项，十余项技术被国际/国内标准采纳。2013年获IEEE标准杰出贡献奖。2023年获电子学会创新团队奖。主要研究兴趣包括图形图像技术、人机交互技术等，发表IEEE TIP、IEEE TVCG、CVPR、ACM MM、AAAI、ICML、NeurIPS等国际期刊和会议论文近200篇。主持与承担国家级项目10余项，包括担任科技部重点研发计划项目负责人，担任国家自然科学基金重点、面上、青年、元宇宙专项等项目负责人。研发的多项技术在华为公司、神华集团、字节跳动等落地应用。 2017年作为程序主席主办CCF推荐会议PCM2017。担任中国人工智能学会（CAAI）教育工作委员会副主任、中国计算机产业协会元宇宙专委会副会长、黑龙江省计算机学会学术工作委员会主任等。 联系方式 名称 荣誉称号&奖励 名称 2023年 中国电子信息科技创新团队奖（团队成员） 2022年 哈工大青年科学家工作室（团队带头人） 2021年 国家级高层次人才（特聘教授） 2014年 哈工大青年拔尖人才（教授） 2013年 IEEE标准杰出贡献奖 2011年 教育部新世纪优秀人才 2011年 微软公司“铸星计划” 2010年 哈工大“百人计划”（副教授） 教育经历 名称 2005-2009，香港科技大学，电子工程系，博士 1997-2003，哈尔滨工业大学，实验学院/计算机学院，本硕连读 工作经历 名称 时间 工作经历 2003年7月~2005年8月 英特尔上海实验室，软件工程师 2010年4月~2014年11月 哈工大计算机学院，副教授 2011年8月~2012年5月 微软亚洲研究院网络媒体组，访问研究员 2014年11月~现在 哈工大计算机学院，教授 2021年11月~现在 哈工大计算机学院，智能接口与人机交互中心主任 主要任职 名称 智能接口与人机交互研究中心主任 哈工大苏研院’数字孪生与具身智能‘团队负责人 认知智能与内容安全教育部重点实验室副主任 中国人工智能学会教育工作委员会副主任 中国计算机产业协会元宇宙专委会副会长 黑龙江省计算机学会学术工作委员会主任 上海市元宇宙产业发展专委会委员 IEEE AVS标准英文版副主编 IEEE Senior Member IEEE Trans. on CSVT等期刊的审稿人 国家自然科学基金委通讯及指南专家 PCM2017程序主席(Program Chair) Resume 名称 Xiaopeng Fan (M’09, SM’17) received the Ph.D. degree from Hong Kong University of Science and Technology (HKUST), Hong Kong, in 2010. He joined HIT as Associate Professor in 2010 and was promoted Full Professor in 2014. During 2011 and 2012, he worked with Microsoft Research Asia as Visiting Researcher. He has authored or co-authored over 180 technical journal and conference papers. His current research interests include image/video coding, wireless communication, and Robotics. He has 20 Chinese or American patents granted, and has more than 10 techniques adopted by international video coding standards including HEVC, AVS, AVS3D and etc. He served as program chair of PCM2017, chair of IEEE SGC2015, and co-chair of MCSN2015. He was associate editor of IEEE 1857 standard in 2013. He has been awarded ‘Outstanding Contributions to the Development of IEEE Standard 1857’ by IEEE in 2013. Contact 名称 Prof. Xiaopeng Fan Tel +86-451-86416485-806 Fax E－mail： fxp at hit.edu.cn 邮　　编： 150001 通信地址： P.O. Box 321, Harbin Institute of Technology, Harbin, China Working experience 名称 Professor, School of Computer Science, Harbin Institute of Technology (HIT), Harbin, P.R.China (11/2014-present) Visiting Researcher, Internet Media Group, Microsoft Research Asia (MSRA), Beijing, P.R.China (08/2011-05/2012) Associate Professor, School of Computer Science, Harbin Institute of Technology (HIT), Harbin, P.R.China (04/2010-11/2014) Research 名称 Recent Journal Papers [1] Hengyu Man, Riyu Lu, Chang Yu, Xiaopeng Fan*, Debin Zhao, “MetaIP: Meta-Network-based Intra Prediction with Customized Parameters for Video Coding”, IEEE Trans. On CSVT, 2024. [2] Wenrui Li, Ruiqin Xiong, Xiaopeng Fan*, “Multi-layer Probabilistic Association Reasoning Network for Image-Text Retrieval”, IEEE Trans. On CSVT, 2024. [3] Yanchen Dong, Ruiqin Xiong, Jing Zhao, Jian Zhang, Xiaopeng Fan, Shuyuan Zhu, Tiejun Huang, “Learning a Deep Demosaicing Network for Spike Camera with Color Filter Array”, IEEE Trans. Image Process. 2024. [4] Zhaolin Wan, Xiaopeng Fan*, Debin Zhao, “Predicting 360 ？ Video Saliency: A ConvLSTM Encoder-Decoder Network with Spatio-temporal Consistency,” IEEE Journal on Emerging and Selected Topics in Circuits and Systems, 2024. [5] Xu Liu, Jianing Li, Jinqiao Shi, Xiaopeng Fan*, Yonghong Tian, and Debin Zhao, “Event-based Monocular Depth Estimation with Recurrent Transformers,” IEEE Trans. On CSVT, 2024. [6] Penghong Wang, Jiahui Li, Chen Liu, Xiaopeng Fan*, Mengyao Ma*, Yaowei Wang, “Distributed Semantic Communications for Multimodal Audio-Visual Parsing Tasks,” IEEE Transactions on Green Communications and Networking, 2024. [7] Wenrui Li, Jiahui Li, Mengyao Ma, Xiaopeng Hong, Xiaopeng Fan*, “Multi-Scale Spiking Pyramid Wireless Communication Framework for Food Recognition”, IEEE Trans. On Multimedia, 2024. [8] Wenxue Cui, Xingtao Wang, Xiaopeng Fan, Shaohui Liu, Xinwei Gao, Debin Zhao*, “Deep Network for Image Compressed Sensing Coding Using Local Structural Sampling”, ACM Transactions on Multimedia Computing Communications and Applications, 2024. [9] Wenxue Cui, Xiaopeng Fan, Jian Zhang, Debin Zhao*, “Deep Unfolding Network for Image Compressed Sensing by Content-adaptive Gradient Updating and Deformation-invariant Non-local Modeling”, IEEE Trans. On Multimedia, 2024. [10] Hui Li, Zhaoyi Yan, Xiaopeng Fan*, “Multi-dataset learning with channel modulation loss for blind image quality assessment,” Multimedia Tools and Applications, 2024. [11] Han Zhang, Chenlin Zhou, Liutao Yu, Liwei Huang, Zhengyu Ma, Xiaopeng Fan*, Huihui Zhou, Yonghong Tian, “SGLFormer: Spiking Global-Local-Fusion Transformer with High Performance,” Frontiers in Neuroscience, 2024. [12] Chaopeng Zhang, Xingtao Wang*, Ruiqin Xiong, Xiaopeng Fan, and Debin Zhao, “Local-Global Dynamic Filtering Network for Video Super-Resolution,” IEEE Trans. On Computational Imaging, vol. 9, pp. 963-976, Oct. 2023. [13] Hengyu Man, Xiaopeng Fan*, Ruiqin Xiong, and Debin Zhao, “Tree-Structured Data Clustering-Driven Neural Network for Intra Prediction in Video Coding,” IEEE Trans. Image Process., vol. 32, pp. 3493-3506, Jun. 2023. [14] Xingtao Wang, Wenxue Cui, Xiaopeng Fan*, and Debin Zhao, “FCNet: Learning Noise-free Features for Point Cloud Denoising,” IEEE Trans. On Circuits And Systems For Video Technology, vol. 33, pp. 6288-6301, Nov. 2023. [15] Chentian Sun, Xiaopeng Fan*, and Debin Zhao, "JPEG Decoding with Nonlinear Inverse Transform Network and Progressive Recurrent Residual Network," IEEE Trans. On Consumer Electronics, vol. 69, pp. 499-509, Aug. 2023. [16] Wenrui Li, Zhengyu Ma, Jinqiao Shi*, and Xiaopeng Fan, “The style transformer with common knowledge optimization for image-text retrieval,” IEEE Signal Processing Letters, vol. 30, pp. 1197-1201, Sep. 2023. [17] Dan Xu, Xiaopeng Fan*, Debin Zhao, and Wen Gao, “Magnification-Arbitrary Depth Super-Resolution with Multiscale Consistency Deformable Alignment,” Displays, 2023. [18] Dan Xu, Xiaopeng Fan*, Debin Zhao, and Wen Gao, “Multiscale Attention Fusion for Depth Map Super-Resolution Generative Adversarial Networks,” Entropy, May 2023. [19] Dan Xu, Xiaopeng Fan, Debin Zhao, Wen Gao: Multiscale and multidirection depth map super resolution with semantic inference. IET Image Process. 17(13): 3670-3687 (2023) [20] Penghong Wang, Rui Zhou, Xiaopeng Fan*, Debin Zhao, “A Distance Estimation Model for DV-Hop Localization in WSNs,” IEEE Transactions on Vehicular Technology, 2022. [21] Xingtao Wang, Xiaopeng Fan*, Debin Zhao, “PointFilterNet: A Filtering Network for Point Cloud Denoising,” IEEE Trans. On CSVT, 2022. [22] Wenrui Li, Zhengyu Ma, Liangjian Deng, Xiaopeng Fan*, Yonghong Tian, “Neuron-Based Spiking Transmission and Reasoning Network For Robust Image-Text Retrieval,”, IEEE Trans. On CSVT, 2022. [23] Chentian Sun, Xiaopeng Fan*, Debin Zhao, “Lossless Recompression of JPEG Images Using Transform Domain Intra Prediction,” IEEE Trans. Image Process., 2022. [24] Rui Zhao, Ruiqin Xiong, Ziluo Ding, Xiaopeng Fan, Jian Zhang, and Tiejun Huang, “MRDFlow: Unsupervised Optical Flow Estimation Network With Multi-Scale Recurrent Decoder,” IEEE Trans. On CSVT, 2022. [25] Chong Mou, Jian Zhang, Xiaopeng Fan, Hangfan Liu, Ronggang Wang, COLA-Net: Collaborative Attention Network for Image Restoration, IEEE Trans. On Multimedia, 2022. [26] Mengyang Wang, Jiahui Li, Mengyao Ma, Xiaopeng Fan*, “Constellation Design for Deep Joint Source-Channel Coding,” IEEE Signal Processing Letters, 29:1442 - 1446 (2022). [27] Zhang Yan, Fan Xiaopeng* and Zhao Debin. Semisupervised learning-based depth estimation with semantic inference guidance. Science China Technological Sciences, 2022. Recent conference paper(Selected) [1] Xingtao Wang, Hongliang Wei, Xiaopeng Fan, Debin Zhao, Hyper-MD: Mesh Denoising with Customized Parameters Aware of Noise Intensity and Geometric Characteristics, in CVPR 2024. [2] Rui Zhao, Ruiqin Xiong, Jing Zhao, Jian Zhang, Xiaopeng Fan, Zhaofei Yu, Tiejun Huang, Boosting Spike Camera Image Reconstruction from a Perspective of Dealing with Spike Fluctuations, in CVPR 2024. [3] Jiahan Li, Jiuyang Dong, ShenjinHuang, Xi Li, Junjun Jiang, Xiaopeng Fan, Yongbing Zhang, Virtual Immunohistochemistry Staining for Histological Images Assisted by Weakly-supervised Learning, in CVPR 2024. [4] Yanchen Dong, Ruiqin Xiong, Jian Zhang, Zhaofei Yu, Xiaopeng Fan, Shuyuan Zhu, Tiejun Huang, Super-Resolution Reconstruction from Bayer-Pattern Spike Streams, in CVPR 2024. [5] Yanchen Dong, Ruiqin Xiong, Jing Zhao, Jian Zhang, Xiaopeng Fan, Shuyuan Zhu, Tiejun Huang, “Joint Demosaicing and Denoising for Spike Camera,” in AAAI 2024. [6] Wenrui Li, Zhengyu Ma*, Liang-Jian Deng, Penghong Wang, Jinqiao Shi, and Xiaopeng Fan*, “Reservoir Computing Transformer for Image-Text Retrieval,” in ACM Multimedia, Oct. 2023, pp. 5605-5613. [7] Wenrui Li, Xi-Le Zhao, Zhengyu Ma*, Xingtao Wang, Xiaopeng Fan*, and Yonghong Tian, “Motion-Decoupled Spiking Transformer for Audio-Visual Zero-Shot Learning,” in ACM Multimedia, Oct. 2023, pp. 3994-4002. [8] Wenxue Cui, Xingtao Wang, Xiaopeng Fan, Shaohui Liu, Chen Ma, and Debin Zhao, “G2-DUN: Gradient Guided Deep Unfolding Network for Image Compressive Sensing,” in ACM Multimedia, Oct. 2023, pp. 7933-7942. [9] Shengping Zhang, Quanling Meng, Qinglin Liu, Liqiang Nie, Bineng Zhong, Xiaopeng Fan, Rongrong Ji, “Interactive Object Placement with Reinforcement Learning,” ICML2023. [10] Rui Zhao, Ruiqin Xiong, Jing Zhao, Zhaofei Yu, Xiaopeng Fan, Tiejun Huang, “Learning Optical Flow From Continuous Spike Streams”, NeurIPS 2022. [11] Xu Liu, Jianing Li, Xianqi Zhang, Jingyuan Sun, Xiaopeng Fan*, Yonghong Tian, Learning Visible Surface Area Estimation for Irregular Objects, ACM International Conference on Multimedia 2022. 科研项目 名称 国家重点研发计划项目，“网络视听全景式交互化新业态关键技术研发与应用示范”，4438.76万元（国拨1938.76万），2021.12~2024.11，项目负责人。 国家自然科学基金重点项目，8K超高清视频智能生成与实时编码器关键技术研究，254万，2023-2026，项目负责人。 国家重点基础研究发展计划（973计划）项目课题，“基于视觉特性的视频编码理论与方法研究/基于稀疏特性的视频编码”，560/3000万，资助号2015CB351804，2015~2019，参与。 国家重点基础研究发展计划（973计划）项目课题，“基于视觉特性的视频编码理论与方法研究/分布式多视点视频编码”，2009.1~2013.12，参与。 国家自然科学基金重点项目，混合数模传输中的图像视频处理理论与方法，76.5/255万，2017-2021，校内负责人。 国家自然科学基金面上项目，基于边信息的智能视频编码研究，资助号：NSFC-61972115, 59万，2020.1~2023.12，主持。 国家自然科学基金面上项目，面向软传输的视频编码技术研究，资助号：NSFC-61472101, 82万，2015.1~2018.12，主持。 国家自然科学基金青年项目，灵活高效的分布式视频编码研究，资助号：NSFC-61100095, 23万，2012.1~2014.12，主持。 教育部新世纪优秀人才支持计划，视频编码与传输技术研究，资助号：NCET-11-0797, 50万，2012.1~2014.12，主持。 国家高技术研究发展计划（863计划）子课题，“真三维视频编码”，32/800万，子课题负责人。 中央高校基础科研基金项目，“图像和视频处理技术研究”，资助号：HIT.BRETIII.201221, 30万，2012.1~2014.12，主持。 讲授课程/Course 名称 哈工大（HIT） 数据压缩技术 (2010-2012，软件学院硕士课) 36学时 大学计算机基础（2013-2015秋、2017秋，留学生班） 70学时/年 计算机视觉 （2013秋）30学时/年 随机计算（2018秋）70学时/年 智能图像视频处理技术（2019春）16学时/年 计算建模（2019秋-）72学时/年 数字媒体处理技术（2023秋-）32学时/年 招生信息 名称 硕士招生:视频编码传输，计算机视觉，虚拟现实，机器人运动规划 博士招生: 视频编码传输 ，计算机视觉，虚拟现实，机器人运动规划 毕业生 名称 博士： 2017届：Ahmed Hagag （埃及大学任教） 2017届：张涛（腾讯微信），张娜（华为海思） 2016届：高欣玮（腾讯微信），高敏（腾讯美国），赵亮（腾讯美国） 硕士： 2013届：朱小亮，张爱玲，黄伟 2014届：王洋（本中心读博） 2016届：卢怡然 2017届：张树宁 2018届：景璇璇（搜狐），史雪凤（滴滴） 本科： 2010届：张娜（本中心硕博连读） 2011届：张红（香港科大读研） 2012届：赵畅（UCLA读研、现美国雅虎公司任职），赵文博（本中心硕博连读） 2014届：杨振飞（香港科大读研）