个人资料
个人简介左琛，本科毕业于四川大学电子信息工程专业，博士毕业于西安交通大学信息与通信工程专业，美国斯坦福大学访问学者。现任长安大学运输工程学院讲师，数据与系统工程系副主任，数据与系统工程党支部宣传委员。 申请人长期从事机器学习与计算机视觉相关研究工作，目前主持国家自然科学基金青年科学基金项目1项、陕西省自然科学基础研究计划一般项目(青年)1项、陕西省交通运输厅交通运输科研项目1项、山东省交通运输厅先行试验项目1项、中央高校基本科研业务费专项资金资助项目2项。作为技术负责人，参与国家自然科学基金面上项目2项、陕西省科学技术厅重点研发计划项目1项、陕西省交通运输厅重点项目2项、河北省交通厅科技项目1项。以第一作者和通信作者身份，累计发表学术论文10余篇，包括《IEEE Transaction on Geoscience and Remote Sensing》《Water Resources Research》《Remote Sensing》等，参加国内外高水平学术会议并做专题报告6次，已授权发明专利2项。 社会职务研究领域1. 基于视觉基础模型的公路交通设施无人机巡检与智能图像识别方法研究 伴随着飞控能力和计算平台的发展，无人机已经成为进行公路交通基础设施巡检的新兴工具。然而，无人机图像中扰动因素多、场景变化大，给后继的图像分析与智能识别方法带来巨大挑战。本课题组针对路面病害、标线标识、沿线设施、道路边坡等多种细分养护场景，以海量无人机航拍图像为数据基础，运用视觉基础模型、图像分割大模型、多模态数据处理等人工智能和计算机视觉前沿技术，探索各类异常结构的视觉响应特征，求解行业规范文本和巡检图像之间的相互对应关系，建立兼具计算效率和识别精度的智能图像分析方法，显著提高深度神经网络的训练速度、标注效率和泛化能力，为公路交通基础设施的状态检测和性能评估提供重要依据。 1.1 基于基础模型的路面病害识别与搜索方法 及时准确地发现裂缝、坑槽、修补等路面病害，是公路预防性养护和智慧化养护的重要内容。近年来，以卷积神经网络为核心的深度学习技术已经成为了分析巡检图像的主流方法。然而，当前技术多基于有监督学习框架，难以有效应对道路病害多样的形态特征，识别方法的泛化能力有限。本课题组基于无人机高分辨率图像，以视觉基础模型为核心技术手段，探索各类路面异常样例的高阶视觉特征，建立高性能路面病害识别方法。具体内容包括： (1)使用DINOv2、Web-SSL等视觉基础模型，充分利用自监督学习、Vision Transformer和海量无标注数据集，提取图像视觉特征；(2)运用距离度量、流形学习和无监督聚类技术，发现道路路面区域，移除不相关图像块；(3)使用XGBoost、TabPFN等有监督分类器，建立主动学习框架，促使计算机理解视觉特征与病害样本之间的对应关系，预测病害的发生位置、损坏类型和损坏程度；(4)基于典型病害样例库，运行近似近邻搜索方法，求解路面病害的类内多样性和场景变化性，实现异常结构的精细搜索与快速排查，探索道路病害的时空变化规律。 1.2 图像分割大模型支持的交通标线缺损定位方法 保障交通标线的可见性和清晰度，是道路设施养护的重要环节。基于深度神经网络的目标检测和语义分割方法是目前进行破损标线识别的主流技术手段。然而，神经网络的性能高度依赖人工标注的质量和规模，如何有效建立高质量数据集，提高神经网络的训练效率，减少人工标注工作量，成为了重要且紧迫的科研话题。本课题组引入图像分割大模型技术，依据标线颜色等先验信息，引导图像大模型理解交通设施养护场景，建立交通标线缺损快速检测和准确评估的技术方法。具体内容包括： (1)基于图像分割大模型SAM,启动全局分析模式，自动划分无人机巡检图像，依据颜色信息确定道路路面区域，划定研究范围；(2)使用DINOv2基础模型，运用Hausdorff距离和余弦距离，量化无人机图像序列的相似性，获得代表性图像样例；(3)基于代表性图像，训练YOLO和DETR目标检查网络，准确定位减速标线、车道线、导向箭头和导流线破损；(4)启动图像分割大模型SAM，分析交通标线样例，预测标线初始状态。基于阈值分割方法，提取标线的现存可见区域。计算标线的缺失区域比例，定量评估标线健康状态。 1.3 多模态学习赋能的交通沿线设施快速识别方法 交通标志、交安设施、交通监控等沿线设施是交通系统的基本组成，定位和维护沿线设施是进行基础设施养护的基本要素。基于YOLO等目标检测网络，计算机能够实现无人机航拍图像的高效处理。然而，当前的有监督学习方法高度依赖人工标注数据集，能以有效应对光照条件、巡检场景和飞控参数的显著变化，识别方法的泛化能力有限。本课题组引入多模态分析技术，探索交通标志图像和行业规范文本之间的映射关系，在共享特征空间内实现多模态样例的准确对齐和配准，提高交通沿线设施的快速定位和精细分类。具体内容如下： (1)启动Grounding DINO、YOLO-World、YOLOE等开放词汇目标检测程序，合理设定关键字提示词，建立沿线设施样例数据集；(2)运用知识蒸馏技术，建立教师-学生结构，去除任务无关神经元，获得小尺寸高效率目标检测网络；(3)使用视觉基础模型分析无人机图像，使用文本编码器分析行业规范文本，运用线性映射层实现共享特征空间内的样本对齐，实现交通沿线设施的精细化分类。 1.4 光学、红外与三维点云联合驱动的道路边坡隐患识别方法 快速发现边坡落石、岩体开裂、植被侵入等异常案例，是维护道路边坡安全的重要因素。在无人机智能巡检框架内，如何有效整合光学图像、红外图像、三维点云等多模态数据采集手段，提高边坡异常结构的识别质量，成为了重要的研究话题。本课题组针对山区公路和沿海公路场景，有机结合设备、数据、技术和交通养护部门需求，以海量无人机图像为数据基础，运用深度神经网络、视觉基础模型、多模态数据处理等手段，建立高性能道路边坡智能巡检方法。具体内容如下： (1)启动EfficientNet、Vision Transformer、ConvNeXt、Mamba等多种前沿深度神经网络，探索各类神经网络的性能边界，实现边坡落石和岩体开裂的快速定位和分类；(2)针对水库边坡场景中的少样本学习难题，使用DINOv2视觉基础模型分析RGB、红外和点云图像，编程实现特征级融合和决策级融合框架，实现边坡落石和植被侵入的快速识别；(3)基于海量无标注图像，使用自监督学习和对比学习技术探索光学-红外-点云图像之间的匹配关系，促使计算机自主发掘边坡结构之间的内在关系和发展趋势，实现多模态数据对齐，获得与巡检场景相匹配的高质量图像编码器。 2. 基于开放词汇目标检测和视觉基础模型的危化品车辆识别方法 从海量交通监控视频中快速发现危化品车辆，是智慧交通系统的关键环节，是提高通行效率、保障交通安全、促进绿色发展的基本前提。近年来，深度学习和计算机视觉技术成为了实现交通感知的主流方法。然而，多样的视频采集设备、繁杂的交通通行场景和稀缺的危化品车辆样例，给深度神经网络的推广应用带来了巨大挑战。为了提高泛化能力并简化训练流程，本课题组将开放词汇目标检测和视觉基础模型引入到交通视频分析领域，充分利用通用视觉特征，建立高性能危化品车辆识别方法。具体内容包括： (1)启动YOLO-World目标检测程序，合理设置关键字提示词，快速提取交通监控视频中的车辆样例。为了消除冗余信息，使用ByteTrack和SAM2技术，完成车辆的轨迹跟踪；(2)使用DINOv2视觉基础模型，提取车辆样例的视觉特征，使用UMAP和谱聚类技术理解车辆样例之间的相似性关系；(3)使用k近邻搜索去除YOLO-World的噪声样例，使用XGBoost分类器预测车辆类型，有效应对夜间、降雨等复杂场景，建立具有高泛化能力和强鲁棒性的危化品车辆识别方法。 3. 孔隙结构与物理属性联合约束的非均质数字岩心建模方法 3.1 基于通用图像特征的非均质岩心表征方法 3.2 基于机器学习技术的三维数字岩心快速建模方法 3.3 贝叶斯证据学习驱动的地质模型空间不确定性量化方法 4. 基于视觉基础模型的城市更新区域与建成环境识别方法 对于具有复杂建成环境的老城区，采用人工智能技术可以提高更新规划的科学性，然而现有的目标识别方法高度依赖人工标注数据集，面临更新实践不足、分析精度受限和训练成本过高的局限。将视觉基础模型引入城市更新领域，探讨视觉基础模型支持的老城区更新规划方法：(1)通过等间隔采样构建图像块数据集，使用视觉基础模型提取高维视觉特征；(2)启动余弦距离、流形学习、高斯混合模型等机器学习技术，实现图像块数据集的智能分组；(3)对图像块进行空间转译，精准识别重点区域；结合多维要素综合评判，优化智能识别结果，指导后续更新规划实践。以陕西省榆林市清涧县老城区为例，探索该技术方法在城市更新规划实践中的应用，以期为老城区的城市更新提供新的思路。 开授课程本科生课程： 《人工智能与机器学习》 《Python程序设计》 《分布式系统与云计算》 《交通基础设施智慧管理》 《Local Area Development and Planning》(全英文授课) 《Comparative Planning》(全英文授课) 研究生课程： 《深度学习》 《多模态数据处理》 科研项目
论文第1作者或通信作者 期刊论文 Peer-reviewed Journal [1] Chen Zuo, Chen Guo, Shi Dong, Longhai Yang, Haoyue Zhang. Stochastic reconstruction of 3D heterogeneous microstructure using a column-oriented multiple-point statistics program[J]. Lithosphere, 2024, 2024:1-22. (SCI, 中科院2区期刊) [2] Chen Zuo, Zhuo Li, Zhe Dai, Xuan Wang, Yue Wang, A Pattern Classification Distribution Method for Geostatistical Modeling Evaluation and Uncertainty Quantification[J]. Remote Sensing, 2023, 15: 2708. (SCI, 中科院2区Top期刊) [3] Chen Zuo, Chengcheng Liang, Jing Chen, Rui Xi, Junfei Zhang. Machine Learning-Based Urban Renovation Design for Improving Wind Environment: A Case Study in Xi’an, China[J]. Land, 2023, 12: 739. (SSCI, 中科院3区期刊) [4]Chen Zuo, Zhibin Pan, Zhen Yin, Chen Guo. A nearest neighbor multiple-point statistics method for fast geological modeling[J]. Computers and Geosciences, 2022, 167: 1-18. (SCI, 中科院2区期刊) [5] Zhen Yin, Chen Zuo, Emma J. MacKie, Jef Caers. Mapping high-resolution basal topography of West Antarctica radar data using non-stationary multiple-point geostatistics (MPS-BedMapplingV1)[J]. Geoscientific Model Development, 2022, 15: 1477-1497. (SCI, 中科院2区期刊) [6] Chen Zuo, Zhen Yin, Zhibin Pan, Emma J. MacKie, Jef Caers. A tree-based direct sampling method for surface and subsurface hydrological modeling[J], Water Resources Research, 2020, 56(2): e2019WR026130. (SCI, 中科院1区期刊) [7] Chen Zuo, Zhibin Pan, Zhaoqi Gao, Jinghuai Gao. Correlation-driven direct sampling method for geostatistical simulation and training image evaluation[J], Physical Review E, 2019, 99(5): 053310. (SCI, 中科院2区期刊) [8] Chen Zuo, Zhibin Pan, Hao Liang. Accelerating simulation for multiple-point statistics algorithm using vector quantization[J], Physical Review E, 2018, 97(3): 033302. (SCI, 中科院2区期刊) [9] Zhengchao Xu, Zhe Dai, Zhaoyun Sun, Chen Zuo, Huangsheng Song, Changwei Yuan. Enhancing Pavement Distress Detection using a Morphological Constrains-based Data Augmentation Method[J]. Coatings, 13(4): 764. (SCI, 中科院3区期刊) [10]Jing Chen, Ruiqi Wang, Bei Fang, Chen Zuo. Fine-grained aspect-based opinion mining on online course reviews for feedback analysis[J]. Interactive Learning Environments, 2023, 1-16. (SSCI, 中科院3区期刊) 第1作者或通信作者 国际会议 International Conference [11] Chen Zuo, Juzheng Liu, Zhuo Li, Zhenzhen Fan, Chen Guo. Improving the Reliability of Geological Models with Pattern Classification Distribution Method[C], AGU Fall Meeting, Chicage & Online, 2022: H24D-02. [12] Chen Zuo, Chen Guo, Yihui Zhang. A similarity contrast framework for unsupervised geological segmentation on heterogeneous structures[C], AGU Fall Meeting, Online, 2021: MR45B-0086. [13] Chen Zuo, Zhibin Pan, Zhaoqi Gao, Zhen Yin, Jef Caers. Nearest neighbor multiple-point statistics method for fast Earth surface process modeling[C], AGU Fall Meeting, San Francisco, US, 2020: EP019-0010. [14]Chen Zuo, Zhen Yin, Zhibin Pan, Emma J. MacKie, Jef Caers. A tree-based direct sampling method for surface and subsurface hydrology[C], AGU Fall Meeting, San Francisco, US, 2019: H13Q-1991. 第1作者或通信作者 中文期刊 [15] 左琛, 滕奇志, 吴运强, 何小海, 高明亮, 岩心3维模型形状分布刻画[J], 四川大学学报(工程科学版), 2016, s2(48): 113-120. (EI期刊) [16] 左琛, 滕奇志, 何小海, 高明亮, 快速多点地质统计三维重建算法[J]，四川大学学报(自然科学版), 2016, 02(53): 337-346. (北大核心期刊) 第1作者或通信作者 中文会议 [17] 左琛, 郭晨, 郝柯然, 范珍珍. 基于SAM语义分割的非均质页岩孔隙结构提取方法[C]. 中国地球科学联合学术年会, 珠海, 中国, 2023. [18] 郭晨, 左琛, 范珍珍. 基于数字岩心的电学特性预测模型及不确定性量化[C]. 中国地球科学联合学术年会, 珠海, 中国, 2023. [19] 左琛, 单天悦, 郭晨, 范珍珍, 杨冰鑫. 基于形态相似性的非均质孔隙精确表征与高效重构方法[C]. 第五届油气地球物理学术年会, 青岛, 中国, 2023. [20] 左琛, 李帅, 郭晨. 贝叶斯证据学习驱动的数字岩心电特征不确定性量化[C], 中国地球科学联合学术年会, 福州, 中国, 2022. [21]梁程程, 左琛. 多点统计算法支持的城市肌理图像生成框架[C], 中国城市规划年会, 成都, 中国, 2020. (已录用, 分会宣讲) 合作作者 期刊论文 [22] Emma J. Mackie, Dustin M. Schroeder, Chen Zuo, Zhen Yin, Jef Caers. Stochastic modeling of subglacial topography exposes uncertainty in water routing at Jakobshavn glacier[J], Journal of Glaciology, 2020: 1-9. (SCI, 中科院2区期刊) [23] Zhaoqi Gao, Zhibin Pan, Chen Zuo, Jinghuai Gao, Zongben Xu. An optimized deep network representation of multimutation differential evolution and its application in seismic inversion[J], IEEE Transactions on Geoscience and Remote Sensing, 2019, 57(7): 4720-4734. (SCI, 中科院1区期刊) [24]Mingliang Gao, Qizhi Teng, Xiaohai He, Chen Zuo and Zhengji Li, Pattern density function for reconstruction of three-dimensional porous media from a single two-dimensional image[J], Physical Review E, 2016, 93(1), 012140. E (SCI, 中科院2区期刊) [25]Mingliang Gao, Xiaohai He, Qizhi Teng, Chen Zuo and Dongdong Chen, Reconstruction of three-dimensional porous media from a single two-dimensional image using three-step sampling, Physical Review E, 2015, 91(1): 013318. (SCI, 中科院2区期刊) 科技成果荣誉奖励工作经历2020.09 - 今 长安大学 运输工程学院 大数据管理与应用系 讲师 |