正在数字化海潮下，安徽省农村信用社结合社（以下简称“省农信社”）消息系统运维平安面对严峻挑和：运维误操做可能激发客户资金丧失、数据泄露等风险，而现有碉堡机每日发生500小时审计视频，依赖人工全量考核存正在考核人员程度参差不齐、风险识别效率低、平安办理畅后（变乱数天或数周后才察觉）等三大痛点。虽然引入了防火墙、入侵检测系统等平安产物，批处置功课）的平安监测模子，精准定位高危操做；3。搭建机械进修锻炼平台，支撑模子全生命周期办理，实现事务模子自从拓展，鞭策落地使用。系统由三大焦点模块形成：非侵入式智能化操做平台、行为监测算法模块、机械进修锻炼平台。三者协同实现“数据采集-行为识别-风险预警-模子优化”闭环：操做平台采集审计视频，算法模块识别风险行为，锻炼平台持续优化模子，保障系统高效、精准运转。通过HDMI接口采集终端屏幕图像，HID手艺模仿键鼠操做；开辟表格识别、验证码识别算法，还原图像中文本、数字消息；建立可视化流程编排引擎，支撑判断、期待、轮回等使命节点，实现从动化操做。基于CNN-LSTM模子进行时序视频帧识别，每段视频拆分为不跨越10秒的动做片段提拔锻炼无效性；采用最大帧间差法计较相邻帧像素差值，自顺应提取环节帧，削减数据量；模子正在自无数据集上精确率达80%-90%。使用流水线手艺，集成数据办理、模子锻炼、超参数优化、摆设办事功能；支撑多种算法集成取尺度化组件，联系关系数据取模子版本；供给图形化界面，展现锻炼目标（精确率、丧失值），实现模子一键发布至操做平台。采用HDMI+OTG非侵入式方案，无需正在终端安拆插件，实现硬件无关、系统无关的从动化操做取视频采集，避免保守侵入式方案对系统平安性的影响。通过计较机视觉手艺（图像婚配、行为识别），完成审计视频全量考核，处理人工考核笼盖不全问题，同时保障数据不出局，合适金融数据平安要求。立异连系CNN-LSTM夹杂模子取动态帧优化手艺：CNN提取单帧操做特征，LSTM捕获跨帧时序行为模式；采用最大帧间差法提取环节帧，去除60%冗余数据，推理效率提拔近10倍。同时，模板婚配取深度进修协同，兼顾已知风险高效检出取新型非常快速响应，实现分钟级风险预警。建立尺度化机械进修流水线，支撑从数据采集、预处置、模子锻炼到摆设的全流程从动化。运维人员仅需更新指定锻炼视频，即可触发模子从动进化，将常规模子开辟人力投入降低80%，迭代周期压缩至6小时级，处理模子开辟畅后于演进的问题。项目立项取筹备阶段（2024年7月-9月）：完成立项、需求阐发、采购HDMI采集卡、HID模仿设备等硬件，搭建尝试；环节手艺研究取算法开辟阶段（2024年9月-11月）：霸占非侵入式操做手艺，开辟表格识别、验证码识别算法；完成CNN-LSTM行为监测模子及环节帧提取算法开辟取测试；平台开辟取集成阶段（2024年11月-12月）：搭建机械进修锻炼平台，集成三大模块，完成功能测试取机能测试；系统上线月）：系统正式上线，输出每日值班日常合规性查抄演讲（含用户名、视频时间、事务名称及次数），试运转期间不变运转。本项目基于“无植入式人机交互”理论，正在运维平安监测范畴立异性地提出了基于计较机视觉和人工智能手艺的非侵入式智能化操做方式。保守的运维监测凡是依赖于侵入式软件或硬件代办署理，存正在平安风险，而本项目通过HDMI和HID交互引擎模仿鼠标键盘输入实现系统级操做节制，实现了硬件无关、系统无关的全流程从动化操做，避免保守从动化手艺对方针终端的代码侵入，保障系统平安性取不变性。本项目开辟的从动化操做工做平台通过设想基于时空联系关系的使命编排理论，支撑复杂营业流程的智能化分化取沉组，实现跨平台操做的端到端从动化施行。这一理论冲破为非侵入式运维平安监测供给了新的研究范式，有帮于鞭策计较机视觉正在近程节制、智能审计和从动化运维等范畴的使用成长。保守的视频行为识别方式大多依赖于单帧图像的特征提取，而本项目基于时序阐发，提出告终合模板婚配取LSTM神经收集的视频帧序列识别方式。该方式通过卷积神经收集（CNN）提取视频帧图像的静态特征，同时操纵长短期回忆收集（LSTM）建模用户操做行为的时间动态特征，从而正在视频序列中精确识别特定的操做模式，提高对事务的监测精准度。此外，通过采用将完整视频拆分为分歧动做片段的体例（每段不跨越10秒），显著提拔锻炼数据的无效性，提高模子对分歧操做步调的识别能力。该理论立异填补了时序行为监测正在智能审计范畴的空白，提拔了人工智能正在从动化审计和非常检测标的目的的合用性和无效性。本项目建立了智能进修锻炼平台，连系机械进修流水线手艺，提出了模子全生命周期办理的理论系统。一是支撑私有化摆设下的动态资本分派取高效数据办理，通过度层解耦设想实现模子锻炼、调优取摆设的全流程从动化；二是进修锻炼平台通过图形化界面展现锻炼过程，供给曲不雅的模子评估手段，提高用户的可操做性；三是建立了多模态数据融合理论模子，针对分歧事务场景；四是成立差同化特征提取机制，处理动态界面取静态操做的同一建模难题。系统已正在安徽省农信社消息手艺核心推广，用于审计视频从动化考核取风险监测。运维人员通过平台查阅每日操做视频（筛选时间、从机地址、播放/封闭视频）系统从动输出PDF格局考核演讲，无需人工干涉。系统支撑每日500+小时视频全量处置，环节帧提取率10%-20%，打开SAP财管软件、批处置功课两个场景监测精确率不变，机械人可精确识别并记实事务，从操做发生到阐发成果生成延迟满脚及时监测需求，系统不变运转率99。9%以上。需12人天处置50GB日均视频；系统仅需1人天，月均节流11人月，按手艺人员人月2万元计较，年节流264万元；2。运维成本降低：削减误操做导致的系统修复成本，降低平安变乱经济丧失。1。提拔运维平安程度：实现审计视频全量考核，风险识别从“畅后”转为“及时预警”，保障客户资金取数据平安；2。树立行业标杆：为农村金融机构供给可复制的AI运维平安方案，鞭策金融科技正在运维范畴的深度使用；3。帮力数字化转型：通过从动化、智能化手艺，提拔安徽省农信社科技运维能力，为营业高质量成长奠基平安根本。本项目成功的焦点正在于“需求导向+手艺立异+协同研发”：以安徽省农信社现实运维痛点为起点，结合中国科技大学霸占非侵入式手艺、时序算法等环节难题，实现手艺取营业深度融合。项目不只处理当前考核效率问题，更通过机械进修平台保障可持续性，可拓展至更多场景。将来，可进一步扩大非侵入式操做平台使用场景（如智能审计、近程节制），优化模子泛化能力，鞭策农村金融运维平安向更高程度成长。更多金融科技案例和金融数据智能优良处理方案，请正在数字金融立异学问办事平台-金科立异社案例库、选型库查看。

建湖J9直营集团官网科技有限公司

2026-02-24 06:07