- DOI:
10.13738/j.cnki.acc.qklw60536
- 专辑:
科学Ⅰ辑;信息科技
- 专题:
信息、科学;综合科技
- 分类号:
G90;N92
摘要:随着大数据跨部门、跨平台共享需求不断增加,传统数据共享方式在隐私保护、权限控制、计算效率与合规性等方面存在明显不足。针对上述问题,本文设计一种面向多源异构环境的大数据安全共享与隐私计算系统。系统采用分层解耦架构,实现接入认证、数据分级脱敏加密、隐私计算调度、跨域安全传输与全链路审计等功能。通过融合联邦学习、差分隐私与密文计算相关技术,使数据在共享过程中可用不可见。本文以曹妃甸职业技术学院校园数据与实训平台数据共享场景为例开展测试验证,结果表明,该系统在延迟、吞吐量、异常识别与隐私保护等方面优于传统方案,能够满足院校、政务、医疗、工业等场景的安全共享需求,具备一定的工程应用价值。
关键词:大数据安全;数据共享;隐私计算;跨域协同;数据脱敏
Design of Big Data Secure Sharing and Privacy Computing System for Multi-source Heterogeneous Scenarios
Abstract:With the increasing demand for cross-department and cross-platform sharing of big data, traditional data sharing methods have obvious shortcomings in privacy protection, authority control, computing efficiency and compliance. To solve these problems, this paper designs a big data secure sharing and privacy computing system for multi-source heterogeneous environments. The system adopts a layered decoupling architecture to realize access authentication, data hierarchical desensitization and encryption, privacy computing scheduling, cross-domain secure transmission and full-link audit. By integrating federated learning, differential privacy and ciphertext computing, the system makes data available but not visible during sharing. Taking the data sharing scenario of campus and training platform in Caofeidian Polytechnic Institute as an example, tests show that the system is superior to traditional schemes in delay, throughput, anomaly identification and privacy protection. It can meet the secure sharing requirements of colleges, government, medical, industrial and other scenarios, and has certain engineering application value.
Keywords:big data security; data sharing; privacy computing; cross-domain collaboration; data desensitization
0 引言
在数字经济发展过程中,大数据已成为重要生产要素,跨部门、跨机构、跨平台的数据共享与协同分析逐渐成为常态。在政务服务、医疗健康、工业互联网以及职业院校数字化建设等领域,数据融合能够有效提升决策效率与服务质量,但同时也带来数据泄露、越权访问、滥用篡改等安全风险。传统集中式存储、明文传输、简单脱敏等方式难以满足日益严格的安全与合规要求,亟需更加安全可靠的数据共享机制。
近年来,隐私计算、密文计算、联邦学习等技术不断成熟,为数据安全流通提供了可行路径。现有大数据共享系统普遍存在架构耦合、适配性差、安全与效率难以兼顾等问题。为此,本文结合曹妃甸职业技术学院数字化建设与实训平台实际工程需求,设计一套多源异构大数据安全共享与隐私计算系统,实现数据从接入、加密、计算、流通到审计的全流程安全管控,为大数据可信共享提供实用解决方案。
1 相关技术概述
1.1 大数据共享面临的主要问题
当前大数据共享主要存在以下问题:一是数据来源多样、结构不一,标准化处理难度较大;二是明文传输与集中存储容易造成敏感信息泄露;三是访问控制策略较为粗放,缺少细粒度与动态管控能力;四是加密与隐私计算开销较大,高并发场景性能不足;五是缺少全生命周期审计,难以满足合规监管要求。
1.2 关键技术支撑
学习通学习可以在不汇聚原始数据的前提下实现多方联合建模;差分隐私通过加入噪声实现统计结果可用、个体信息不可识别;密文计算支持在加密状态下直接完成数据处理;属性基访问控制能够根据用户、资源、环境等属性实现动态授权。本文将上述技术进行整合,构建兼顾安全、效率与合规性的大数据共享架构。
2 系统总体架构
本文设计的大数据安全共享与隐私计算系统采用五层解耦架构,各模块相互独立又协同工作,具备良好的跨平台适配能力,可在曹妃甸职业技术学院校园云、实训平台、教学管理系统等环境中稳定部署。
1.接入认证层:负责统一身份验证、多因素校验、动态令牌管理与权限策略映射。
2.数据安全层:完成数据分级分类、脱敏处理、加密封装、安全标签绑定与元数据管理。
3.隐私计算层:提供计算任务编排、算子调度、联邦学习、差分隐私与密文计算执行。
4.跨域流通层:实现密文传输、分片签名、链路加密、完整性校验与异构平台对接。
5.安全审计层:记录全流程操作日志,进行异常行为检测、合规检查与溯源审计。
五层架构共同形成闭环安全体系,保障数据共享全过程可信、可控、可追溯。
3 核心模块设计
3.1 统一接入与动态权限控制
系统采用属性基访问控制机制,根据用户角色、数据敏感级别、访问时间与环境信息进行细粒度授权。结合多因素认证与动态短周期令牌,提升认证安全性并降低调度延迟。权限遵循最小化原则,任务完成后自动吊销,支持策略热更新,适应曹职院多部门、多平台动态协作场景。
3.2 数据分级脱敏与加密封装
按照公开、内部、敏感、机密四个等级对数据进行分类标记。使用掩码、置换、泛化、扰动等方法完成脱敏处理,在保护隐私的同时保留数据可用性。采用对称加密提高封装效率,非对称加密保障密钥安全,哈希算法保证数据完整性。将密文、安全标签与索引进行绑定,形成可追踪的安全数据单元。
3.3 隐私计算调度引擎
系统基于算子依赖图实现任务编排,支持横向联邦学习、纵向联邦学习、密文计算、差分隐私四种工作模式,可根据安全等级与性能需求自动选择。调度模块支持节点负载均衡与异构计算加速,降低计算延迟,提升并发处理能力。计算过程全程隔离,不泄露明文信息。
3.4 跨域安全传输与校验
建立密文传输通道,对数据进行分段处理并生成哈希摘要,通过Merkle树保证完整性。采用链式签名、时间戳与序列号机制,防止数据包被篡改、重放或乱序。系统支持标准接口,能够兼容不同类型的存储与计算平台,实现跨域数据安全互通。
3.5 全链路安全审计
系统记录访问、处理、计算、传输、删除等全生命周期日志,实时监测异常访问、越权操作、批量导出等风险行为。自动生成合规审计报告,满足网络安全等级保护及相关法律法规要求,实现操作可记录、过程可监管、事件可溯源。
4 系统测试与分析
4.1 测试环境
本次测试以曹妃甸职业技术学院校园数据与实训教学平台为实际应用场景,平台包含学生信息、实训数据、教学资源、设备运行数据等多类敏感信息。原系统采用明文集中中转方式,存在权限管控弱、隐私风险高、合规能力不足等问题,对安全性与响应速度要求较高。
4.2 测试指标与结果
将本文系统与传统共享方案进行对比,结果如下表所示。
评价指标 | 传统方案 | 本文系统 | 改进效果/% |
平均接入延迟/ms | 138.45 | 72.31 | 47.77 |
数据处理吞吐量/条/s | 126.73 | 294.56 | 132.43 |
跨域读取响应时间/ms | 312.68 | 179.42 | 42.62 |
异常行为识别率/% | 81.36 | 96.47 | 18.57 |
隐私泄露事件占比/% | 6.84 | 0.87 | 87.28 |
合规审计覆盖率/% | 76.52 | 99.13 | 29.55 |
4.3 结果分析
测试结果表明,本文系统通过优化权限调度、并行加密处理、异构计算加速与跨域传输机制,有效降低系统延迟并提升吞吐量。借助加密与隐私计算技术,大幅降低隐私泄露风险。全链路审计机制提升了合规监管能力,使系统在安全、效率、合规之间达到较好平衡,满足曹妃甸职业技术学院实际部署与长期运行要求。
5 结束语
针对多源异构大数据共享中存在的隐私保护不足、权限管控薄弱、性能偏低、合规性差等问题,本文设计并实现了大数据安全共享与隐私计算系统。系统采用分层架构,完成统一认证、分级加密、隐私计算、跨域传输与安全审计功能。以曹妃甸职业技术学院实际场景为例开展测试,结果表明系统在性能与安全方面均优于传统方案,适用于职业院校、政务、医疗、工业等多类场景,具备工程应用与推广价值。
未来将进一步优化轻量级计算算子,提升边缘设备适配能力,加强国产化软硬件支持,并完善自动化合规与风险预警功能,提高系统在曹职院及同类院校复杂环境下的稳定性与实用性。
参考文献
[1] 中华人民共和国数据安全法[Z]. 2021.
[2] 杨一帆,王健宗,瞿晓阳.隐私计算技术与行业应用综述[J].大数据,2023,9(2):89-110.
[3] 阎茂轩.基于全同态加密的联邦学习模型的设计与实现[D].济南:济南大学,2024.
[4] 付婷婷.基于动态多项式的轻量级密钥管理方法设计[J].工业控制计算机,2025,38(5):87-89.
[5] 李晓东,周苏雅,赵炽野.一种基于同态加密的密文符号函数计算优化方法[J].信息安全研究,2025,11(2):100-106.
相关文献推荐
- 节点文献
- 读者推荐
- 相关基金文献
- 关联作者
- 相关视频
- 批量下載
