数据湖 第1部分:磁光电混合媒体分布式存储系统 (T/AI 126-2023) 团体名称为中关村视听产业技术创新联盟
主要起草人:杨帅、魏占慧、王凌、赵阳、倪志云、李军浩、牛川、朱涛、陈颖、宋君、刘衡治、黄铁军、赵海英、崔晓冉、李艳梅、梁凡
起草单位:北京易华录信息技术股份有限公司、文安智能科技有限公司、博雅鸿图视频技术有限公司、华为技术有限公司、北京百度网讯科技有限公司、北京大学、中山大学
适用范围:本文件作用于数据入湖阶段,为数据湖中作为存储底座的分布式存储系统提供标准规范。本文件给出了磁光电混合媒体分布式存储系统的技术架构,规定了功能要求、性能要求、信息安全要求和建设环境要求,为数据湖内数据的接入、存储等,提供技术参考。本文件适用于磁光电混合媒体分布式存储的设计、制造和应用。
内容简要 数据湖中汇聚了政府/企业/个人海量数据,在数据治理及资产管理中,存在常见数据标准不统一、数据质量不高、数据安全等问题;同时面临异构系统复杂环境数据接入、全存储介质及全生命周期数…