大数据采集治理平台基于大数据分析能力平台,使用Hive、HDFS分布式文件系统和HBASE数据、MySQL存储数据,构建智慧博物馆数据仓库,并利用spark和Mapreduce完成数据计算形成新的数据。
本次软件发布公告内容如下:
1、产品名称:欧科大数据治理平台软件
2、发布时间:2019年3月5日
3、版本号:V1.0
4、主要功能:
①元数据交换:允许从当前的组件导入已存在的元数据或模型到Atlas中,也允许导出元数据到下游系统中;
②数据血统:Atlas在平台层次上,针对Hadoop组件抓取数据血统信息,并根据数据血统间的关系构建数据的生命周期;
③数据生命周期可视化:通过Web服务将数据生命周期以可视化的方式展现给客户;
④快速数据建模:Atlas内置的类型系统允许通过继承已有类型的方式来自定义元数据结构,以满足新的商业场景的需求;
⑤丰富的API:提供了目前比较流行且灵活的方式,能够对Atlas服务、HDP(Horton-work Data Platform)组件、UI及外部组件进行访问。
5、技术特点:
①数据分类;
②集中审计;
③搜索与数据血统;
④安全与策略引擎。
6、著作权归属:广州欧科信息技术股份有限公司。