18143453325 在线咨询 在线咨询
18143453325 在线咨询
所在位置: 首页 > 营销资讯 > 行业动态 > 海量非结构化数据带来的挑战

海量非结构化数据带来的挑战

时间:2022-03-17 05:33:01 | 来源:行业动态

时间:2022-03-17 05:33:01 来源:行业动态

对业务部门来说,海量小文件的访问性能至关重要,直接关系到终端用户的体验,而一个股份制银行省分行的柜台系统、信贷系统每年会新增上亿个文件,大量小文件对文件存储是一大挑战,而很多银行已经在考虑如何实现文件大集中。

而随着VTM(远程虚拟银行服务系统)、双录系统的上线,存储容量需求高速增长,如保险公司银保的双录数据半年即可增加数百TB数据,存储是否能够提供高吞吐能力,来保障音视频文件的读写性能是重要的关注点。

大多数金融机构已经采用分布式数据库、大数据技术,来实现历史数据的在线统一存储和查询,而非结构化数据的存储规模可能会达到PB级甚至EB级,在这种情况下如何实现数据的统一存储和管理、历史数据的实时查询、未来的大数据分析,对存储高度智能化的管理能力提出了更高的要求。

当前IaaS层云化是大趋势,私有云实现了计算和存储资源的云化,分布式数据库实现了结构化数据的云化,云化后的资源可按需分配、弹性扩展。而非结构化数据存储的云化却缺乏很好的解决方案,尤其是随着音视频数据的加入,占用的存储空间越来越大,而这些数据的单位价值不高,如何降低单位存储成本也需重点考量。

为了解决银行、保险关键系统(如:柜台、信贷、承保、理赔等)的海量票据、证件、合同等文件数量庞大且不断累积导致的存储性能和扩展性瓶颈问题,金融行业非结构化数据存储的技术发展经历了四个阶段:



关键词:挑战,数据,结构

74
73
25
news

版权所有© 亿企邦 1997-2022 保留一切法律许可权利。

为了最佳展示效果,本站不支持IE9及以下版本的浏览器,建议您使用谷歌Chrome浏览器。 点击下载Chrome浏览器
关闭