您现在的位置是:首页 > 数字化转型 >

NEC发布大数据处理引擎Inforame DataBooster V5.1中文版

2014-09-01 16:28:59作者:来源:

摘要2014年8月28日, NEC(中国)有限公司正式发布“内存型高速数据处理引擎”——Inforame DataBooster V5 1中文版。...

2014年8月28日, NEC(中国)有限公司正式发布“内存型高速数据处理引擎”——Inforame DataBooster V5.1中文版。

  信息化高速发展的今天,随之产生的是海量数据。针对如此庞大的数据,快速有效地做出各种分析是目前企业面临的迫切需求。随着数据量的增加,一般情况下,选择增强CPU性能固然能缩短处理时间,但是缩短I/O时间才是更加有效的方法。

  为此,业界普遍采用的一种新方法是:不在传统硬盘中保持数据,而是保持在内存里。特别是从2010年开始,单台服务器搭载的内存量急剧增加,成本也变得更加便宜,这使得仅靠内存来保持数据更便于推广,大幅缩短了I/O处理时间。今后服务器搭载的内存会越来越多,在内存中处理数据也将会受到愈来愈多的关注。

  基于性能和成本的考虑,NEC提供了新型高速内存型数据处理技术产品 InfoFrameDataBooster的解决方案,它可以帮助企业用户解决以下问题:

  ・夜间批处理未能及时处理结束,影响了正常工作

  ・无法对堆积的大量历史数据进行分析

  ・数据量太大而无法做成数据集市从而放弃了理想的分析模式

  ・即使进行了调优,数据库的性能改善无法达到预期的效果

  ・数据统计花费了大量时间,无法立刻获得想要的数据

  NEC InfoFrame DataBooster系列属于内存型高速数据处理引擎,拥有列存储和内存型数据处理技术,能够高速处理海量数据,相比传统的RDB,数据处理速度可提高40倍,实现通过数据库优化无法达到的处理速度。下面从两方面来看看InforameDataBooster的技术特点。

  第一是列存储和内存处理技术。Inforame DataBooster采用了列存储且内存最优化的处理技术,通过特有的数据构造方式,减少了内存使用量。同时把传统RDB的行记录的逐条处理转变成列单位的批量处理,提高了处理速度。

  第二是多样化接口。首先,Inforame DataBooster提供标准的C语言和Java语言的API接口以及SQL接口,通过C语言或者Java语言,把排序、统计、查询、结合、计算等操作写成批处理程序,实现自动化处理。其次,自动生成Java代码功能,也大大提高了生产性,降低了重复编码带来的风险。再次,SQL接口的开发使用了PostgreSQL,支持大部分SELECT、INSERT、UPDATE、DELETE的SQL操作,除此之外,还可以执行REPARE、EXECUTE、EXPLAIN等操作。

  最后,简单易用的图形化操作工具、检索、统计、结合、批量更新等功能可一边确认结果一边处理数据,最后导出CSV形式的处理结果。

  NEC拥有完整的大数据产品线,可结合客户具体需求提供实现大数据处理的多样化技术,和客户共同确定利用数据的目的及分析方法,为客户制订个性化的大数据解决方案。NEC在进军大数据市场的路上脚踏实地,未来会不断为市场带来更多产品和解决方案。


(本文不涉密)
责任编辑:

站点信息

  • 运营主体:中国信息化周报
  • 商务合作:赵瑞华 010-88559646
  • 微信公众号:扫描二维码,关注我们