当前位置:论文写作 > 毕业论文范文 > 文章内容

大数据没有唯一的银弹

主题:大数据平台 下载地址:论文doc下载 原创作者:原创作者未知 评分:9.0分 更新时间: 2024-02-14

简介:关于对不知道怎么写数据平台论文范文课题研究的大学硕士、相关本科毕业论文数据平台论文开题报告范文和文献综述及职称论文的作为参考文献资料下载。

数据平台论文范文

大数据平台论文

目录

  1. 大数据平台:2015中国数据库技术大会 专访微软数据平台解决方案顾问王琦

■ 本报记者 霍娜

“大数据没有唯一的银弹,没有单一的大数据产品能够满足互联网时代的传统企业的大数据需求.”7月18日,Pivotal大中国区总经理刘伟光在接受记者采访时如是说.Pivotal公司致力于提供企业级云平台和大数据平台,由EMC、VMware、GE在2013年4月共同投资成立.

第三平台

企业为了提高业务弹性,快速响应业务需求,同时更灵活、高效地管理IT系统,降低成本,需要一个高度自动化的基础平台,对下打通资源池、集群、虚机等管理,对上嫁接各种中间件、数据库、开发工具,同时为上层的应用软件提供支持.这正是Pivotal的努力方向——第三平台.所谓“第三平台”是指建立在移动设备、云服务、社交网络和大数据分析的基础之上,实现云计算、大数据、社交移动化的统一管理的平台.第三平台已经成为EMC公司的发展战略,而Pivotal在EMC第三平台战略中扮演着重要的角色.

“第三平台说起来陌生,但是其实大家每天都在使用第三平台.微信就是第三平台一个重要的典范,它集成了客户群、数据、很多新开发的应用,从最早只有通话功能,到现在的商店、卖彩票、钱包等多种应用叠加,在一个整体架构下微信不断增加新应用,并且实现数据共享和管理,是互联网级别的第三平台的典范.企业应用中也有很多第三平台.很多传统企业会把原有的业务从线下搬到线上,很多应用不再只供企业内部使用,而是要将数据、应用开放,使更多外部客户和内部员工参与这个平台数据的交互.”刘伟光进一步向记者解释说.

“建立一个在云上的基于IaaS和PaaS的数据解决方案来简化用户的应用程序开发、维护和管理的平台是未来Pivotal的使命.”刘伟光介绍,Pivotal One是Pivotal引领下一代计算的主要平台产品,包含三条重要产品线——主要由Greenplum数据库、Hadoop和HAWQ(利用SQL语句实现Hadoop操作)组成的大数据产品线,由GemFire、SQLFire产品组合的内存数据库产品线,以及以Clound Foundry为主,支持各种应用开发平台和中间件的PaaS平台.

Clound Foundry承上启下,对下可进行所有资源的管理,能够跟硬件资源、公有云平台、虚拟化、OpenStack、VMware进行非常有效的集成,它提供了很多对外的接口,如数据库服务、Hadoop、快速数据处理、内存计算、数据分析等.该PaaS平台同时可以支持各种应用开发平台、中间件,如Spring、MySQL、消费中间件等,提供开发技术的接口,让基于这些平台开发的软件,可以很容易实现信息和资源的共享,打通各种业务应用.它也可以支持多种数据支撑平台,如GreenPlum、Hadoop、SQL Fire、HAWQ和GemFire等,这些开发工具或者平台,或者提供分布式数据库支持,或者提供内存集群技术,可以有效集成各种数据管理和分析工具及其应用.

数据需求多种多样

据悉,12306是Pivotal在国内的重要客户.其GemFire内存集群技术帮助12306将数据访问速度大幅提升.借助x86技术,Pivotal将订票和查询计算任务平均分配到每一台x86服务器,替代了原有几台大型Unix 服务器,通过并行处理技术应对12306网站的业务压力,从而提升了订票的满意度.

“过去大多是互联网公司在谈大数据,但现在不仅是银行、电信,还有很多制造企业、科研机构、论文范文系统都在谈大数据.数据处理需求多种多样,可能是海量数据的存储、查询,也可能需要的是实时的查询、计算,或者是高并发的计算处理,还可能是大量的数据分析,不同企业在不同阶段对应不同业务都有不同的数据处理需求.没有一种技术可以涵盖大数据真正需求的所有数据.”刘伟光告诉记者.

Hadoop可以实现海量扩展和基础的查询,但却实现不了企业级高性能的分析和查询,这是Hadoop的局限性.MPP(大规模并行处理)数据库有很好的扩展性,但在OLTP(联机事务处理)上有一定劣势,也没有Hadoop成本上的优势.内存计算方式很快也有很多好处,但是它只适合一部分高性能并发的热点数据.NoSQL数据、非结构化数据处理也都有各自的优劣势.没有一种技术可以涵盖大数据真正需求的所有数据,只有把这些数据集合在一起才是真正的大数据.

为了满足客户不同的数据处理需求,Pivotal今年4月推出了Pivotal大数据套件(Pivotal Big Data Suite).该套件基于年度*方式,提供软件、支持和维护,包括GemFire、GemFire XD、Greenplum数据库、HAWQ、和Pivotal HD,灵活地为客户提供一套大数据/快数据产品.

刘伟光介绍,大数据套件的技术架构涵盖了数据处理领域所有的需求,包括关系型数据库、NoSQL、流计算、SQL on Hadoop、OLAP on Hadoop、OLTP on Hadoop、cache缓存、In-Memory DB、 In-Memory DataGrid、非关系型数据库等,并且这些模块之间的数据互联互通,自由流动,可以任意搭配来构建灵活的企业级第三平台数据架构.对于底层用户来说,互操作性和标准SQL的支持使得应用开发和维护人员更容易上手,学习曲线降低;使得项目和应用投产的周期缩短,风险降低.对于上层用户来说,大数据套件完善友好的界面和丰富的操作接口可以使得没有任何经验的数据分析和使用人员也能很快地进入状态,专注于业务和逻辑的分析应用.

流动可变的许可证模式

纷繁复杂,企业需要单独采购,用量固定,无法灵活组装整个数据架构.而Pivotal大数据套件采用流动可变的许可证模式,依年限按内核数量定价收费.“比如某客户当下有并行数据处理需求,但一年后又会有部分内存数据处理需求,那他就可以选择购买80个内核的套件许可证,今年全部用于Greenplum产品,而一年之后将其中20个用于GemFire,60个保留给Greenplum.”

大数据平台:2015中国数据库技术大会 专访微软数据平台解决方案顾问王琦

对于该套件的优势,刘伟光总结道:第一,统一定价模型,整合大数据产品,简化企业的选择和流程;第二,流动许可证模型,保证客户的大数据技术投资与灵活的部署,从容应对未知的大数据挑战;第三,套件里的每一款产品都是领先的技术,拥有众多成熟的国内外客户案例,遍布各行各业,同时这些产品之间还能够无缝地数据集成,自由流动.

应用的类型

业界对应的产品

定价模式

In-Memory Data Grid with SQL Layer

当今大数据处理产品领域的现状是纷繁复杂且模式固定,企业需要单独采购,用量固定,无法灵活组装整个数据架构

链接 大数据观点

从大数据最新的趋势来看,Pivotal认为:

1.大数据没有唯一的银弹.没有单一的大数据产品能够满足互联网时代的传统企业的大数据需求,只有通过组合单独的产品,形成新型的完整的大数据处理架构,才有可能应对大数据带来的挑战.

2. 云与大数据将会结合得越来越紧密.单独的大数据环境已逐渐显出不足之处,如缺乏足够的弹性、无法支撑快速的迭论文范文发、大规模集群的管理维护成本高、功能变得越来越复杂、需要的技能越来越多、要求越来越高.而这些正是云架构擅长的领域,大数据与PaaS的结合是未来大数据升华的唯一途径.

3.Pivotal认同由APP+Data+Analytic构成的完整闭环才能够全面应对互联网化带来的挑战,发挥出传统企业的数据价值,缺一不可.——Pivotal大中国区总经理刘伟光

总结:本文是一篇关于数据平台论文范文,可作为相关选题参考,和写作参考文献。

大数据平台引用文献:

[1] 大数据平台论文范文 大数据平台类论文范文例文2000字
[2] 大数据平台论文范文 关于大数据平台方面论文怎么写10000字
[3] 大数据和平台运营开题报告范文 大数据和平台运营类参考文献格式范文8000字
《大数据没有唯一的银弹》word下载【免费】
大数据平台相关论文范文资料