加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

ETL、BI、MMP数据库

发布时间:2020-12-14 03:23:51 所属栏目:大数据 来源:网络整理
导读:一、ETL、BI、MPP数据 1、ETF工具: Informatica、Datastage、ODI,OWB、微软DTS、Beeload、Kettle、久其ETL、 trinity 、talend Teradata的ETL Automation、Business Objects公司的Data Integrator、Cognos公司的DecisionStream 2、BI: smart Bi,永洪,帆软,

一、ETL、BI、MPP数据
1、ETF工具:
Informatica、Datastage、ODI,OWB、微软DTS、Beeload、Kettle、久其ETL、 trinity 、talend
Teradata的ETL Automation、Business Objects公司的Data Integrator、Cognos公司的DecisionStream

2、BI: smart Bi,永洪,帆软,MSTR,Tableau,cognos,

[永洪科技、ETHINKBI、奥威智动、美云智数、广州泓维、广州菲奈特 BI.Office、用友华表、金峰软件 JReport、思达商智 Style Report、润乾、帆软、亿信华辰、赛思 BI、BlueQuery、如意报表、Smartbi、Crystal Report、FastReport、BO、Brio、Cognos、Microstrategy、Hyperion、Actuate、Arcplan、Discovery、Siebel、OBIEE、极光商智、Dundas、Qlikview、Tableau、Spotfire、海致 BDP、Ptmind、Data Deck、Quick BI、网易有数、马达数据等。]

3、MPP数据库:IBM netezza,Greenplum,HP : Vertica,Gbase,Teradata。

二、相关的数据公司

1、Informatica Powercenter的概念

Informatica(纳斯达克代码:INFA)是全球领先的独立企业数据集成软件提供商。世界各地的组织机构依赖Informatica为其重要业务提供及时、相关和可信的数据,从而赢得竞争优势。目前,全球众多知名企业依靠Informatica使用及管理其在本地的、云中的和社交网络上的信息资产,以实现他们的信息潜能,并推动卓越的业务目标。

InformaticaPowerCenter是Informatica公司开发的世界级的企业数据集成平台,也是业界领先的ETL工具。InformaticaPowerCenter使用户能够方便地从异构的已有系统和数据源中抽取数据,用来建立、部署、管理企业的数据仓库,从而帮助企业做出快速、正确的决策。此产品为满足企业级要求而设计,可以提供企业部门的数据和电子商务数据源之间的集成,如XML,网站日志,关系型数据,主机和遗留系统等数据源。此平台性能可以满足企业分析最严格的要求。

2、Teradata
Teradata天睿公司(纽交所代码:TDC),是美国前十大上市软件公司之一。经过逾30 年的发展,Teradata天睿公司已经成为全球最大的专注于大数据分析、数据仓库和整合营销管理解决方案的供应商。
数量庞大、增长迅猛、种类多样的数据已经成为企业在大数据时代发展不得不面临的现实境况。这是挑战,也是机遇。对此,Teradata天睿公司基于客户需求,提供领先、全面、有效的解决方案,帮助企业获取商业洞察力,并且将之转化为行动力,创造商业价值。
Teradata天睿公司在全球拥有近两万名员工,在美洲集团,和国际集团包含欧洲、中东和非洲(EMEA)、大中华区、日本地区、亚太区,都设有办公室。其中,大中华区是Teradata天睿公司业务增长的重要市场。Teradata天睿公司大中华区的业务增长速度已经超过其全球业务的平均增速。伴随业务的拓展,目前,Teradata天睿公司大中华区设有8个分支机构,逾1200名员工,涵盖市场、研发、技术和解决方案推广、销售、咨询服务、售后技术支持,及在大连的全球咨询中心等业务。
目前Teradata天睿公司大中华区已有超过十多个行业的客户,包含政府与公共服务、通信行业、银行、保险、证券、航空、地铁、交通运输、物流、快递行业、制造行业、汽车、零售、电子商务、互联网、电力能源等等。同时,积极与当地的行业合作伙伴、高校等进行项目合作及人才培育。由于大中华区的卓越表现,Teradata总部也持续加强对大中华区的专注和投入,整个大中华区的业务获得天睿公司全球总部前所未有的支持。

产品范围包括:Teradata 数据库、Teradata数据仓库软件、企业数据仓库、动态企业数据仓库、数据仓库专用平台、Teradata Aster大数据探索解决方案、Aprimo整合营销解决方案等。
3、Cloudera

由来自Facebook、谷歌和雅虎的前工程师杰夫·哈默巴切(Jeff Hammerbacher)、克里斯托弗·比塞格利亚(Christophe Bisciglia)、埃姆·阿瓦达拉(Amr Awadallah)以及现任CEO、甲骨文前高管迈克·奥尔森(Mike Olson)在2008年创建。
Cloudera出售Hadoop开源软件的发行版,用于存储和处理大量不同种类的数据。该公司的竞争对手Hortonworks已于2014年上市。另外一家Hadoop竞争对手是MapR。围绕开源软件打造大型企业一直以来都面临挑战,正因如此,很多创业公司都希望能够成为下一个红帽,后者已于1999年上市。

  Cloudera还在招股书中把IBM、甲骨文、SAP和Teradata列为竞争对手,但亚马逊网络服务(AWS)和微软Azure等基础设施提供商也被其列为竞争对手。对Apache Software Foundation(ASF)的依赖被Cloudera列为风险因素。

  该公司最近推出了云计算服务,今后几年还将加大对IBM沃森和AWS等智能系统的营销关注。

  Cloudera创立于2008年,截至1月31日共有1470名员工和上千家客户。其投资者包括Accel Partners、Greylock Partners和英特尔。截至1月31日,英特尔持有22%的Cloudera股份。
4、Cognos
Cognos是世界上最大的业务智能软件制造商,它能够帮助用户提取公司数据,然后分析并汇总得出报告。Cognos有许多产品,但最为著名的还是它的PowerPlay联机分析处理(online analytical processing,OLAP)工具,以及Impromptu报告和查询语言工具、Axiant客户/服务器开发系统。在20世纪70年代晚期的midrange系统中,Cognos公司的PowerHouse 4GL(第四代语言)初次亮相。
Cognos提供与IBM DB2,Microsoft SQL Server和NCR Teradata的整合数据库软件。公司同样与企业资源计划(Enterprise Resource Planning,ERP)供应商有合作,如SAP、J.D. Edwards、 Oracle、 PeopleSoft和Baan。Cognos最近的发展方向是提供更多的基于互联网的软件版本,以及为无线设备提供解决方案。 [1]

Cognos展现的报表基于统一的元数据模型。统一的元数据模型为应用提供了统一、一致的视图。用户可以在浏览器中自定义报表,格式灵活,元素丰富,而且可以通过Query Studio进行及时的开放式查询。Cognos还具有独特的穿透钻取(Drill Through)、切片(slice)和切块(dice)、以及旋转(pivot)等功能,使分析人员、管理人员或执行人员能够从多角度对信息进行快速、一致、交互地存取,从而获得对数据的更深入了解,有效地将各种相关的信息关联起来,使用户在分析汇总数据的同时能够深入到自己感兴趣的细节数据中,以便更全面地了解情况,做出正确决策。
Cognos强大的报表制作和展示功能能够制作/展示任何形式的报表,其纯粹的Web界面使用方式又使得部署成本和管理成本降到最低。同时Cognos还可以同数据挖掘工具、统计分析工具配合使用,增强决策分析功能。
2007年11月美国波士顿当地时间本周一,IBM宣布将以50亿美元现金收购Cognos。故又称IBM Cognos。

5、tableau

据Tableau亚太区产品咨询高级总监TC Gan透露,为实现云服务本地化拓展,目前Tableau Software已和华为云以及华为FusionInsight大数据平台做了链接,已可以连接上华为的云服务。“我们不单单要汉化我们的产品,我们还要让整个产品更接地气。”因此,Tableau Software目前和其它中国互联网巨头也在谈类似合作。”

据叶松林介绍,Tableau的诞生之初是公司的两位斯坦福创始人为了帮助美国军方制作一款战地可视化电子沙盘。“当时他们发现市场上的东西都不能用。于是,他们就自己写一套代码出来,叫做VizQL。VizQL其实就是Tableau的DNA,VizQL做的就是读取数据,并快速把它变成一个图,这就是Tableau未出世之前的版本。”

“我们的目的就是要帮助每一个人看懂自己的数据。”叶松林告诉经济观察网,“Tableau要做的是你的数据的谷歌,你的数据的百度,以及你与你的数据的互动界面,这个就是我们的目标。”

叶松林表示,Tableau希望做到可视化和直觉性,在两个方面公司都会继续投入。

在纽交所上市的七年间,Tableau营收增长迅速,从2013年的2.3亿美元以每年2亿的速度维持增长,至2016年该公司营收已达8.3亿美元。其中,研发费用比重从原来的27%上升为37%,即营业每赚的3块钱中就有近1块钱投入研发。

“Tableau要对产品负责,我们在几乎每一个季度都有新功能出现。”叶松林表示。

目前,Tableau作为一款可视化软件,可分为桌面版、服务器版和公众版,即为Tableau Desktop、Tableau Server以及Tableau Public,分别针对不同的用户。

其中Tableau Desktop是一款PC桌面操作系统上(只支持windows系统)的数据可视化分析软件,分个人版和专业版(个人版只能导入excel,专业版可以导入各种数据库),用户可以根据自已的需求选择不同的版本,当然价格也不一样。

Tableau Server则是完全面向企业的商业智能应用平台,基于企业服务器和web网页,用户使用浏览器进行分析和操作,还可以将数据发布到Tableau Server与同事进行协作,实现了可视化的数据交互,其根据企业中用户数的多少或企业服务器cpu的数量来确定收费标准。

而Tableau Public是完全免费的,不过用户只能将自己运用Tableau Public制作的可视化作品发布到网络上即Tableau Public社区,而不能保存在本地,每个Tableau Public用户都可以查看和分享,而且Tableau Public所能支持的接入数据源的类型和大小都有所限制,所以Tableau Public更像是Tableau Desktop的功能阉割版和公共网络版,重在体验和分享。

Tableau的商业模式非常简单和清晰,就是“卖软件+后续软件维护收费”。Tableau的软件每年都会进行升级,而之前购买了Tableau软件的客户若想得到这些升级则需要额外付费(除了第一年的免费升级外)。

公司的毛利非常之高,2013-2016年来自授权的毛利率达到了98.5%以上,随着授权软件越来越多,维护服务费收入也在逐年提高。在2017年一季报中,来自后者的收入甚至已超过了授权带来的收入。

今年4月6日,该公司推出全新产品订阅模式。新定价模型显著降低了部署一流商业智能平台的初始费用,不但有利于客户充分利用该平台和产品更新,而且无需购买永久性软件许可证。

据叶松林介绍,“许多客户告诉我们,它们更愿意通过订阅模型购买软件,因为这样可以更轻松地使用所需产品、降低前期成本并提高灵活性。”目前,Tableau Desktop个人版每月为35美元,Tableau Desktop专业版为每月70美元,而Tableau Server版为每月35美元,Tableau Online为每月42美元。

据介绍,目前Tableau全球有57,000多个企业使用。而亚太地区现在已经有近1万个客户,而中国也在快速增长中。与包括中国东方航空(7.590,-0.08,-1.04%)、中国航信、拜耳、上海贝尔阿尔卡特、一号店和玛氏等领先的中国本土公司和国际公司建立了合作关系。

在拓展中国区业务时,Tableau也注意到,一个现象即公司的主要客户——企业和个人之间的区别变得模糊。跟东航和卡行天下的合作令叶松林印象深刻,因为与Tableau的合作都是从企业中一个员工开始的。

“如果你几年前问我这个问题,我会告诉你是企业。但是在这几年我发现企业和个人已经不像以前那样分得那么清楚了。比如这是公司用的,这是家里用的。” 叶松林表示,但从东航案例来看,“真的是从个人开始的,是一个个人行为,但是最后推广到整个企业。”

叶认为,“当个人觉得产品好的时候,是因为这个产品可以解决他的问题,他会把产品推荐给他的企业。以前很多时候是所谓的top-down,找到对的人,然后往下推,但是现在如果想发展好客户由下往上走也是一条途径。所以可以说它是两条路,而我们两边都在走,都没有停。我们做了大量的客户的工作。”

此外,为了培养用户习惯,完成公司潜在客户部署,Tableau还举办可视化比赛以及推行在校学生免费使用软件政策。“所有学生只要凭借学生证,在学校期间,Tableau会授权给他,让他免费使用去做分析。”

三、关于BI

SAP BO: SAP公司收购的一款BI工具,产品运作模式是结合SAP的ERP系统,所以整合其他数据库或系统并不占优势,属于重型BI,使用要求较高,升级困难。

Oracle BIEE:无功无过,在BI产品不具特色,同SAP一样,与Oracle的产品线紧密绑在一起。貌似国外厂商都是捆绑型卖整体方案。

Cognos:传统BI工具中最被广泛使用的,已被IBM收购。拥有强大的数据库平台、在数据管理、数据整合以及中间件领域专业功底深厚。偏操作型,手工建模,一旦需求变化需要 重新建模,学习要求较高。

MSTR:很低调的BI产品,多年来在BI市场中一直没站住脚,和excel有一定关系。二次开发环境好,但对服务器环境要求较高。

Qlikview:最大的竞争者是Tableau,同Tableau和国内众多BI一样,是属于新一代的轻量化BI产品,体现在建模、部署和使用上。只能运行在windows系统,C/S的产品架构。采用内存动态计算,数据量小时,速度很快;数据量大时,吃内存很厉害性能偏慢。

Tableau:自身定位是一款可视化工具,与Qlikview的定位差不多,可视化功能很强大,对计算机的硬件要求较高,部署较复杂。目前移动端只支持IOS系统。

? 国内

FineBI:帆软旗下的自助性BI产品,轻量化的BI工具,部署方便,走多维分析方向。后期采用jar包升级换代,维护方便,最具性价比。

亿信华辰:只支持数据库中取数,文件数据需导入服务器。发展时间不长,整体还比较粗糙,需要继续磨练和完善。

永洪BI: 敏捷BI软件,产品稳定性较高。利用sql处理数据,不支持程序接口,实施交由第三方外包。

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读