评判dW专用设备

1 view
Skip to first unread message

Qing

unread,
Apr 10, 2008, 1:56:26 AM4/10/08
to tt...@googlegroups.com
关于数据仓库专用设备(datawarehouse appliance),以前讲过一点。
 
数据仓库发展这么多年了,这些专用设备好像还没有落入普通企业家,是一个很小的市场。不过我总是觉得未来的这块市场会增大,为什么呢?因为现在数据量确实是在太大,用oracle、db2这样的通用数据库来作数据仓库实在是有点跟不上。不是否认这些厂商的技术,但因为技术架构的问题,终于还是要术业有专攻。
 
 
其中简单介绍了这个领域的主要产品的性能,包括Teradata、Netezza、DATAlegro、Vertica、Dataupia、ParAccel、HP Neoview、Greenplum、Inforbright、Kognitio KX2、Sybase IQ,以及Oracle、MS SQLServer等等。从处理的数据量和使用性两个角度来对比,数据量区分高端低端,标准很奇怪——高端,处理的数据量至少是比Oracle大的。低端,比Oracle能处理的少。从使用性来看,也区分高低端,高者是企业级数据仓库,低者是数据集市。详细的内容可以参见原文,相信这是一份比较全的数据仓库专用设备产品列表,作者在这个领域算是个长期观察家。
 
大家还可以注意到,这个列表里面没有开源产品。但也许未来几年会有,这位作者也一直在关注分布式计算的技术,只是,前些天谈到了,现在确实没有基于这种技术的开源数据仓库产品,只有facebook弄出一个自家生产自己用的"数据仓库"。你说他们会拿出来开源吗?未必不可能,即便他不肯,肯定也有好事者去弄这个。前些日子一位朋友说,对这个很感兴趣,能不能组织个开源项目,我们干他一票。对此,就我所知,我们这里没这种开源的习惯,因此回答说,没有兴趣。
 
但至少可以感到,这个领域确实有意思,有很多很多的处女,地。确实也是,我们中国在这类通用产品上的研究真的很少,做这件事情肯定能够让人兴奋。如果哪位闲的无聊,可以搞一个这样的项目,或者即便是将国外一些尚不成型的开源项目移植到本土,在我们国内搞个团队,也是好的。如果这种分布式数据仓库成了,中国待开发的BI市场大得很,这是眼前的。而长远的,每个企业产生的数据量越来越大,互联网、3G、rfid...要准备参与未来市场的竞争,得练练基本功。
 
谁想搞,我决定不光用我的精神支持,还要用肉体。

Eagle

unread,
Apr 10, 2008, 5:23:57 AM4/10/08
to tt...@googlegroups.com
听过一次HP NeoView的介绍,感觉这个理念很有成长力。
当时感觉HP的销售想告诉我们DW不再高深,就像买家电,o(∩_∩)o...


From: tt...@googlegroups.com [mailto:tt...@googlegroups.com] On Behalf Of Qing
Sent: 2008年4月10日 13:56
To: tt...@googlegroups.com
Subject: 评判dW专用设备

关于数据仓库专用设备(datawarehouse appliance),以前讲过一点。
 
数据仓库发展这么多年了,这些专用设备好像还没有落入普通企业家,是一个很小的市场。不过我总是觉得未来的这块市场会增大,为什么呢?因为现在数据量确实是在太大,用oracle、db2这样的通用数据库来作数据仓库实在是有点跟不上。不是否认这些厂商的技术,但因为技术架构的问题,终于还是要术业有专攻。
 
 
其中简单介绍了这个领域的主要产品的性能,包括Teradata、Netezza、DATAlegro、Vertica、Dataupia、ParAccel、HP Neoview、Greenplum、Inforbright、Kognitio KX2、Sybase IQ,以及Oracle、MS SQLServer等等。从处理的数据量和使用性两个角度来对比,数据量区分高端低端,标准很奇怪----高端,处理的数据量至少是比Oracle大的。低端,比Oracle能处理的少。从使用性来看,也区分高低端,高者是企业级数据仓库,低者是数据集市。详细的内容可以参见原文,相信这是一份比较全的数据仓库专用设备产品列表,作者在这个领域算是个长期观察家。

innovate511

unread,
Apr 10, 2008, 7:31:00 AM4/10/08
to ttnn BI 观点
还是难,既然数据量不小,需求也不会小,数据仓库本身就是一个概念,光是产品又能做什么,带来什么价值,这就是从业者才能和最终用户一起去搞起来,而产
品也只是基础而已,概念和方法论对于外行,依旧很高深。

raullew

unread,
Apr 10, 2008, 8:27:31 AM4/10/08
to ttnn BI 观点
这些咚咚是大型IT企业因为商业软件满足不了自身需求,开发出来给自家人内部用的。。。
> > 当时感觉HP的销售想告诉我们DW不再高深,就像买家电,o(∩_∩)o...- Hide quoted text -
>
> - Show quoted text -

zpdxi...@gmail.com

unread,
Apr 10, 2008, 8:48:42 AM4/10/08
to tt...@googlegroups.com
 
真正牛的组织都会自己开发或者用现成开源的项目进行改进,不会把自己绑到别人商业产品上, 一旦被绑定了就危险了。
联通不就是被ORACLE搞了么  , 要升级数据库,  结果ORACLE说先把前几年欠的服务费拿来!   6000万啊!
简直就是抢钱啊。
 
反过来从厂商角度来讲,要推方案就要推整体的,最好就是一整套都推:操作系统 + 存储库 + 应用软件   
最好还把硬件都绑上,这样才能把客户牢牢的绑在自己的手里,这个做起来有些难度,当然可以尝试先在移动设备
上做些这种事情,毕竟规模相对要小一些,整体的推,整体的绑定。
 
当然,现在国外超一流的软件公司都是靠推标准来赚钱的,如果我们能有自己的公认标准,哈哈哈哈,哎... ...  有点做梦了。
 
 
2008-04-10


发件人: raullew
发送时间: 2008-04-10  20:27:48
收件人: ttnn BI 观点
抄送:
主题: Re: 评判dW专用设备

zpdxi...@gmail.com

unread,
Apr 10, 2008, 8:48:42 AM4/10/08
to tt...@googlegroups.com
 
真正牛的组织都会自己开发或者用现成开源的项目进行改进,不会把自己绑到别人商业产品上, 一旦被绑定了就危险了。
联通不就是被ORACLE搞了么  , 要升级数据库,  结果ORACLE说先把前几年欠的服务费拿来!   6000万啊!
简直就是抢钱啊。
 
反过来从厂商角度来讲,要推方案就要推整体的,最好就是一整套都推:操作系统 + 存储库 + 应用软件   
最好还把硬件都绑上,这样才能把客户牢牢的绑在自己的手里,这个做起来有些难度,当然可以尝试先在移动设备
上做些这种事情,毕竟规模相对要小一些,整体的推,整体的绑定。
 
当然,现在国外超一流的软件公司都是靠推标准来赚钱的,如果我们能有自己的公认标准,哈哈哈哈,哎... ...  有点做梦了。
 
 
2008-04-10


发件人: raullew
发送时间: 2008-04-10  20:27:48
收件人: ttnn BI 观点
抄送:
主题: Re: 评判dW专用设备

innovate511

unread,
Apr 10, 2008, 10:13:01 AM4/10/08
to ttnn BI 观点
但是任何普通企业(非几大IT厂商)都得用别人的基础平台和存储产品,这是没办法的事情,只是商业签合同的时候多注意下陷阱,商业合作上多注意少被垄
断。

On 4月10日, 下午8时48分, "zpdxiogx...@gmail.com" <zpdxiogx...@gmail.com>
wrote:
Reply all
Reply to author
Forward
0 new messages