元数据管理工具

41 views
Skip to first unread message

小水牛

unread,
Dec 24, 2008, 12:44:49 AM12/24/08
to ttnn BI 观点
各位在项目上如何管理整个数据仓库项目周期的元数据?有什么通用的工具吗,或者介绍管理的方案。感觉数据仓库项目上对元数据管理都不是很重视,除了
ETL工具,OLAP工具自身的元数据管理之外,很少有吧整个项目的元数据管理起来,希望可以讨论这方面的问题。

innovate511

unread,
Dec 28, 2008, 7:27:15 AM12/28/08
to ttnn BI 观点
今年参加过IBM的解决方案介绍会,WebSphere(R) Business Glossary 和IBM Information Server 的
介绍,从功能上看,MS可以集成业务元数据、技术元数据和其他元数据,不过看样子还有待成熟过程。

另外一方面,ETL的领导者之一的Informatica也没闲着,据说09年Business Glossary 也将发布,可以集成ETL后台元数
据和前端业务元数据。

所以从技术方面,09年将迎来一个相对成熟的阶段,就看如何集成起来,用好、管理好了。

从应用角度来看,几乎每个项目都用到过视图及物化视图,要集成管理这些元数据,恐怕只有两个方案,一是把这些视图或物化视图的逻辑转为表,然后ETL工
具实现,其二手工将这些视图的元数据导入元数据库,相信第二个方法更实在点,以后工具可能会支持批量、自动管理视图的元数据。

Solo Zhu

unread,
Dec 28, 2008, 9:22:40 PM12/28/08
to ttnn BI 观点
其实我也一直在思考元数据的解决办法
首先思考的就是元数据的目的,以及管理同应用的结合,这个目前都很难有工具做得比较完美,通常都是半自动加手工的方式

> > ETL工具,OLAP工具自身的元数据管理之外,很少有吧整个项目的元数据管理起来,希望可以讨论这方面的问题。- 隐藏被引用文字 -
>
> - 显示引用的文字 -

hawk

unread,
Dec 29, 2008, 9:41:20 AM12/29/08
to tt...@googlegroups.com
请关注石竹元数据管理MetaOne,或许部分的解决你的问题。有意进一步深入了解,可联系我。

pear

unread,
Dec 29, 2008, 8:19:00 AM12/29/08
to ttnn BI 观点
我们也在尝试使用ibm 的infosphere产品来管理元数据,目前还在功能摸索中。
有点进步,可以进行数据的血缘分析和影响分析。
但是如何和日常的工作有机结合,还没有头绪。

zpdxiogxiog

unread,
Dec 29, 2008, 9:52:22 PM12/29/08
to ttnn BI 观点
我看过某省移动实施的元数据管理项目,也和他们的项目经理聊过一些对目前元数据管理项目建设的一些想法,
总结起来就是目前我们往往为了元数据而去搞元数据,无形中已经把元数据的地位给降低了,要让元数据不仅仅作为数据的身份证,还要延伸开来成为数据的轨迹,进而形成一张大网把展现,抽取,建模等等数据操作过程网起来,不单单是我们能通过元数据监控到这些过程,更重要的是这些过程反过来还能利用到元数据,这个东西姑且就叫做元数据网络吧。
 
当然这个事情要进行有赖于统一标准的建立和完善,以前有的标准是MDC(Meta Data Coalition)的开放信息模型OIM(Open Information Model)和OMG的公共仓库模型CWM(Common Warehouse Model),后来MDC和OMG合并了,更加为元数据管理铺平了道路,相信让用户真正体会到元数据的好处的一天最终会来到。
 
2008-12-30

zpdxiogxiog

发件人: pear
发送时间: 2008-12-30  09:25:20
收件人: ttnn BI 观点
抄送:
主题: Re: 元数据管理工具

叶鹏

unread,
Dec 29, 2008, 10:46:29 PM12/29/08
to tt...@googlegroups.com

感觉现在元数据的管理难点在与各项元数据的收集,有大量非结构化的元数据信息,基本上都需要手工收集和整理,维护起来对执行力的要求非常高。至于什么血统分析、影响分析那都是水到渠成的事情。

 

发件人: tt...@googlegroups.com [mailto:tt...@googlegroups.com] 代表 zpdxiogxiog
发送时间: 20081230 10:52
收件人: ttnn; ttnn BI 观点
主题: Re: 元数据管理工具

Solo Zhu

unread,
Dec 30, 2008, 12:17:29 AM12/30/08
to ttnn BI 观点
其实归属到最后,元数据还是需要使用的

如果工具用得不得心应手的话,还是不要用好了,就用简单的数据表和文档来代替
然后开发一个可以自动检查元数据的工具,将检查结果定时发送给相关的人员


On 12月30日, 上午11时46分, 叶鹏 <yepeng...@163.com> wrote:
> 感觉现在元数据的管理难点在与各项元数据的收集,有大量非结构化的元数据信息,基
> 本上都需要手工收集和整理,维护起来对执行力的要求非常高。至于什么血统分析、影


> 响分析那都是水到渠成的事情。
>
> 发件人: tt...@googlegroups.com [mailto:tt...@googlegroups.com] 代表
> zpdxiogxiog
> 发送时间: 2008年12月30日 10:52
> 收件人: ttnn; ttnn BI 观点
> 主题: Re: 元数据管理工具
>
> 我看过某省移动实施的元数据管理项目,也和他们的项目经理聊过一些对目前元数据管
> 理项目建设的一些想法,
>
> 总结起来就是目前我们往往为了元数据而去搞元数据,无形中已经把元数据的地位给降
> 低了,要让元数据不仅仅作为数据的身份证,还要延伸开来成为数据的轨迹,进而形成
> 一张大网把展现,抽取,建模等等数据操作过程网起来,不单单是我们能通过元数据监
> 控到这些过程,更重要的是这些过程反过来还能利用到元数据,这个东西姑且就叫做元
> 数据网络吧。
>
> 当然这个事情要进行有赖于统一标准的建立和完善,以前有的标准是MDC(Meta Data
> Coalition)的开放信息模型OIM(Open Information Model)和OMG的公共仓库模型CWM
> (Common Warehouse Model),后来MDC和OMG合并了,更加为元数据管理铺平了道路,
> 相信让用户真正体会到元数据的好处的一天最终会来到。
>
> 2008-12-30
>
> _____
>

> zpdxiogxiog
>
> _____

小水牛

unread,
Dec 30, 2008, 8:36:18 PM12/30/08
to ttnn BI 观点
是啊,元数据的收集,统一,规范还是为了使用。但是在实际中,业务人员并不关心元数据(可能更关注一些业务元数据,但元数据更多的是一些技术元数据),
只有IT部门更感兴趣。

元数据在实际中到底有什么用,怎么用?各位能否结合实际说说,来看看元数据管理到底有哪些价值,为什么人人都说重要的东西在现实中的使用很差呢,某种程
度上也说明,其实重要是重要,可能并不迫切吧。

> > 但是如何和日常的工作有机结合,还没有头绪。- Hide quoted text -
>
> - Show quoted text -

叶鹏

unread,
Jan 3, 2009, 9:43:44 PM1/3/09
to tt...@googlegroups.com
关键就在这一点,如果可以有一套“简单的数据表和文档”,那么元数据管理系统就是
那个“自动检查元数据的工具”大街上到处都有卖,何必自己开发呢。
可是现在的问题是没有那么一套“简单的数据表和文档”,应用元数据管理系统就是无
本之木,无源之水。

> -----邮件原件-----
> 发件人: tt...@googlegroups.com [mailto:tt...@googlegroups.com] 代表 Solo
> Zhu
> 发送时间: 2008年12月30日 13:17
> 收件人: ttnn BI 观点
> 主题: Re: 答复: 元数据管理工具
>
> 其实归属到最后,元数据还是需要使用的
>
> 如果工具用得不得心应手的话,还是不要用好了,就用简单的数据表和文
> 档来代替
> 然后开发一个可以自动检查元数据的工具,将检查结果定时发送给相关的
> 人员

叶鹏

unread,
Jan 3, 2009, 9:49:12 PM1/3/09
to tt...@googlegroups.com
现在元数据管理可以完成的功能,大多被分散在系统的各个角落,比如变更影响分析可
以找个程序员来翻程序,还不用担心元数据的数据质量问题,再比如说用元数据管理系
统搞系统监控,有更专业的系统健康检查工具。………………,元数据管理就和“啤酒
+尿布”一样。

> -----邮件原件-----
> 发件人: tt...@googlegroups.com [mailto:tt...@googlegroups.com] 代表 Solo
> Zhu
> 发送时间: 2008年12月30日 13:17
> 收件人: ttnn BI 观点
> 主题: Re: 答复: 元数据管理工具
>
> 其实归属到最后,元数据还是需要使用的
>
> 如果工具用得不得心应手的话,还是不要用好了,就用简单的数据表和文
> 档来代替
> 然后开发一个可以自动检查元数据的工具,将检查结果定时发送给相关的
> 人员
>
>
> On 12月30日, 上午11时46分, 叶鹏 <yepeng...@163.com> wrote:
> > 感觉现在元数据的管理难点在与各项元数据的收集,有大量非结构化的
> 元数据信息,基
> > 本上都需要手工收集和整理,维护起来对执行力的要求非常高。至于什
> 么血统分析、影
> > 响分析那都是水到渠成的事情。
> >
> > 发件人: tt...@googlegroups.com [mailto:tt...@googlegroups.com] 代表
> > zpdxiogxiog
> > 发送时间: 2008年12月30日 10:52
> > 收件人: ttnn; ttnn BI 观点
> > 主题: Re: 元数据管理工具
> >
> > 我看过某省移动实施的元数据管理项目,也和他们的项目经理聊过一些
> 对目前元数据管
> > 理项目建设的一些想法,
> >
> > 总结起来就是目前我们往往为了元数据而去搞元数据,无形中已经把元
> 数据的地位给降
> > 低了,要让元数据不仅仅作为数据的身份证,还要延伸开来成为数据的
> 轨迹,进而形成
> > 一张大网把展现,抽取,建模等等数据操作过程网起来,不单单是我们
> 能通过元数据监
> > 控到这些过程,更重要的是这些过程反过来还能利用到元数据,这个东
> 西姑且就叫做元
> > 数据网络吧。
> >
> > 当然这个事情要进行有赖于统一标准的建立和完善,以前有的标准是
> MDC(Meta Data
> > Coalition)的开放信息模型OIM(Open Information Model)和OMG的公
> 共仓库模型CWM
> > (Common Warehouse Model),后来MDC和OMG合并了,更加为元数
> 据管理铺平了道路,
> > 相信让用户真正体会到元数据的好处的一天最终会来到。
> >
> > 2008-12-30
> >
> > _____
> >
> > zpdxiogxiog
> >
> > _____
> >
> > 发件人: pear
> >
> > 发送时间: 2008-12-30 09:25:20
> >
> > 收件人: ttnn BI 观点
> >
> > 抄送:
> >
> > 主题: Re: 元数据管理工具
> >
Reply all
Reply to author
Forward
0 new messages