开源BI系统简述(转载)
文章来源:JavaEye 本文介绍了ETL工具、报表工具、OLAP工具的各项开源资源情况,有一定的普及和参考价值。[@more@]这些众多的BI项目从规模和对BI系统支撑的完善程度上来说,大体可以分为Framework、Stand-alone Tools和BI Suit三种类型。 Framework 开源框架,这是在商业BI系统中所没有的。我们可以使用它们来构建自己的BI工具,或者增强和扩展我们的BI解决方案。 Stand-alone Tools 独立的BI工具,这是开源项目中数量最多的一类。很多工具只侧重BI系统中的某个环节和方面,如ETL、Report、OLAP和Database等等。 BI Sui
关于数据仓库工程师的一般面试题目
相信会对即将投身于数据仓库事业中的同行们有点帮助!不过这只是针对初级数据仓库工程师的基本问题。本题只代表自己对数据仓库的肤浅认识,不代表任何公司的面试题目。对于高级数据仓库工程师的问题更侧重于各种工具的细枝末节。对于数据仓库架构师的问题更侧重于数据仓库的架构和总体认识。对于数据仓库项目经理的问题除了以上的问题外,就是一般项目管理的技能了吧。[@more@]关于数据仓库部分的面试问题!什么叫数据仓库?(相信inmon的数据仓库概念的四个特点是最基本的吧,当然需要加上自己的理解)数据仓库和数据库有什么区别?(事务性
微软商业智能客户解决方案案例研究(转载)
网络服务提供商通过完整的商业智能解决方案提高运营效率来源http://www.microsoft.com/china/SQL/2000/reporting/productinfo/casestudies/Cox.mspx[@more@]概述客户简介国家:美国行业:IT (Information Technology)总部位于乔治亚州亚特兰大市的Cox Communications是网络服务提供商中的佼佼者。该公司提供了全国性的高速宽带网络,这一网络提供以下三种主要业务:有线电视,电话和高速因特网。解决方案Cox 从零开始建立了使用户可以快速高效地做出决策和发布信息的解决方案。被称做NetMon的解决方案集成了实时的网络数据,修正了来自多种
关于UTL_FILE和DBMS_LOB的使用
起因:水晶报表需要显示从数据库中获取的图片,可是数据库表中只存储一个图片文件路径,并没有保存为BLOB字段,而水晶报表却不能根据文件路径显示该图片。解决思路:报表查询时将链接转为BLOB字段存储,或者将所有链接转化为BLOB字段存储到表中。最终还是没有如愿L,虽然语法基本上来自网上,不过还是了解了一下UTL_FILE和DBMS_LOB包的使用方法。修正一个错误,尽管BLOB字段不能转化回图片文件,但是BLOB字段本身保存的图片信息还是正确的,因此水晶报表还是能够正常显示BLOB图片的,:)[@more@] 1.创建目录和BLOB表CREATE DIRECTORY P
Crystal Report动态分组
很多经验不敢独享,何况我也是踩着前人的臂膀才做出来的,说实话说到数据仓库工具我一向是眼高手低的,攻克这个所谓的技术问题,也算值得高兴一把。[@more@]有这样一个需求,假设有这么一张报表用户可能要求按如下组合进行分组:Factory Name ->Sales Man/Product Name/Employee Name.Sales Man->Factory Name/Product Name/Sale Date.Employee Name->Sales Date/Factory Name.总之:按照两层进行分组,几乎每个数据项都参与进来了具体做法:1. 创建一个存储过程,其实本不必创建存储过程的,只不过当时想着顺便把Crystal Report
关于数据仓库的数据模型的思考
任何需求均来源于业务,业务决定了需求,需求分析的正确与否是关系到项目成败的关键所在,从任何角度都可以说项目是由业务驱动的所以数据仓库项目也是由业务所驱动的.[@more@]业务驱动 任何需求均来源于业务,业务决定了需求,需求分析的正确与否是关系到项目成败的关键所在,从任何角度都可以说项目是由业务驱动的所以数据仓库项目也是由业务所驱动的. 但是数据仓库不同于日常的信息系统开发,除了遵循其他系统开发的需求,分析,设计,测试等通常的软件声明周期之外;他还涉及到企业信息数据的集成,大容量数据的阶段处理和分层存储,数据仓库的
数据仓库架构师的岗位职责和岗位要求
根据网络招聘的资料合成的,不过好像听起来好像和项目经理的角色区别不大,呵呵!而且好像都是要全能的上将![@more@]岗位职责1. 制定数据仓库建设方案2. 数据仓库的设计和开发3. 数据仓库应用方案设计和推广岗位要求1、熟悉大型企业商业智能整体运作模式和系统框架,深刻理解商业智能对业务运营的杠杆作用,能够应用BI工具指导和帮助业务过程的改进。2、5年以上Oracle或者SQLServer数据库管理经验,熟练使用Unix和Linux,深刻理解数据仓库应用设计原理和实践;3、精通数据库索引和sql语句的优化,和服务器的性能参数调整,有perl,4、熟练一种
怎样的架构设计才是真正的数据仓库架构(转载)
这是2006年发生在ttnn上的一段有趣的交流...也许有助于我们对ODS的了解[@more@]innovate511 查看个人资料 (1 个用户) 更多选项 2006年2月22日, 下午2时25分发件人:"innovate511" <innovate...@gmail.com>日期:Tue, 21 Feb 2006 22:25:13 -0800当地时间:2006年2月22日(星期三) 下午2时25分主题:怎样的架构设计才是真正的数据仓库架构(原创)答复作者 | 转发 | 打印 | 单个帖子 | 显示原始邮件 | 报告此帖 | 查找此作者的帖子在各个网站和论坛,一说到数据仓库,基本都想到了"ETL※DW※OLAP",一
Microsoft 数据仓库架构(转载)
转载自http://www.microsoft.com/china/MSDN/library/archives/library/techart/SQLolap.asp摘要:本文简单介绍了使用 Microsoft 数据仓库架构的数据仓库,讨论了数据仓库能够实现的功能,使用数据仓库的恰当时机,以及如何将数据仓库与系统体系结构合成一体。目录简介数据仓库作为数据仓库模型的立方体使用数据仓库进行决策查看立方体片段和编程接口Microsoft 数据仓库架构数据仓库的其他应用实现数据仓库易犯的错误总结[@more@]简介 1998 年发布的 7.0 版 Microsoft® SQL Server™ 中已经包含数据仓库软件。如果您对数据仓
数据仓库之路(转载)
转载自http://www.vchome.net/tech/database/database50.htm FAQ目录一、 与数据仓库有关的几个概念... 21.1 目录... 2二、 数据仓库产生的原因... 6三、 数据仓库体系结构图... 7四、 数据仓库设计... 84.1 数据仓库的建模... 84.2 数据仓库建模的十条戒律:... 9五、 数据仓库开发过程... 95.1 数据模型的内容... 95.2 数据模型转变到数据仓库... 105.3 数据仓库开发成功的关键... 11六、 数据仓库的数据采集... 116.1 后台处理... 126.2 中间处理... 126.3 前台处理... 136.4 数据仓库的技术体系结构... 136.5 数据的有效性检查
Oracle学习系列—数据仓库部分—目录管理和外部表
目录和外部表是Oracle数据仓库中获取外部文件数据一个比较重要的管理.[@more@]创建外部目录并赋予相应的读写权限 SQL>CREATE OR REPLACE DIRECTORY source_dir as 'C:/UserDefine/oracle/oradata/source'; Directory created. SQL>CREATE OR REPLACE DIRECTORY target_dir as 'C:/UserDefine/oracle/oradata/target'; Directory created. SQL>CREATE OR REPLACE DIRECTORY log_dir as 'C:/UserDefine/oracle/oradata/log'; Directory created. SQL>grant read on directory
关于ETL工具的思考
阅读<DataStage企业版产品白皮书>有感![@more@]通常认为ETL就是数据抽取,转换,加载的过程,完全正确.就像数据库就是存储和管理数据的工具一样,然而数据库并不全部是数据的存储,最重要的是管理,即数据的并发性一致性可恢复性管理,包括一系列的进程和内存的管理等等.ETL工具本身也是同样的问题.如果只是抽取转换加载,相信通过PowerBuilder的数据管道技术并加以封装或者一系列的语言工具编码可以做到,并非很难的事情. 之所以思考,是因为阅读了一下<DataStage企业版产品白皮书>,当然也只是粗略的看了一下,其实所有成熟的ETL工具
ITPUB电子杂志-数据仓库专刊
印象中ITPUB第一次推出数据仓库专刊,做为斑竹,还是挺骄傲的,应该宣传一下,:) 呵呵,有自己几篇文章,不敢说纯粹都是自己的东西,毕竟天下文章一大抄. itpub电子期刊第十五期.pdf [@more@]
关于数据仓库-Inmon-企业信息工厂(CIF)概览
翻译总是一件很痛苦的事情,看着别人翻译的很烂,心里总是会暗暗骂上几句,当自己翻译的时候,才了解翻译的痛苦。。。关于DW2.0和CIF,我没什么直观的感觉,数据仓库终究还是数据仓库。。。[@more@]Corporate Information Factory (CIF) Overview 企业信息工厂(CIF)概览 摘要描述 Operational Systems are the internal and external core systems that support the day-to-day business operations. They are accessed through appli
关于数据仓库 —lookup表的一点看法
对于搞数据仓库的人来说,面试的时候总会问及到lookup表的概念。。。。。。[@more@]对于搞数据仓库的人来说,面试的时候总会问及到lookup表的概念,这个概念一开始对我而言也是很莫名其妙的;明明基础表和事实表的一个关联就可以完成的事情需要什么lookup表。 通常的做法 SELECT A.ID,SUM(Measure1) as Measure1,SUM(Measure2) as Measure2 FROM table_original A,table_dimension B WHERE A.ID = B.ID 为了严谨起见,我们的处理最多是加以NULL值或者未匹配
数据仓库和商业智能(征文活动)
线上的朋友或者itpub的朋友请关注一下itpub和it168联合举办的数据仓库和商业智能(征文活动)详细链接请见http://www.itpub.net/729618.html[@more@]内容如下: 这是本版第一次举办的活动,主要是想调动下积极性,增加点人气,拓展一下数据仓库和数据挖掘板块的内容。第一次举办,对于活动目前还不是特别有经验,不足之处还望大家包涵。 题目:数据仓库和商业智能 参考方向:可以从数据仓库和商业智能的任何角度出发:数据仓库和商业智能的定义、架构、实施经验、咨询、行业发展、前景预测、开发、案例等等,以及ETL 工具、OLAP、数据仓
业内新闻——Oracle purchases Hyperion
数据仓库领域又面临一场新的洗牌。。。数据仓库各个生命周期工具和方案的融合仍然是一个趋势。。。[@more@]On March 1, Oracle announced our plan to buy Hyperion, a leading provider of performance management software. The transaction extends Oracle's business intelligence capabilities to offer the most comprehensive system for enterprise performance management. We expect the transaction to close in April 2007, subject to regulatory and other approvals. Until the deal closes, each company will
商业智能常用词汇大全
持续补充和完善中。。。。。。。。。[@more@] Data Warehouse 本世纪80年代中期,"数据仓库之父"William H.Inmon先生在其《建立数据仓库》一书中定义了数据仓库的概念,随后又给出了更为精确的定义:数据仓库是在企业管理和决策中面向主题的、集成的、与时间相关的、不可修改的数据集合。与其他数据库应用不同的是,数据仓库更像一种过程,对分布在企业内部各处的业务数据的整合、加工和分析的过程。而不是一种可以购买的产品。 Data mart 数据集市,或者叫做"小数据仓库"。如果说数据仓库是建
ETL和EAI比较
什么是EAI?什么是ETL?ETL和EAI之间的关系ETL和EAI之间的区别[@more@]什么是EAI? 企业的业务流程会同时涉及到多个应用系统,因此要求这些系统能够协同,但接口、架构的不统一往往使得这些本应紧密集成的应用系统成为了一个个“信息孤岛”。于是,企业应用集成(Enterprise Application Integration,EAI)技术应运而生,它可以通过中间件作为粘合剂来连接企业内外各种业务相关的异构系统、应用以及数据源,从而满足 E-Commerce、ERP、CRM、SCM、OA、数据库、数据仓库等重要系统之间无缝共享和交换数据的需要。EAI 涉及技术广泛,
XXX数据仓库分析模型设计文档
本文提供了一个数据仓库项目的分析模型设计文档,仅供参考![@more@] XXX分析模型说明 目 录 1 共享数据表结构描述 3 2 XXXXXXXXX 4 2.1 XXXXXXXX 4 2.1.1 总体设计 4 2.1.2 具体分析模型设计 4 2.1.3 相应数据仓库设计 5 2.2 XXXXXXXX 6 2.2.1 总体设计 6 2.2.2 具体分析模型设计 7 2.2.3 相应数据仓库设计 7 1 共享数据表结构描述 一. 共享维表信息 维名 维表名