| 共 13 篇文章 |
|
数据库和数据仓库的关系简而言之，数据库是面向事务的设计，数据仓库是面向主题设计的。因此，数据仓库中的数据是极少或根本不修改的;当然，向数据仓库添加数据是允许的。客户要看各种信息，肯定要准确的数据，但由于数据仓库流程至少分为3步，2次ETL，复杂的架构会更多层次，那么由于数据源有脏数据或者代码不严谨，都可以导致数据失真，客户... 阅102 转0 评0 公众公开 20-05-06 10:14 |
主题数据库的特征。主题数据库是面向业务主题的数据组织存储，例如，企业中需要建立的典型的主题数据库有：产品、客户、零部件、供应商、订货、员工、文件资料、工程规范等。主题数据库是对各个应用系统“自建自用”的数据库的彻底否定，强调建立各个应用系统“共建共用”的共享数据库。在实施过程中往往对于一个主题数据库等问题存在着许多争... 阅132 转0 评0 公众公开 20-05-06 09:22 |
MySQL数据库查询操作XML的经验分享 mysql里面有内置的操作xml的函数。Updatexml(testxml,''''''''/Student/Class/Name[self:text()="zhangsan"]'''''''',''''''''updatename'''''''')Updatexm... 阅555 转1 评0 公众公开 19-05-15 11:16 |
kettle新手教程1、kettle介绍。kettle是一个ETL（Extract, Transform and Load抽取、转换、加载）工具，ETL工具在数据仓库项目使用很频繁，kettle也能够应用在下面一些场景：因此,kettle是以面向元数据来设计。kettle支持非常多种输入和输出格式。kettle设计工具spoon介绍。kettle中的一个图形用户界面叫spoon，spoon能够设计转换和作业，也能... 阅109 转0 评0 公众公开 18-06-03 01:53 |
Cognos 11.0快速开发指南 Ⅰ1. 概述。“名称空间”是用来将模型归类的，有点类似于代码中的命名空间，通常我们创建三个名称空间：“元数据”、“业务视图”、“维度视图”，这里的名称可以自定义，这里只是推荐的一种归类方式，如下图：在创建好表关系之后，我们可以针对自己的业务，从“元数据”的表中选择有用的字段，放入业务视图的“查询主... 阅234 转0 评0 公众公开 18-06-03 00:56 |
大数据处理、数据分析及分布式工具。Hadoop：分布式的文件系统，结合其MapReduce编程模型可以用来做海量数据的批处理（Hive，Pig，HBase啥的就不说了），值得介绍的是Cloudera的Hadoop分支CDH5，基于YARN MRv2集成了Spark可直接用于生产环境的Hadoop，对于企业快速构建数据仓库非常有用。Spark：大规模数据处理框架（可以应付企业中常见的三种... 阅2 转自2017hello... 公众公开 18-06-02 14:27 |
史上最详细的Hadoop环境搭建。[hadoop@bigdata-senior01 hadoop-2.5.0]$ scp /opt/modules/hadoopha/hadoop-2.5.0/etc/hadoop/yarn-site.xml bigdata-senior02.chybinmy.com:/opt/modules/hadoopha/hadoop-2.5.0/etc/hadoop/[hadoop@bigdata-senior01 hadoop-2.5.0]$ scp /opt/modules/hadoopha/hadoop-2.5.0/etc/hadoop/yarn-site.xml bigdata... 阅36 转0 评0 公众公开 18-06-02 14:24 |
windows下MongoDB的安装及配置。难点在启动Mongodb的服务以及将MongoDB设置成Windows服务，加配置文件在windows的“服务”中找到。2.进入D:\software\MongoDB\bin目录（注意：先输入d:进入d盘，然后输入cd D:\software\MongoDB\bin）dbpath=D:\software\MongoDB\data\dblogpath=D:\software\MongoDB\data\log\mongo.log.输入：mongod --config ... 阅13 转0 评0 公众公开 18-06-02 14:19 |
MongoDB简介和基本概念（一）NoSQL简介。特点是高性能、易部署、易使用，存储数据十分方便，主要特性有： 面向集合存储，易于存储对象类型的数据 模式自由 支持动态查询 支持完全索引，包含内部对象 支持复制和故障恢复 使用高效的二进制数据存储，包括大型对象 文件存储格式为BSON(一种JSON的扩展)MongoDB和关系数据库的对比。MongoDB自带简洁... 阅38 转0 评0 公众公开 18-06-02 14:18 |
所以，你现在，知道了什么是MapReduce，什么是hadoop，以及这两者之间最简单的联系，而本文的主旨即是，一句话概括：在hadoop的框架上采取MapReduce的模式处理海量数据。MapReduce借鉴了函数式程序设计语言的设计思想，其软件实现是指定一个Map函数，把键值对(key/value)映射成新的键值对(key/value)，形成一系列中间结果形式的key/value 对，... 阅53 转0 评0 公众公开 18-06-02 14:09 |
