搜索结果
查询Tags标签： 数仓，共有 49条记录-
【离线数据仓库及CDH】思维导图知识点总结
离线数仓1.用户行为数仓采集一、数仓概念Data Warehouse提供决策，为数据目的地做好准备二、项目需求及系统架构采集、行为/业务分层数仓、报表分析框架CDH（CM）：采集传输、存储、计算、查询三、数据生成模块数据格式：公共字段+业务字段事件日志数据、编写数据生成脚本…
2021/12/7 23:20:01 人评论 次浏览 -
大数据平台实时数仓从0到1搭建之 - 10 阶段回顾
大数据平台实时数仓从0到1搭建之 - 10 阶段回顾 概述jpsall 目前所有进程整体架构概述截止Flink安装完成，其实一个简单的架构已经可以用了，这里整理下现在集群上安装的各种服务jpsall 目前所有进程 jpsall，展示出目前三台节点上所有的java进程 [root@server110 opt]# .…
2021/10/3 23:16:10 人评论 次浏览 -
大数据平台实时数仓从0到1搭建之 - 10 阶段回顾
大数据平台实时数仓从0到1搭建之 - 10 阶段回顾 概述jpsall 目前所有进程整体架构概述截止Flink安装完成，其实一个简单的架构已经可以用了，这里整理下现在集群上安装的各种服务jpsall 目前所有进程 jpsall，展示出目前三台节点上所有的java进程 [root@server110 opt]# .…
2021/10/3 23:16:10 人评论 次浏览 -
阿里实时数仓分布式事务Scale Out设计
简介： Hybrid Transaction Analytical Processing(HTAP) 是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指一类兼具OLTP能力（事务能力）和OLAP能力（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务的数据库是两个不同的…
2021/9/14 23:07:47 人评论 次浏览 -
阿里实时数仓分布式事务Scale Out设计
简介： Hybrid Transaction Analytical Processing(HTAP) 是著名信息技术咨询与分析公司Gartner在2014年提出的一个新的数据库系统定义，特指一类兼具OLTP能力（事务能力）和OLAP能力（分析能力）的数据库系统。在传统场景中，承担OLTP任务和OLAP任务的数据库是两个不同的…
2021/9/14 23:07:47 人评论 次浏览 -
8.5学习日记
刘润的商业通识三十讲： 物物交换的社会存在两个问题 第一，生产者的物品有时效性，第二要找到愿意交换的人 比如 张三种田得到了1000斤米，他也吃不了这么多，他要在米坏之前拿他的米去换老李家的猪肉，老钱家的布。 于是出现了货币和商人，货币切分了买卖，商人连接了交…
2021/8/5 23:07:51 人评论 次浏览 -
8.5学习日记
刘润的商业通识三十讲： 物物交换的社会存在两个问题 第一，生产者的物品有时效性，第二要找到愿意交换的人 比如 张三种田得到了1000斤米，他也吃不了这么多，他要在米坏之前拿他的米去换老李家的猪肉，老钱家的布。 于是出现了货币和商人，货币切分了买卖，商人连接了交…
2021/8/5 23:07:51 人评论 次浏览 -
Filnk实时数仓（Clickhouse）
第1章 Clickhouse简介ClickHouse 是俄罗斯的Yandex于2016年开源的列式存储数据库（DBMS），使用C++语言编写，主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告。 OLAP场景的关键特征：1）大多数是读请求2）数据总是以相当大的批(> 1000 rows)进…
2021/8/3 23:36:47 人评论 次浏览 -
Filnk实时数仓（Clickhouse）
第1章 Clickhouse简介ClickHouse 是俄罗斯的Yandex于2016年开源的列式存储数据库（DBMS），使用C++语言编写，主要用于在线分析处理查询（OLAP），能够使用SQL查询实时生成分析数据报告。 OLAP场景的关键特征：1）大多数是读请求2）数据总是以相当大的批(> 1000 rows)进…
2021/8/3 23:36:47 人评论 次浏览 -
实时数仓入门训练营：实时计算 Flink 版 SQL 实践
简介： 《实时数仓入门训练营》由阿里云研究员王峰、阿里云资深技术专家金晓军、阿里云高级产品专家刘一鸣等实时计算 Flink 版和 Hologres 的多名技术/产品一线专家齐上阵，合力搭建此次训练营的课程体系，精心打磨课程内容，直击当下同学们所遇到的痛点问题。由浅入深全…
2021/7/15 19:08:28 人评论 次浏览 -
实时数仓入门训练营：实时计算 Flink 版 SQL 实践
简介： 《实时数仓入门训练营》由阿里云研究员王峰、阿里云资深技术专家金晓军、阿里云高级产品专家刘一鸣等实时计算 Flink 版和 Hologres 的多名技术/产品一线专家齐上阵，合力搭建此次训练营的课程体系，精心打磨课程内容，直击当下同学们所遇到的痛点问题。由浅入深全…
2021/7/15 19:08:28 人评论 次浏览 -
数仓开发5大SQL分析函数
基本语法 analytic_function_name([argument_list]) OVER ( [PARTITION BY partition_expression,…] [ORDER BY sort_expression, … [ASC|DESC]])analytic_function_name: 函数名称 — 比如 RANK(), SUM(), FIRST()等等partition_expression: 分区列sort_expression: 排…
2021/7/9 19:09:24 人评论 次浏览 -
全面的关于OLAP数仓总结
有哪些类型的OLAP数仓？ 按数据量划分 对一件事物或一个东西基于不同角度，可以进行多种分类方式。对数仓产品也一样。比如我们可以基于数据量来选择不同类型的数量，如下图所示：本系列文章主要关注的是数据量处于百万到百亿级别的偏实时的分析型数仓，Cloudera的Impala、…
2021/6/17 18:27:12 人评论 次浏览 -
来电科技：基于 Flink + Hologres 的实时数仓演进之路
简介： 本文将会讲述共享充电宝开创企业来电科技如何基于 Flink + Hologres 构建统一数据服务加速的实时数仓 作者：陈健新，来电科技数据仓库开发工程师，目前专注于负责来电科技大数据平台离线和实时架构的整合。 深圳来电科技有限公司（以下简称 “来电科技”）是共享充…
2021/6/17 11:01:07 人评论 次浏览 -
仅需7步带你深入理解【大数据】数仓设计
之前做过一个大数据离线数仓项目，然后写下了一篇总结????大数据实战【千亿级数仓】项目总结。那一篇博客主要针对方向是项目本身，那如果我们把眼光放远，讨论的方向放到数仓设计上面，那该如何总结呢？不用担心，本篇博客将告诉你答案！文章目录 ① 构建数据仓库的基…
2021/6/2 10:28:54 人评论 次浏览
