文章浏览阅读304次。1 电商业务简介1.1 电商业务流程1.2 电商常识SKU=Stock Keeping Unit(库存量基本单位)。现在已经被引申为产品统一编号的简称,每种产品均对应有唯一的SKU号。SPU(Standard Product Unit):是商品信息聚合的最小单......
admin
文章浏览阅读6.4k次,点赞2次,收藏37次。进入大数据时代,大数据存储的解决方案,往往涉及到数据仓库的选型策略。从传统时期的数据仓库,到大数据环境下的数据仓库,其核心的技术架构是在随着最新技术趋势而变化的。......
admin
深入讲解拉链表,还怕面试官问?,数仓,拉链表,大数据项目...
admin
DataX简介(3.0版本),数仓架构(离线和实时)--企业版,数据仓库,大数据,cloudera...
admin
资源浏览查阅40次。亲测可用的JDK、Hadoop、HIVE安装包,配套博文:https://yellow520.bl更多下载资源、学习资料请访问CSDN文库频道....
admin
文章浏览阅读2k次,点赞4次,收藏26次。离线数仓数据库Database按照数据结构来组织、存储和管理数据的仓库数据仓库Data Warehouse是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合范式:构造关系数据库遵循的......
admin
文章浏览阅读2k次,点赞4次,收藏26次。离线数仓数据库Database按照数据结构来组织、存储和管理数据的仓库数据仓库Data Warehouse是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合范式:构造关系数据库遵循的......
admin
文章浏览阅读1.6k次,点赞2次,收藏15次。文章作者:惠明美团外卖 技术专家编辑整理:史士博出品平台:DataFunTalk导读:美团外卖数据仓库主要是收集各种用户终端业务、行为数据,通过统一口径加工处理,通过多种数据服务......
admin
Mr Fmy擅长大数据,电商离线数仓,scala,等方面的知识,Mr Fmy关注nlp领域....
admin
文章浏览阅读398次。1 数据仓库项目1.1 数据仓库概念数据仓库(Data Warehouse)①日志采集系统②业务系统数据③爬虫系统等获得的数据进行清洗、转义、分类、重组、合并、拆分、统计等操作。1.2 项目需求用户行为数据采集平台......
admin
文章浏览阅读1.3k次,点赞35次,收藏37次。文章目录一、Docker安装1.1 Centos Docker安装1.2 Ubuntu Docker安装【推荐】1.3 MacOs Docker安装1.4 Windows Docker安装【不推荐】二、容器准备2.1 拉取镜像2.2 启动并创建容器2.3 进入容器三、环境准备3.......
admin
文章浏览阅读1k次。主要是增加数据计算的复用性。每次新增加统计需求时,不至于从原始数据进行计算,而是从半成品继续加工而成。整合企业业务数据,建立统一的数据中心;产生业务报表,了解企业的经营状况;为企业运......
admin
文章浏览阅读951次。1 数仓分层1.1 为什么要分层?(1)把复杂的问题简单化把复杂的任务分解为多层完成,方便定位问题~少写了很多复杂的sql(2)减少重复开发规范数据分层,通过中间数据,可以减少极大的重复计算,增加复......
admin
文章浏览阅读232次。离线数仓中的lzo索引Q1:ODS层怎样设计的? (1)首先数据由Flume(hdfsSink)采集到HDFS上的 ① 此时指定了原始数据上传的路径hdfs.path ② 文件头信息hdfs.filePrefix ③ 是否滚动生成文件hdfs.round ④ 输出......
admin
文章浏览阅读1.7k次。文章目录第1章 数仓分层1.1 为什么要分层1.2 数据集市与数据仓库概念1.3 数仓命名规范1.3.1 表命名1.3.2 脚本命名1.3.3 表字段类型第2章 数仓理论2.1 范式理论2.1.1 范式概念2.1.2 函数依赖2.1.3 三范式区分2.2.1 关系......
admin
文章浏览阅读1.1k次。数据仓库,英文名称为 Data Warehouse,可简写为 DW 或 DWH。数据仓库,是为企业所有级别的决 策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 ......
admin
文章浏览阅读1.1k次。数据仓库,英文名称为 Data Warehouse,可简写为 DW 或 DWH。数据仓库,是为企业所有级别的决 策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。 ......
admin
友情链接申请要求: 不违法不降权 权重相当 请联系QQ:737597453