文章浏览阅读5.2k次，点赞7次，收藏49次。学习资源来自 https://www.bilibili.com/video/BV16y4y1C7Po文章目录课程目标前置技能一、数据湖概念[了解]1.1 企业的数据困扰困扰一：互联网的兴起和数据孤岛困扰二：非结构化数据困扰三：保留......
admin
数据湖及湖仓一体化项目学习框架,湖仓一体电商项目（二十四）：合并Iceberg小文件,湖仓一体电商项目（二十三）：离线业务 统计每天用户商品浏览所获积分,big data,数据仓库,hadoop...
admin
为什么大数据需要数据湖？,大数据,数据湖...
admin
文章浏览阅读3.3k次。什么是数据湖？数据湖是一个集中式存储库，允许以任意规模存储所有结构化和非结构化数据。您可以按原样存储数据（无需先对数据进行结构化处理），并运行不同类型的分析 – 从控制面板和可视化到大......
admin
文章浏览阅读1.6k次，点赞4次，收藏10次。本书描述了数据湖基础知识，如基本架构、与数仓的对比、数据存储、元数据处理、数据访问控制等，读完能够让你对数据湖技术有一个概述性的认知。笔记按章节整理如下：一 数据湖......
admin
百度智能云对象存储BOS提供稳定、安全、高效、高可扩展的云存储服务。您可以将任意数量和形式的非结构化数据存入对象存储BOS，BOS支持标准、低频、冷和归档存储等多种存储类型，适用于数据迁移、企业数据管理、数据处理......
admin
文章浏览阅读438次。数据湖 delta lake和spark版本对应关系_delta lake和spark的版本关系...
admin
文章浏览阅读595次。Hive-之即席查询引擎选型1 背景为什么需要使用到即席查询的数据表，这个取决于数仓的上层应用于数仓的规模，通常如果需要给Hive的上层服务提供快速响应，那么即席查询是必不可少的数仓组件，常见的即......
admin
文章浏览阅读437次。1. 企业的数据困扰互联网的兴起和数据孤岛非结构化数据保留原始数据集中存储、成本可控、使用简单，能够支持任意格式输入并拥有分析处理能力2. 数据湖理论2.1写时模式VS读时模式写时模式：数据在写入......
admin
通过对各个业务线实时需求的调研了解到，当前实时数据处理场景是各个业务线基于Java服务独自处理的。各个业务线实时能力不能复用且存在计算资源的扩展性问题，而且实时处理的时效已不能满足业务需求。鉴于当前大数据......
admin
友情链接申请要求： 不违法不降权 权重相当 请联系QQ：737597453
