定制服务、定制费用、网站定制、hudi、分布式缓存、php mysql、2023、2024、openeuler、微服务
源创会，线下重启！2023年7月1日深圳站—基础软件技术面面谈！免费票限时抢购！ApacheHudi是一款开源的数据湖解决方案，它能够帮助企业更好地管理和分析海量数据，支持高效的数据更新和查询。并提供多种数据压缩和存储格式以及索引功能，从而为企业数据仓库实践提供更加灵活和高效的数据处理方式。...
来源：开源中国 2023-06-21 17:30 71
在大数据处理中，实时数据分析是一个重要的需求。随着数据量的不断增长，对于实时分析的挑战也在不断加大，传统的批处理方式已经不能满足实时数据处理的需求，需要一种更加高效的技术来解决这个问题。ApacheHudi（HadoopUpsertsDeletesandIncrementalProcessing）就...
来源：开源中国 2023-05-24 14:31 104
导读： 首先做个自我介绍，我目前在阿里云云计算平台，从事研究Flink和Hudi结合方向的相关工作。目前，Flink+Hudi的方案推广大概已经有了一年半的时间，在国内流行度也已比较高，主流的公司也会尝试去迭代他们的数仓方案。所以，今天我介绍的主题是Flink和Hudi在数据湖Streaming方向....
来源：开源中国 2022-10-31 17:00 137
来源：开源中国 2022-10-28 17:30 161
分享嘉宾：孙方彬中国移动云能力中心软件开发工程师编辑整理：HohXil出品平台：DataFunTalk 导读：在云原生+大数据的时代，随着业务数据量的爆炸式增长以及对高时效性的要求，云原生大数据分析技术，经历了从传统数仓到数据湖，再到湖仓一体的演进。本文主要介绍移动云云原生大数据分析LakeH...
来源：开源中国 2022-09-06 10:00 185
字节跳动数据湖团队在实时数仓构建宽表的业务场景中，探索实践出的一种基于HudiPayload的合并机制提出的全新解决方案。字节跳动数据湖团队在实时数仓构建宽表的业务场景中，探索实践出的一种基于HudiPayload的合并机制提出的全新解决方案。该方案在存储层提供对多流数据的关联能力，旨在解决实...
来源：开源中国 2022-03-30 15:00 296
由字节跳动数据湖团队贡献的RFC-29BucketIndex在近期合入Hudi主分支，本文详细介绍HudiBucketIndex产生的背景与实践经验。文|字节跳动数据平台数据湖团队Hudi是一个流式数据湖平台，提供ACID功能，支持实时消费增量数据、离线批量更新数据，并且可以通过Spark、F...
来源：开源中国 2022-02-28 14:30 309
【概述】这是hudi系列的第一篇文章，先从核心概念，存储的文件格式加深对概念的理解，后续再逐步对使用（spark/flink入hudi，hudi同步hive等）、原理（压缩机制，索引，聚族等）展开分享～【什么是数据湖】简单来说，数据湖技术是计算引擎和底层存储格式之间的一种数据组织格式...
来源：开源中国 2022-02-18 18:30 516
摘要：华为云FunsionInsightMRS已集成ApacheHudi0.8版本，基于MRS-Hudi构建数据湖解决方案。本文分享自华为云社区《基于MRS-Hudi构建数据湖的典型应用场景介绍》，作者：受春柏。一、传统数据湖存在的问题与挑战传统数据湖解决方案中，常用Hive来构建T+1级...
来源：开源中国 2021-12-09 18:30 402
简介： 纵观大数据领域成熟、活跃、有生命力的框架，无一不是设计优雅，能与其他框架相互融合，彼此借力，各专所长。作者：王祥虎（ApacheHudi社区）ApacheHudi是由Uber开发并开源的数据湖框架，它于2019年1月进入Apache孵化器孵化，次年5月份顺利毕业晋升为Apache顶...
来源：开源中国 2020-10-23 11:30 721
一篇由ApacheHudiPMCBhavaniSudhaSaktheeswaran和AWSPresto团队工程师BrandonScheller分享ApacheHudi和Presto集成的一篇文章。1.概述ApacheHudi是一个快速迭代的数据湖存储系统，可以帮助企业构建和管理PB级数据湖，H...
来源：开源中国 2020-09-21 12:30 641
手机查看
