ITPUB技术论坛_专业的IT技术社区

官宣｜Apache Flink 1.17 发布公告

Apache Flink PMC（项目管理委员）很高兴地宣布发布 Apache Flink 1.17.0。Apache Flink 是领先的流处理标准，流批统一的数据处理概念在越来越多的公司中得到认可。得益于我们出色的社区和优秀的贡献者，Apache Flink 在 Apache 社区中一直保持着快速增长，并且是最活跃的社区之一。Flink 1.17 有 172 位贡献者热情参与，完成了 7 个 FLIP 和 600 多个 issue，为社区带来了许多令人兴奋的新功能和改进。

大数据技术前线

数据分析

2023-03-24 14:01

保姆级教程！玩转 ChunJun 详细指南

ChunJun 是一款稳定、易用、高效、批流一体的数据集成框架，?持海量数据的同步与计算。ChunJun 既可以采集静态的数据，比如 MySQL，HDFS 等，也可以采集实时变化的数据，比如 binlog，Kafka 等。同时 ChunJun 也是一个支持原生 FlinkSQL 所有语法和特性的计算框架。经过5年的迭代和开发，ChunJun 已经帮助很多公司快速进行数据整合，并解决数据开发人员需要

数栈DTinsight

Hadoop

2023-03-24 11:24

Airwallex 基于 Flink 打造实时风控系统

本文整理自 Airwallex Risk ML Platform Team 董大凡，在 Flink Forward Asia 2022 实时风控专场的分享。

大数据技术前线

数据分析

2023-03-23 09:38

从Flink全球火爆看到被低估的“中国开源力量”

Flink开源生态却在悄然布局，有20万开发者关注，超过100家国内外知名公司参与代码贡献，已形成了庞大的用户和开发者生态。

danny_2018

数据分析

2023-03-22 17:57

流批一体在 AI 核心电商领域的探索与实践

本文整理自阿里巴巴高级技术专家祝海峰，在 Flink Forward Asia 2022 流批一体专场的分享。

大数据技术前线

数据分析

2023-03-22 14:13

大数据计算引擎 EasyMR：拥抱开源，引领技术创新

身处数字经济时代，随着大数据应用越来越广泛，越来越多的企业和组织开始关注大数据基础平台的建设和运营。在认识到其的重要性之后，如何具体着手搭建或采购大数据基础平台成为下一步需要解决的问题。在大数据基础平台中，大数据组件是非常重要的一部分，包括数据存储、数据处理、数据分析、数据可视化等。在选择大数据组件时，我们常常在闭源组件和开源组件选择中反复纠结。本文将从优势、劣势两个维度分析开源组件、闭源组件对大

数栈DTinsight

Hadoop

2023-03-22 11:19

Flink 在中泰证券的实践与应用

本文整理自中泰证券大数据中心实时计算平台架构师连序全，在 Flink Forward Asia 2022 行业案例专场的分享。

大数据技术前线

数据分析

2023-03-21 14:21

Presto 在字节跳动的实践

Lakehouse Analytics Service 是火山引擎上对外提供的支持多引擎多租户的湖仓一体服务。

大数据技术前线

数据分析

2023-03-21 14:03

如何基于 Apache Doris 与 Apache Flink 快速构建极速易用的实时数仓

随着大数据应用的不断深入，企业不再满足离线数据加工计算的时效，实时数据需求已成为数据应用新常态。伴随着实时分析需求的不断膨胀，传统的数据架构面临的成本高、实时性无法保证、组件繁冗、运维难度高等问题日益凸显。为了适应业务快速迭代的特点，帮助企业提升数据生产和应用的时效性、进一步挖掘实时数据价值，实时数仓的构建至关重要。本文将分享如何基于 Apache Doris 和 Apache Flink

SelectDB

数据分析

2023-03-20 15:11

基于 Doris 构建实时统一的现代数据分析平台

本文将分享 SelectDB 公司对于现代数据分析栈的一些认识，以及SelectDB 公司围绕 Apache Doris 构建现代数据分析栈的一些工作。

大数据技术前线

数据分析

2023-03-20 14:03

基于 Apache Flink 的实时计算数据流业务引擎在京东零售的实践和落地

本文整理自京东零售-技术研发与数据中心张颖&闫莉刚在 ApacheCon Asia 2022 的分享。

大数据技术前线

数据分析

2023-03-17 14:01

数据湖选型指南｜Hudi vs Iceberg 数据更新能力深度对比

数据湖作为新一代大数据基础设施，近年来持续火热，许多前线的同学都在讨论数据湖应该怎么建，许多企业也都在构建或者计划构建自己的数据湖。基于此，自然引发了许多关于数据湖选型的讨论和探究。但是经过搜索之后我们发现，网上现存的很多内容都是基于较早之前的开源信息做出的结论，在企业调研初期容易造成不准确的印象和理解。因此带着这样的问题，我们计划推出数据湖选型系列文章，基于最新的开源信息，从升级数据湖架构的几个

数栈DTinsight

Hadoop

2023-03-17 11:16

新一代云数据平台架构演进之路

本文是由浙江数新网络有限公司为我们带来的《新一代云数据平台架构演进之路》的技术分享。

大数据技术前线

数据分析

2023-03-17 09:20

Apache Flink X Apache Doris 构建极速易用的实时数仓架构

本文整理自 SelectDB 资深大数据研发专家王磊，在 FFA 2022 实时湖仓专场的分享。

大数据技术前线

数据分析

2023-03-16 13:43

云原生无服务器以及实时数仓降低数据分析门槛

亚马逊云科技Redshift，有效降低了数据分析的门槛，为客户带来了更卓越的体验。尤其在发布了Streaming Ingestion 和 Redshift Serverless之后，可以做到更简单的实时应用分析、更加灵活的数仓架构设计。

danny_2018

数据分析

2023-03-15 15:11

数据仓库的性能问题及解决之道

有了这些机制以后，esProc SPL 就可以充分利用硬件资源，将单机性能发挥到极致，不仅原来很多单机性能问题可以得到有效解决，甚至很多原来使用集群的计算现在也可以用单机搞定(可能更快)，达到单机全能的效果。

danny_2018

数据分析

2023-03-09 11:43

如何降低 Flink 开发和运维成本？阿里云实时计算平台建设实践

本文整理自阿里云高级技术专家，Apache Flink Contributor 周凯波（宝牛），在 FFA 2022 平台建设专场的分享。

码农谈IT

数据分析

2023-03-08 10:36

如何基于 Apache Doris 构建简易高效的用户行为分析平台？

用户行为分析是企业了解用户的重要方式之一，可以从点击、登录、观看、跳出、下单购买等多维角度还原用户动态使用场景和用户体验，通过对用户行为埋点数据进行分析，可以详细、清楚地了解用户的行为习惯，从中发现用户使用产品的规律，以用于精准营销、产品优化，从而驱动业务实现增长。随着数字化转型进程的不断推进，用户行为分析平台在企业内部扮演的角色愈发重要，如何进一步挖掘用户行为数据价值，也成为了当下各企业

SelectDB

数据挖掘

2023-03-07 11:34

查询性能较 Trino/Presto 3-10 倍提升！Apache Doris 极速数据湖分析深度解读

从上世纪 90 年代初 Bill Inmon 在《building the Data Warehouse》一书中正式提出数据仓库这一概念，至今已有超过三十年的时间。在最初的概念里，数据仓库被定义为「一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策」，而数据湖最初是为了解决数仓无法存储海量且异构的数据而构建的集中式存储系统。时代的发展与用户数据应用诉求的演进，催生了数

SelectDB

数据分析

2023-02-28 14:22