ITPUB技术论坛_专业的IT技术社区

网约车订单自助测试演进与落地实践

各个业务线对于便利的订单场景构造和测试能力有着强烈的诉求，网约车质量效能团队在不同的业务发展阶段结合业务特点形成了具备服务化、标准化的订单测试能力，以求提高研测效率、保证业务高质量交付。

qing_yun

数据分析

2023-07-19 09:46

Flink CDC & MongoDB 联合实时数仓的探索实践

本文整理自 XTransfer 技术专家, Flink CDC Maintainer 孙家宝，在 Flink Forward Asia 2022 数据集成专场的分享。本篇内容主要分为四个部分：

大数据技术前线

数据分析

2023-07-19 09:33

从ODS到ADS，详解数仓分层！

只有数据模型将数据有序的组织和存储起来之后，大数据才能得到高性能、低成本、高效率、高质量的使用。

码农谈IT

数据分析

2023-07-17 14:02

Elasticsearch 集群某一节点修改 IP 后无法启动问题复盘

集群版本：6.8.X 集群节点：5节点（三个节点为主+数据节点，另外两个独立数据节点）。问题描述：由于IP冲突，修改了一台服务器的IP，然后5台配置改了一下一次重启，能启动，但是连不上，后台各种报错。

大数据技术前线

数据分析

2023-07-17 13:59

数仓的命名规范

聚焦数据治理，数字化转型，数据中台等领域专业知识总结和实战分享，做你身边最有价值的数据号！

大数据技术前线

数据分析

2023-07-17 13:57

数据治理的第一步：搞清楚业务诉求是什么

因为并没有什么业务值得数据来驱动，或者用简单的报表取数就能满足，当企业已经把数据团队创造业务价值的口子限制住的时候，轰轰烈烈的搞数据治理就成了政治正确。

danny_2018

数据分析

2023-07-17 10:20

一文详解什么是数据库分片

应用程序正在变得越来越好，它拥有更多的功能、更多的活跃用户，并且每天都会收集更多的数据。但数据库现在导致应用程序的其余部分变慢。数据库分片可能是问题的答案，但许多人不知道它是什么，最重要的是何时使用它。在本文中我们将讨论什么是数据库分片、它的工作原理以及使用它的最佳方法。

大数据技术前线

数据挖掘

2023-07-17 10:14

在使用 ES 的过程中，如果 ES 集群中存放的是敏感数据，是不能够随便供人查看的。什么？在排查故障？那也不行，合规高于一切。不知道大家有没有遇到过上面描述的情景，或者如果是你遇到了，你会怎么办呢？我们常常讲，解决问题要抓住问题的本质。人类的本质是复读机，上述问题的本质是”敏感”。既然问题的本质是数据敏感，那就把敏感数据变成普通数据。这样既符合了合规要求，也促进大家工作。话不多说，我们 demo。

infinilabs

ELK

2023-07-14 11:11

不要将数据库中的“分库分表”理论盲目应用到 Elasticsearch

近期在优化索引时，我遇到了一些挑战。我们的环境是7节点16*32G的机器，我在尝试内存优化。当前的文档总量为5亿，然而mapping设计和shard设计都出现了问题。每个节点上有480个shard，这是一个相当离谱的数量。

大数据技术前线

数据分析

2023-07-14 09:48

湖仓一体数据平台技术能力评估报告正式发布

湖仓一体作为核心数据管理架构，是后疫情时代企业布局和采购的重点，将对海量多模数据管理和价值挖掘产生重要影响。

danny_2018

数据分析

2023-07-13 14:46

星云零售信贷基于 Apache Doris 的 OLAP 演进之路

星云零售信贷基于 Apache Doris 实现统一日志存储，其信贷业务实现毫秒级并发查询，存储成本降低 70%！

SelectDB

数据分析

2023-07-13 12:25

Hive SQL 迁移 Flink SQL 在快手的实践

本文整理自快手数据架构工程师张芒，阿里云工程师刘大龙，在 Flink Forward Asia 2022 生产实践专场的分享

大数据技术前线

数据分析

2023-07-13 10:24

教育场景中的数据可视化系统

在这篇文章中，我们将从数据可视化在教育场景中的应用、教育场景下数据可视化系统的设计原则、实现步骤以及未来的发展趋势等方面进行探讨。

qing_yun

可视化

2023-07-11 09:31

一站式运维管家 ChengYing 主机接入原理解析

之前的文章中，我们已经为大家介绍了 ChengYing 的安装原理、产品包制作、产品线部署等内容，本篇将和大家介绍一个困扰许多开发者的内容——ChengYing 主机接入。帮助所有对 ChengYing 感兴趣的开发者更好地了解和使用一站式全自动化运维管家 ChengYing。主机接入流程在部署完 ChengYing 之后，从集群进去，进入主机资源，进行集群编辑之后，开始主机接入流程。具体的接入过

数栈DTinsight

Hadoop

2023-07-10 14:38

数仓|常见的数据倾斜解决方案

数据倾斜，在MapReduce编程模型中十分常见，就是大量的相同key被分配到一个分区里，造成了个别task运行的非常慢，从而影响了整个任务的执行效率。

大数据技术前线

数据分析

2023-07-10 14:07

Java HashMap 的工作原理详解

Java HashMap 的工作原理详解HashMap的工作原理是近年来常见的java面试题。几乎每个Java程序员都知道HashMap，都知道哪里要用HashMap，知道Hashtable和HashMap之间的区别，那么为何这道面试题如此特殊呢？是因为这道题考察的深度很深。这题经常出现在或中面试中。投资银行更喜欢问这个问题，甚至会要求你实现HashMap来考察你的编程能力。ConcurrentH