ITPUB技术论坛_专业的IT技术社区

网易某业务线的计算资源数据治理实践

本文从计算资源治理实践出发，带大家清楚认识计算资源治理到底该如何进行，并如何应用到其他项目中。由于数据治理层面可以分多个层面且内容繁多（包括模型合规、数据质量、数据安全、计算/存储资源、数据价值等治理内容），因此需要单独拆分为6个模块单独去阐述其中内容。

陶然陶然

服务器/存储

2023-03-16 15:16

Serverless：基于个性化服务画像的弹性伸缩实践

云原生环境下业务大规模迭代的成本压力日益增大。我们以Serverless理念为指导，针对百度Feed的后端服务，从弹性、流量、容量角度构建多维度个性化服务画像，并基于画像对服务进行弹性伸缩，随流量波动自适应调整服务容量，有效地降低业务运行成本，本文重点介绍上述相关策略与实践方案。

张哥说技术

服务器/存储

2023-03-16 13:56

字节跳动极高可用 KV 存储系统详解

Abase 是字节跳动在线推荐的底层存储，也是字节跳动最大规模的在线 KV 存储系统，承担着 90% 以上的 KV 存储需求、支持多个字节跳动产品和业务。本次分享详细介绍了 Abase 的技术实现和高可用等关键技术。

架构师修行手册

服务器/存储

2023-03-16 13:54

读“运维岗位真的不能干了吗”有感

现在这个阶段，平台体系还没有那么完备，使用自助Platform+COE+BP（Business Partner）的架构来搭建运维体系看起来是靠谱可落地的。未来Platform足够好的的时候，可以缩减BP人力（BP也慢慢具备了COE的能力），Platform继续完备，可以继续缩减COE，再之后，嗯，运维和研发可能就都不需要了吧。

运维实践派

服务器/存储

2023-03-16 13:36

老弟问我，RocketMQ 中的 ProcessQueue 怎么理解？

今天来分享 RocketMQ 中一个非常重要又不太好理解的知识点-ProcessQueue。

带你聊技术

服务器/存储

2023-03-16 13:33

原理+配置+实战，Canal一套带走

前几天在网上冲浪的时候发现了一个比较成熟的开源中间件——Canal。在了解了它的工作原理和使用场景后，顿时产生了浓厚的兴趣。今天，就让我们跟随阿Q的脚步，一起来揭开它神秘的面纱吧。

张哥说技术

服务器/存储

2023-03-16 13:31

HDFS EC在B站的实践

随着B站业务的高速发展，业务产生的数据每天以PB级的速度持续增长，之前主要应对方法是分析数据的使用频率，把数据分为热冷俩类数据，对冷数据进行高密存储来降低存储成本，以及对部分非核心的冷数据进行数据周期管理。

陶然陶然

服务器/存储

2023-03-15 15:41

揭秘字节跳动业务背后的分布式数据治理思路

经过十多年的发展，数据治理在传统行业以及新兴互联网公司都已经产生落地实践。字节跳动也在探索一种分布式的数据治理方式。本篇内容来源于火山引擎超话数据直播活动的回顾，将从以下四个部分展开分享：字节的挑战与实践；数据治理的发展与分布式；分布式自治架构；分布式自治核心能力。

陶然陶然

服务器/存储

2023-03-14 17:22

银行业信创架构设计规划及实践 | 架构进阶

本文分析了银行业信创架构设计中的突出难点，结合实践经验，建议在信创架构设计中要坚守基本满足业务需求、相对主流成熟技术、适当采取多技术栈和兼容性广生态健全的设计原则，采取优先借鉴同业案例、符合技术发展趋势、匹配内部科技规划、选取共性搭建底座和支持全栈留有余地的选型策略。最后以全栈信创云建设为例，探索了银行业信创架构规划的相关实践工作，以期为同业提供有益参考。

码农谈IT

服务器/存储

2023-03-14 13:55

分布式事务的理解和常见解决方案汇总

在互联网系统里面，一般都是牺牲强一致性换取系统的高性能和高可用，只需要保证数据的最终一致性，只不过达到最终一致性所需要的时间需要在用户和产品层面是可以接受的。而金融系统则不同，金融系统一般都需要保持强一致性。

带你聊技术

服务器/存储

2023-03-14 13:54

哔哩哔哩大数据平台建设之路——数据安全篇

Berserker是B站一站式数据开发及治理平台，基于常用大数据生态组件构建，满足公司内数据查询、数据分析、日常报表、数据集成、数据开发、实时计算和数据治理等各种业务场景。在B站，我们一般将Berserker简写为BSK。

陶然陶然

服务器/存储

2023-03-13 15:28

AI 算法在大数据治理中的应用

本文主要分享 Datacake 在大数据治理中，AI 算法的应用经验。本次分享分为五大部分：第一部分阐明大数据与 AI 的关系，大数据不仅可以服务于 AI，也可以使用 AI 来优化自身服务，两者是互相支撑、依赖的关系；第二部分介绍利用 AI 模型综合评估大数据任务健康度的应用实践，为后续开展数据治理提供量化依据；

陶然陶然

服务器/存储

2023-03-08 14:37

ClickHouse在自助行为分析场景的实践应用

公司每日产生海量数据，按业务需要进行统计产出各类分析报表，但巨大的数据量加上复杂的数据模型，以及个性化的分析维度，采用传统的离线预计算方式难以灵活支持，为此需引入一种满足实时多维分析场景的计算引擎框架来支撑业务精细化运营场景。

陶然陶然

服务器/存储

2023-03-07 17:38

继华为、中兴之后，美国再次把枪口指向浪潮

某些国家做事情不需要理由！3月3日上午，浪潮集团旗下3股集体下跌：A股浪潮信息一字跌停，浪潮软件一度跌进5%，港股浪潮数字企业一度跌超17%。最新消息显示，美国商务部当地时间3月2日发布公告，以涉及国家安全等无理理由，将28个中国实体列入实体清单，包括第四范式、香港华大基因科技服务有限公司、浪潮集团、龙芯中科、盛科通信等。

陶然陶然

服务器/存储

2023-03-06 15:26

瞄准“情报生态”下一跳，锐捷+腾讯携手加速安全共建

2月28日下午，锐捷网络联合腾讯云、腾讯安全举办“威胁情报”战略合作发布会，双方正式签署战略合作协议。锐捷网络安全产品事业部总经理项小升、腾讯安全总经理陈龙代表双方签署战略合作协议。会议上，信通院云安全专家孔松、锐捷网络安全产品事业部产品规划总监蔡铮鸣、腾讯安全威胁情报高级产品经理高睿从安全共建和场景创新等角度发表了精彩演讲。

服务器频道

网络安全

2023-03-03 17:21

节省数亿IT成本，B站FinOps实践

当前，降本增效是各大互联网公司的重要方向，IT成本则占据了互联网公司成本的大头。如何有效的降本？如何推动各业务线配合？如何平衡成本、质量和效率？本文将介绍B站的IT成本管理和优化的思路，介绍B站通过落地FinOps，推进成本洞察、技术优化和运营优化，提升资源效率的经验。

陶然陶然

服务器/存储

2023-03-03 14:19

分布式存储在云环境下的应用和部署

本文从分布式存储架构特点引入云环境下提供分布式存储的使用场景，以及银行业中适合承载的业务类型。并对分布式存储在云环境下的基本部署进行描述。希望能够加深大家对云环境中分布式存储应用管理的理解，以充分利用分布式存储实现块存储、文件存储、对象存储的方式和特点，补充集中式企业存储的短板，针对PB级别海量非结构化数据等典型场景，体现存调优势。

码农谈IT

服务器/存储

2023-03-02 13:57

打造全场景算力新一代Dell PowerEdge服务器加速企业转型

日前，戴尔科技集团发布了基于第四代英特尔至强可扩展处理器的新一代Dell PowerEdge服务器，旨在跨越核心数据中心、大规模公有云和边缘位置加速计算性能并提供更好的可靠性，为各类工作负载提供强大的算力。

陶然陶然

服务器/存储

2023-03-02 13:56

数据治理九大核心领域，以银行业为例

股份制改革对银行业来说只是一个开始，企业在风险管理、创造价值等方面还有很长的路要走。风险管理要求提供精准的数据模型、创造价值要求充分摸清银行数据资产，这是数据治理的外部推动因素。此外，随着第三次工业革命的到来，银行业也需要进入定制化时代，以更低的成本，生产多样化的金融产品，从而满足不同顾客的不同需求。

陶然陶然

服务器/存储

2023-03-01 16:50