ITPub博客

大多数的技术研发都对重构有所了解，而每个研发又都有自己的理解。从代码重构到架构重构，我参与了携程大型全链路重构项目，积累了一点经验心得，在此抛砖引玉和大家分享。

我在2021年加入货拉拉，当时技术稳定性刚刚处于起步阶段，很多工作待建。经过2年的努力，货拉拉技术稳定性体系完成了从0到1的建设，整体故障数降低了78%，同时SLA也从3个9提升到了4个9。今天的分享将结合过往在阿里本地生活技术风险体系下的经验沉淀，以及在货拉拉的实践成效，探讨技术稳定性的重要性和建设方法。

本文旨在探讨长连接技术在移动端的实践，针对百度iOS端在建设长连接过程中的技术选型和整体架构逻辑将做重点展开。同时结合IM即时通讯案例的介绍和分析，展示长连接是如何在移动应用领域为类似业务场景提供解决方案的。

本文将从元数据、Merge-On-Read等核心设计方面来剖析湖仓存储系统，对比当前流行的三种格式Delta Lake、Hudi、Iceberg的设计差异和优缺点，并分享我们在读写性能优化方面所做的思考和实际优化案例。

强健的信息技术供应链是数字经济繁荣发展的重要基础，也是推动数字化创新、赋能数字生态建设的必要条件。在复杂、不确定性加剧的当前局势下，信息技术供应链被赋予了更多内涵，供应链的完备性、核心竞争力、抗风险能力等得到了更多的关注。

eBPF是Linux内核革命性技术，能够安全高效地扩展内核能力，应用广泛，尤其是在云原生可观测性领域的应用已经成为行业热点。在滴滴云原生环境中，eBPF技术进行了业务实践和内源共建，HuaTuo eBPF 平台快速落地并取得初步收益，目前已经支持云原生关键组件，诸如服务访问关系拓扑、容器安全、宿主机安全、网络诊断、根因定位等业务，HuaTuo也是滴滴开源委员会的精品孵化项目。

从云和互联网的业务场景来看，其存储域主要采用基于服务器部署分布式存储服务的融合方式，它面临如下挑战 ：数据保存周期与服务器更新周期不匹配。大数据、人工智能等新兴业务催生出海量数据，大量数据需按照其生命周期策略（例如 8~10 年）进行保存。

本文介绍了转转C2B业务下精细化运营平台的搭建。在系统上线以来，在用户召回转化上有了一定的成效。在未来，会继续丰富系统的功能：更多的触达方式、更多的转化手段。也会持续探索系统开放性，让更多的业务可以接入使用。

根据IDC报告显示，未来5年，边缘计算服务器市场将继续保持高速增长，在中国的价值复合年增长率将达到22.5%，高于全球20.2%的水平。那么问题来了，我们如何满足市场对边缘计算应用需求的快速变化？如何提升行业用户在全球的竞争力？边缘计算如何满足多样化算力需求？戴尔科技给出了我们答案。

数据需求方A，需要获取每日up主的收入进行数据分析。首先，A需要向数据产品提取数需求，数据产品会与其沟通指标口径，如up主的范围，收入定义，还有没有其他要下钻的维度等等；口径定义清楚之后，数据产品把需求提给对应的数据分析师，分析师拿到需求和口径定义后，找数据源、手工SQL逻辑，从而拉取到对应的数据，最后提供给A。

本文将分享腾讯在大规模图神经网络应用和最新范式方面的探索。首先总体介绍大规模图神经网络应用中解决大图内存/计算问题的三个范式，接着会介绍基于图采样方法的发展，以及针对大规模GNN的优化，最后对大规模图神经网络应用和探索的未来方向进行展望。

GPU(图形处理器)最初设计用于处理计算机图形学任务，但现在其应用场景已经扩展到了许多其他领域。以下是一些GPU应用的场景：游戏和视觉效果：GPU最初的目的是为了加速图形渲染，因此它们在游戏和视觉效果方面有很大的应用。GPU可以快速处理大量数据并生成复杂的三维图形，为玩家提供更真实的游戏体验。

淘宝直播以轻松友好的内容导购形式，相对高性价比的购物属性，满足了用户在休闲时间进一步碎片化的情况下，对高节奏生活、社交属性和碎片化娱乐场景的需求。用户可以方便地关注自己喜欢的店铺、达人和品牌，同时回归生活消费。随着用户渗透率的提升，淘宝直播对整个核心电商业务的贡献也越来越大。目前，淘宝直播已吸引了大量主播入驻并开播，成为淘系生态圈中不可或缺的一环。

在近期举办的Arm技术媒体分享日上，来自Arm的技术专家详细介绍了Armv9 CPU集群、全新旗舰级Arm Immortalis GPU等产品，并通过一系列的产品对比，让笔者更加直观的了解到了Arm全新产品在性能方面的提升。

微信多维指标监控平台 ，是微信监控平台的重要组成部分。在分析了用户数据查询行为之后，我们找到了数据查询慢的主要原因，通过减少单 Broker 的大跨度时间查询、减少 Druid 的 Segments I/O 次数、减少 Segments 的大小。我们实现了缓存命中率>85%、查询耗时优化至 100ms。

端到端语音识别系统在足够多数据上训练后，往往能达到不错的识别效果，然而在实际应用场景中，对于不常见的专有名词，例如人名、产品名、小区名等，往往容易识别错误，此类问题需要快速修复，这就需要用到热词增强功能。

基于ClickHouse的Billions2.0日志方案上线后（B站基于Clickhouse的下一代日志体系建设实践），虽然能够降低60%的存储成本，但仍然存在几个比较明显的问题，需要进一步的优化和解决。

我们深知，企业需要一套完善的数据技术与工具，实现数据合规采集、存储、计算、建 设和管理，利用数据思维对业务运营与管理场景问题精细洞察，学会利用数据资产改善能效，以此循环往复，推动数据资产的持续沉淀，形成企业特有的数据资产体系。

随着云计算的普及和发展，对象存储逐渐成为企业主流的存储方案。尤其是在数据湖架构中，对象存储以其高度可扩展性和对多样化数据类型的支持，成为一种流行的底层存储解决方案。我们将回顾并对比HDFS和对象存储的架构，探讨它们各自的优劣势以及发展趋势。同时也会探讨云原生的数据湖存储架构应该如何设计。

自16年成立以来，网易严选已经发展了7个年头。数据一直是网易严选的核心资产，支撑着我们的业务发展，大数据平台也在严选成立不久之后就开始建设了。我们的大数据基础组建主要包括HDFS存储系统、Kafka/Pulsar等消息中间件，还有用于实时计算的Flink、批处理的Hive、Spark计算引擎、AI训练的temsoflow，在这些基础设施之上我们也开发了很多数据产品，如数据集成工具datahub，任务开发平台等。