每周要闻速递|英特尔、昇腾助力AI生态建设;浪潮、戴尔发布服务器新品
数字化转型趋势下,各行业领域的信息数据呈爆发式增长。随着人工智能、云计算、物联网、大数据等前端科技的不断发展和延伸,各科技产业呈现良好发展态势。无论是企业还是个人,在新时代的环境下,都应紧跟数字化转型的脚本,在未来的变局中赢得先机。基于此,IT168企业计算领域为大家奉上每周精选服务器、存储、数据中心等热点事件。接下来让我们看看本周企业计算领域都发生了哪些新鲜事儿。
突破etcd限制 字节自研K8s存储KubeBrain
KubeBrain 是字节跳动针对 Kubernetes 元信息存储的使用需求,基于分布式 KV 存储引擎设计并实现的取代 etcd 的元信息存储系统,支撑线上超过 20,000 节点的超大规模 Kubernetes 集群的稳定运行。
B站万亿级数据库选型与架构设计实践
在开始讲解之前,我先为大家介绍一下B站的业务场景。B站的业务大体上可以分为以下几类:点播类业务。点播类业务就是大家经常看的视频以及稿件之类相关的业务,这类数据使用场景的特点有:数据一致性要求较高、耗时敏感、流量大、可用性要求高。直播类业务。直播类业务对应B站的S12、跨晚、拜年祭等,有以下几个特点
美团高性能终端实时日志系统建设,根除丢失和写满问题
你是否经常遇到线上需要日志排查问题但迟迟联系不上用户上报日志的情况?或者是否经常陷入由于存储空间不足而导致日志写不进去的囧境?本文介绍了美团是如何从0到1搭建高性能终端实时日志系统,从此彻底解决日志丢失和写满问题的。希望能为大家带来一些帮助和启发。
字节跳动数据中台的Data Catalog系统搜索实践
Data Catalog 能够帮助大公司更好地梳理和管理自己的资产,是 Data-drvien 公司的重要平台。一个通用的 Data Catalog 平台通常包含元数据管理,搜索,血缘,标签,术语等功能。其中,搜索是 Data Catalog 的入口功能,承担着让用户“找到数”的主要能力。在字节跳动数据中台的 Data Catalog 系统中,每天有 70% 以上的用户会使用搜索功能。
网易云音乐数据治理实践
本篇是第二届网易数据治理大赛一等奖作品分享,来自于网易云音乐数仓团队。将分享他们近一年在数据治理上的实践,具体内容将从数据背景、治理思路,项目方案、治理实践、项目成果及未来展望几个方面展开。
直播混沌工程之故障演练实践总结
近年来,随着系统架构逐渐向微服务架构演进,开发效率以及系统扩展性大幅提高,服务之间的依赖所带来的不确定性也成指数级增长,在这样的服务调用网中,任何一环出现的正常或者异常的变化,都有可能对其他服务造成类似蝴蝶效应一般的影响。
HTTP框架Hertz实践入门:性能测试指南
本文旨在分享开发者在压测 Hertz 时需要了解的场景和技术问题。这些建议有助于用户更好地结合真实 HTTP 场景对 Hertz 进行调优,使之更贴合业务需要、发挥较高性能。用户也可以参考官方提供的压测项目 hertz-benchmark 了解更多细节。
分库分表很常见,但这些问题90%的人都答不全
分库分表,是企业里面比较常见的针对高并发、数据量大的场景下的一种技术优化方案,也是一个非常高频的面试题。但是,因为很多人其实并没有非常丰富的分库分表的经验,所以能把这个问题回答得比较好的人其实还挺少的。那么,本文就来试图把关于分库分表的事情,一次性讲个清楚。
广告引擎平台化演进之路
广告是互联网最常见的商业模式,几乎遍布所有的互联网产品。网易程序化广告团队主要负责网易系自有流量的变现,包括网易新闻、邮箱、公开课、PC&WAP等,对外承接广点通、穿山甲、快手等外部ADX广告流量。
机器学习模型在云音乐指标异动预测的应用实践
当前云音乐核心指标,绝大多数由数据仓库团队提供数据支撑。数据质量体系标准的评估,依托网易数帆数据开发治理平台的数据质量中心(简称:dqc)功能。在指标异动的监控应用方面,主要通过事前规则设定、事中任务监控、事后异常触达等过程,实现数据质量的全链路监控。
每周要闻速递|曙光数创上市;第四代AMD EPYC处理器来袭
数字化转型趋势下,各行业领域的信息数据呈爆发式增长。随着人工智能、云计算、物联网、大数据等前端科技的不断发展和延伸,各科技产业呈现良好发展态势。无论是企业还是个人,在新时代的环境下,都应紧跟数字化转型的脚本,在未来的变局中赢得先机。基于此,IT168企业计算领域为大家奉上每周精选服务器、存储、数据中心等热点事件。接下来让我们看看本周企业计算领域都发生了哪些新鲜事儿。
系统崩了,竟然是不规范打印日志的锅?
如果你是一名优秀的应用系统开发人员,想必应该非常清楚在应用系统运行期间,打印日志有多么重要。它不但能够记录应用系统运行情况及轨迹,还有助于提升故障排查及定位问题的效率,甚至还可以对其进行分析及监控,洞察系统隐患,提前预警防范。
火山引擎 RTC 视频性能降级策略解析
随着 RTC 使用场景的不断复杂化,新特性不断增多,同时用户对清晰度提升的诉求也越来越强烈,这些都对客户端机器性能提出了越来越高的要求 (越来越高的分辨率,越来越复杂的编码器等)。但机器性能差异千差万别,同时用户的操作也不可预知,高级特性的使用和机器性能的矛盾客观存在。当用户机器负载过高时,我们需要适当降级视频特性来减轻系统复杂性,确保重要功能正常使用,提升用户体验。
大型互联网系统架构演进 BATJ其实无需神化
对于互联网系统架构的演进过程,相信很多人都有自己的理解,从单体应用到分布式应用、从开发框架到中间件技术、从容器化到云原生等等,不一而足。不过,在这庞杂的技术体系中,从宏观上理清其演变过程中的关键节点与可能面临的关键问题,对于我们理解一个大型互联网系统的架构,是很有裨益的。
网易严选跨域多目标算法演进
严选是网易旗下受新中产喜爱的电商品牌,覆盖居家生活、服饰鞋包、美食酒水、个护清洁、母婴亲子、运动户外、数码家电等品类。严选站内业务包括核心入口页、活动页、商详页,还有其他小流量的场景。目前这些场景都已经实现了个性化推荐算法的覆盖,严选电商推荐场景中算法建模面临多目标平衡、多场景数据如何共用等问题的挑战,针对这些挑战,本次主要分享跨域多目标在严选推荐算法中的实践。
因果推断在腾讯游戏中的应用
一些游戏业务中的运营策略和活动是难以对用户进行实验的,因为会带来异质化的体验引发用户的感受的差异。通常产品运营和策划会经验性地设计运营策略和活动,但随着精细化运营的思想的逐步深入,需要具体量化的数据表现以辅助决策, 而离线因果推断就是非常适配此类问题的方法论。
大型银行组装式应用在数字生态基座落地实践
业务能力包(PBC)是一种软件定义的最小化的业务功能,专注于解决特定的业务问题。业务用户在功能上可识别这些功能,旨在用于应用程序产品套件和自定义组装应用程序体验的构建基块。PBC是数据架构和一组服务、API和事件通道的有界集合,可以被视为微服务的聚合,在功能上是完整、自治的体系,具有四大特性。
谈谈数据目录应具备的四大能力
数据发现可以帮助确保数据湖不会变成数据沼泽。数据发现可以通过提供跨不同域的数据的分布式实时洞察力来取代现代数据目录,同时遵守一组统一的治理标准。数据发现通过根据一组特定消费者摄取、存储、聚合和使用数据的方式提供对数据的特定领域动态理解,从而取代了对数据目录的需求。
B站在实时音视频技术领域的探索与实践
B站直播的连麦PK、视频连线业务就提供了这个能力。主播看到的是对方主播实时的流(延迟400ms以内),而观众看到的是“准实时”的流(延迟2~5s左右)。本文讲述搭建这样一套系统需要了解的背景知识以及系统的整体架构,希望对大家有帮助。