分库分表很常见,但这些问题90%的人都答不全
分库分表,是企业里面比较常见的针对高并发、数据量大的场景下的一种技术优化方案,也是一个非常高频的面试题。但是,因为很多人其实并没有非常丰富的分库分表的经验,所以能把这个问题回答得比较好的人其实还挺少的。那么,本文就来试图把关于分库分表的事情,一次性讲个清楚。
广告引擎平台化演进之路
广告是互联网最常见的商业模式,几乎遍布所有的互联网产品。网易程序化广告团队主要负责网易系自有流量的变现,包括网易新闻、邮箱、公开课、PC&WAP等,对外承接广点通、穿山甲、快手等外部ADX广告流量。
机器学习模型在云音乐指标异动预测的应用实践
当前云音乐核心指标,绝大多数由数据仓库团队提供数据支撑。数据质量体系标准的评估,依托网易数帆数据开发治理平台的数据质量中心(简称:dqc)功能。在指标异动的监控应用方面,主要通过事前规则设定、事中任务监控、事后异常触达等过程,实现数据质量的全链路监控。
每周要闻速递|曙光数创上市;第四代AMD EPYC处理器来袭
数字化转型趋势下,各行业领域的信息数据呈爆发式增长。随着人工智能、云计算、物联网、大数据等前端科技的不断发展和延伸,各科技产业呈现良好发展态势。无论是企业还是个人,在新时代的环境下,都应紧跟数字化转型的脚本,在未来的变局中赢得先机。基于此,IT168企业计算领域为大家奉上每周精选服务器、存储、数据中心等热点事件。接下来让我们看看本周企业计算领域都发生了哪些新鲜事儿。
系统崩了,竟然是不规范打印日志的锅?
如果你是一名优秀的应用系统开发人员,想必应该非常清楚在应用系统运行期间,打印日志有多么重要。它不但能够记录应用系统运行情况及轨迹,还有助于提升故障排查及定位问题的效率,甚至还可以对其进行分析及监控,洞察系统隐患,提前预警防范。
火山引擎 RTC 视频性能降级策略解析
随着 RTC 使用场景的不断复杂化,新特性不断增多,同时用户对清晰度提升的诉求也越来越强烈,这些都对客户端机器性能提出了越来越高的要求 (越来越高的分辨率,越来越复杂的编码器等)。但机器性能差异千差万别,同时用户的操作也不可预知,高级特性的使用和机器性能的矛盾客观存在。当用户机器负载过高时,我们需要适当降级视频特性来减轻系统复杂性,确保重要功能正常使用,提升用户体验。
大型互联网系统架构演进 BATJ其实无需神化
对于互联网系统架构的演进过程,相信很多人都有自己的理解,从单体应用到分布式应用、从开发框架到中间件技术、从容器化到云原生等等,不一而足。不过,在这庞杂的技术体系中,从宏观上理清其演变过程中的关键节点与可能面临的关键问题,对于我们理解一个大型互联网系统的架构,是很有裨益的。
网易严选跨域多目标算法演进
严选是网易旗下受新中产喜爱的电商品牌,覆盖居家生活、服饰鞋包、美食酒水、个护清洁、母婴亲子、运动户外、数码家电等品类。严选站内业务包括核心入口页、活动页、商详页,还有其他小流量的场景。目前这些场景都已经实现了个性化推荐算法的覆盖,严选电商推荐场景中算法建模面临多目标平衡、多场景数据如何共用等问题的挑战,针对这些挑战,本次主要分享跨域多目标在严选推荐算法中的实践。
因果推断在腾讯游戏中的应用
一些游戏业务中的运营策略和活动是难以对用户进行实验的,因为会带来异质化的体验引发用户的感受的差异。通常产品运营和策划会经验性地设计运营策略和活动,但随着精细化运营的思想的逐步深入,需要具体量化的数据表现以辅助决策, 而离线因果推断就是非常适配此类问题的方法论。
大型银行组装式应用在数字生态基座落地实践
业务能力包(PBC)是一种软件定义的最小化的业务功能,专注于解决特定的业务问题。业务用户在功能上可识别这些功能,旨在用于应用程序产品套件和自定义组装应用程序体验的构建基块。PBC是数据架构和一组服务、API和事件通道的有界集合,可以被视为微服务的聚合,在功能上是完整、自治的体系,具有四大特性。
谈谈数据目录应具备的四大能力
数据发现可以帮助确保数据湖不会变成数据沼泽。数据发现可以通过提供跨不同域的数据的分布式实时洞察力来取代现代数据目录,同时遵守一组统一的治理标准。数据发现通过根据一组特定消费者摄取、存储、聚合和使用数据的方式提供对数据的特定领域动态理解,从而取代了对数据目录的需求。
B站在实时音视频技术领域的探索与实践
B站直播的连麦PK、视频连线业务就提供了这个能力。主播看到的是对方主播实时的流(延迟400ms以内),而观众看到的是“准实时”的流(延迟2~5s左右)。本文讲述搭建这样一套系统需要了解的背景知识以及系统的整体架构,希望对大家有帮助。
一粒米的背后,是鲲鹏从“可用”到“好用”的跨越
要知道,在水稻成长过程中,从育种到栽培再到丰收,凝聚了无数科研人员的心血,科技正在为每一粒米护航,端牢中国饭碗注入力量。其中,“水稻适度加工技术”正在为水稻提质增收发挥着重要作用。
“研营销供服”的背后,是华为赋能伙伴开拓商业市场的决心
“一个人的力量是有限的,可是与伙伴合作的力量是无限的,华为正在把有限的力量,投入到无限的与伙伴合作中去,全方位支持伙伴自主拓展商业客户。”这是笔者针对华为商业市场战略的一句话总结。
爱奇艺混合云内网DNS实践
爱奇艺早期业务多数以私有云方式部署,随时间推移,私有云模式在成本、弹性及区域覆盖等方面开始显现不足,而公有云在近年的发展中成熟度不断提高,逐步满足爱奇艺业务需求,爱奇艺开始有计划的使用公有云资源,逐渐形成私有云与多家公有云结合的业务部署模式,即混合云模式。
大规模深度学习系统技术是如何应用的
AI引领的新一代信息技术,正驱动新一轮科技浪潮席卷而来。作为近年来国内发展迅速的移动互联网平台之一,小红书乘势而上,目前已经形成了以图文和短视频内容为主的超大型UGC社区。在这个独特而活跃的社区里,每天都会产生海量多模态数据及用户行为反馈,催生出兼具价值与挑战的新问题。
每周要闻速递|大厂活动扎堆,内容丰富多彩,新品琳琅满目
数字化转型趋势下,各行业领域的信息数据呈爆发式增长。随着人工智能、云计算、物联网、大数据等前端科技的不断发展和延伸,各科技产业呈现良好发展态势。无论是企业还是个人,在新时代的环境下,都应紧跟数字化转型的脚本,在未来的变局中赢得先机。基于此,IT168企业计算领域为大家奉上每周精选服务器、存储、数据中心等热点事件。接下来让我们看看本周企业计算领域都发生了哪些新鲜事儿。
阿里大促技术负责人:支撑双11也就那么一回事吧
进阿里以来一直听说一句话:“没有经过双11峰值验证过的技术都是玩具”。虽然有些夸张,但是不可否认的是,一年一度的双11,是技术的孵化器,也是技术同学最向往的阅兵场。我很荣幸,担任今年年中大促的技术一号位,也就是技术负责人。今天就来跟大家聊一聊我们作为一名技术在大促中要去做哪些技术保障,以及如何去做。也希望大家看完,就像身临其境的感受了一次大促。
深度学习在携程搜索词义解析中的应用
搜索是电商最重要的门面之一,大部分用户通过搜索来找到他们想要的商品,因此搜索是用户表达意图最直接的方式,也是转化率较高的流量来源之一。绝大部分的电商搜索是通过搜索框输入搜索词(Query)来完成,因此,搜索词的词义解析和意图理解成为了搜索中的重要一环。
业务瘦身42%+效率提升50% :去哪儿网业务重构DDD落地实践
随着集团战略方向调整与业务重组,酒店供应链也面临全新的调整。酒店基础数据业务系统是从国际团队接手,属于10年前系统架构,涉及20多个微服务,架构老旧、系统耦合严重及业务边界模糊,加上业务的快速发展,导致系统灵活性不足及无法快速承接产品需求,产研合作出现效率问题。