记一次线上超时的分析、排查过程
.css-1yuhvjn{margin-top:16px;}.css-3jt6os.FileLinkCard{-webkit-align-items:center;-webkit-box-align:center;-ms-flex-align:center;align-items:center;ba
内存泄漏-原因、避免以及定位
.css-1yuhvjn{margin-top:16px;}.css-3jt6os.FileLinkCard{-webkit-align-items:center;-webkit-box-align:center;-ms-flex-align:center;align-items:center;ba
海量小文件问题综述和解决攻略(三)NameNode、Hadoop Archive File等
.css-1yuhvjn{margin-top:16px;}.css-3jt6os.FileLinkCard{-webkit-align-items:center;-webkit-box-align:center;-ms-flex-align:center;align-items:center;ba
Hadoop JMX监控和预警
.css-1yuhvjn{margin-top:16px;}.css-3jt6os.FileLinkCard{-webkit-align-items:center;-webkit-box-align:center;-ms-flex-align:center;align-items:center;ba
史道术器|一种快速切入新领域的学习框架
今天分享一个鹅厂技术leader的成长心得,快速切入新领域的内功心法。正文11年正式入职以来,恰好赶上移动互联网叠加技术爆发的一个上升期;个人也跟着这个大趋势做了很多不同领域的学习和工作;大致可以分为后台开发、大数据、推荐算法、NLP、分布式机器学习等几个不同领域;后来自己又花了半年时间从0开始研究
上云是存储引擎技术的分水岭
.css-1yuhvjn{margin-top:16px;}.css-3jt6os.FileLinkCard{-webkit-align-items:center;-webkit-box-align:center;-ms-flex-align:center;align-items:center;ba
为什么很多公司都被 “伪数字化” 拖垮了?
作者|Mr.K整理|Emma来源|技术领导力(ID:jishulingdaoli)K哥的朋友F总,有一家年销售额过5个亿的快消品公司,旗下员工近200多人,SKU也有大几百。这么一大摊子事情,F总的管理边界已达极限,加上F总意识到数字化转型已经是时代趋势,就动起了企业数字化转型的念头。让IT部门负责
从 Kubectl Top 说起, 浅谈 Kubernetes 是如何进行资源监控的?
一.前言kubectltop可以很方便地查看node、pod的实时资源使用情况:如CPU、内存。这篇文章会介绍其数据链路和实现原理,同时借kubectltop阐述k8s中的监控体系,窥一斑而知全豹。最后会解释常见的一些问题:kubectltop为什么会报错?kubectltopnode怎么计算,和节
Kubernetes 的网络模型指南,发现之后太重要啦~
Kubernetes通过整合规模庞大的容器实例形成集群,这些容器实例可能运行在异构的底层网络环境中,如何保证这些容器间的互通是实际生产环境中首要考虑的问题之一。Kubernetes网络基本要求Kubernetes对容器技术做了更多的抽象,其中最重要的一点是提出pod的概念,pod是Kubernete
Kubernetes 1.25 中的重大更改和删除
随着Kubernetes的发展和成熟,有些功能可能会被弃用、删除或替换。Kubernetesv1.25包括几项重大更改和删除。KubernetesAPI移除和弃用流程Kubernetes项目有一个记录良好的特性弃用策略[1]。该策略规定:只有当同一API的更新、稳定版本可用并且API具有每个稳定性级
巧用 Kubernetes 中的 Leader 选举机制来实现自己的 HA 应用
在Kubernetes的kube-controller-manager,kube-scheduler,以及使用Operator的底层实现control
数据治理:数据质量的度量维度!
关于数据质量的度量维度,业内还没有一个统一的标准,以下分享几个常见的数据质量度量维度。1、记录数完整记录数:正在评估数据集的记录数值。检查记录数量是否与预期数量相负。如果不符,调查却是记录的根本原因并再次剖析数据集。2、完整性&填充率完整性或填
关于 Kubernetes 架构原理,这是我看过最清晰明了的一篇
打开这篇文章的同学,想必对Docker都不会陌生。Docker是一种虚拟容器技术,它上手比较简单,只需在宿主
理解 Kubernetes 集群内服务通信
深入了解支持服务间通信的3个原生K8s对象:ClusterIPService、DNS和Kube-Proxy。概述传统的服务到服务通信在进入Kubernetes生态系统之前,快速了解一下传统的服务到服务通信:通信是通过IP地址进行的,因此为了让服务A调用服务B,一种方法是为服务B分配一个静态IP地址。
有了这篇 Kubernetes 的介绍,它的原理秒懂!
kubernetes已经成为容器编排领域的王者,它是基于容器的集群编排引擎,具备扩展集群、滚动升级回滚、弹性伸缩、自动治愈、服务发现等多种特性能力。本文将带着大家快速了解kubernetes,了解
构建企业级云原生日志系统架构
一、概述❝ELK是三个开源软件的缩写,分别表示:Elasticsearch,Logstas
彻底搞懂 Kubernetes 中的 Cgroup
简介❝cgroups(是controlgroups的简写)是Linux内核的一个功能,用来限制、
“12306”的架构到底有多牛逼?
在网上看到一篇讲12306抢票的文章,我看完后,觉得文章写很完整。不仅给出了模拟场景的代码,而且也用压测工具测试了并发情况,是一个很好的学习案例,分享给大家共读。提纲以下内容转载自:https://juejin.im/post/5d84e21f6fb9a06ac824814912306抢票,极限并发
敲黑板!Kubernetes 架构核心知识点就这么多
目录一个目标:容器操作两地三中心四层服务发现五种Pod共享资源六个CNI常用插件七层负载均衡八种隔离维度九个网络模型原则一个目标:容器操作;两地三中心;四层服务发现;五种Pod共享资源;六个CNI常用插件;七层负载均衡;八种隔离维度;九个网络模型原则;十类IP地址;百级产品线;千级物理机;万级容器;
拥抱云原生,作业帮多云架构实践之路
作为一家深耕教育一线多年的科技公司,作业帮具有规模化和复杂化业务特点。为了支撑数千个应用服务,应对不同语言栈、同一语言栈不同业务需求的复杂性,作业帮早就开始探索多云架构。至于,云架构如何来做?IaaS、服务治理、PaaS、SaaS每层要如何设计?如何从单云架构迁移到多云?本文结合作业帮实际业务发展,