要成为架构师,你需要掌握这些知识体系!
而很多的架构师都是研发自己在机遇巧合下,遇到大项目、参与其中、趟了坑、解决了问题,最终形成自己的知识体系和解决问题的能力之后才成长起来的。那么如果没有这些条件,你还有没有途径成为一名架构师呢? 当然有,在我看来,你要先掌握架构师的知识体系,然后再通过实践进行检验,这样才能逐步成长为一名架构师。
如何简单实现ELT?
数据集成可以通过各种技术来实现,本文主要介绍如何用ELT(extract, load, transform)实现数据集成。区别于传统的ETL和其他的技术,ELT非常适合为数据湖仓或数据集市提供数据管道,并且可以用更低的成本,根据需求,随时对大量数据进行分析。
Java限流及常用解决方案
今天给大家分享一篇关于Java限流解决方案的文章,文中分享了不少实战相关的经验,值得一读。
Debias 技术在金融推荐场景下的应用
推荐系统中存在闭环反馈循环,受到各种 bias 的影响非常显著。针对金融场景的特殊性,我们提出了样本层面上自采样纠偏框架 SSTE 和特征层面上偏置代理表征解耦纠偏框架,较好地平衡了模型的预测精度和无偏性,在多个业务场景的核心指标上取得了明显收益。
数据产品:CDP(客户数据平台)必备的产品能力
随着数字化转型、数字中国建设的深入,CDP(Customer Data Platform)逐步成为精细化运营降本增效的利器。市面不乏商业化的CDP产品直接为中小企业提供产品和服务,如神策数据、火山引擎等。一些体量大一点的公司可能会基于用户画像衍生出来,自研CDP。如果说想要做一款CDP产品,那究竟要覆盖哪些功能呢?
TCP 三次握手和四次挥手的面试题(2023最新版)
重新整理了一版 TCP 三次握手和四次挥手的面试题(2023最新版)。
手把手教小伙伴们使用 Nginx 部署 TienChin 项目!
小伙伴们知道,对于这种前后端分离的项目,我们在实际部署的时候,可以按照前后端分离的方式来部署,也可以按照前后端不分的方式来部署。接下来两种不同的部署方式我都和小伙伴们来分享一下。
字节面试,有点招架不住啊!
面试题基本上网络、操作系统、mysql、redis 的问题,图解网站的内容都有。
世界上只有两个 Linux 发行版:Arch Linux 与其它 | Linux 中国
GPT-4震撼发布:多模态大模型,直接升级ChatGPT、必应,开放API,游戏终结了?
ChatGPT 点燃了科技行业的明灯,GPT-4 能燎原吗?
故障自愈是不是应该尽可能让数据库自己来做
故障自愈确实是数据库运维自动化系统中最难做的功能,去年和一个客户交流DBAIOPS的时候,客户问我你们的智能诊断准确率有多高?我说受限于算法和知识图谱目前的规模,我们的DBAIOPS系统的智能诊断的能力目只能能大致指向几个可能的方向,而无法直接定位到根因。
故障分析 | MySQL 备份文件静默损坏一例分析
线上一套 MySQL 计划升级到 8.0 ,通过备份还原搭建一个测试环境,用于升级测试。数据库采用 xtrabackup 每天进行全备,压缩备份文件约 300G ,解压到一半就报错了。
得物社区 golang 灰度环境探索和实践
灰度发布可以在服务正式上线前,提前用小流量对新功能进行验证,提前发现问题,避免故障影响所有用户,对业务稳定性非常有价值。 得物社区后端技术栈以 golang 为主,本文记录了社区后端在灰度环境建设过程中遇到的挑战,以及对应的探索和实践。
银行业信创架构设计规划及实践 | 架构进阶
本文分析了银行业信创架构设计中的突出难点,结合实践经验,建议在信创架构设计中要坚守基本满足业务需求、相对主流成熟技术、适当采取多技术栈和兼容性广生态健全的设计原则,采取优先借鉴同业案例、符合技术发展趋势、匹配内部科技规划、选取共性搭建底座和支持全栈留有余地的选型策略。最后以全栈信创云建设为例,探索了银行业信创架构规划的相关实践工作,以期为同业提供有益参考。
因系统故障,美国逾10000架次航班延误
美东时间1月11日早间,美国联邦航空管理局(下称FAA)一个关键系统出现故障,导致全美范围内的航班停飞。虽然随后FAA通过社媒更新消息称,全美航班的停飞令已经取消,但这个关键系统的故障,使得美国航空当局开始重新审视维持美国空中交通系统的弹性问题。
PostgreSQL 15 让多年被DISS的PG 安全画上圆满的句号
提起POSTGRESQL 中的安全问题其中最容易被人Diss 的最大BUG 并不是autovacuum 之类的部分,排在首位的被DISS的最大的问题是安全的问题,POSTGRESQL 中由于丰富的数据库管理层级设定,中的关于schema的设定
数据治理到底治什么?有没有前景
数字中国建设规划之后,两会又确定了国务院机构改革的方案,组建国家数据局,朋友圈纷纷被数据人刷屏,这可能算的上是数据人的一个高光时刻了。近期也有粉丝咨询数据治理工作的岗位前景,有没有必要考数据治理的DAMA证书,今天就花点时间聊聊数据治理那些事。
gRPC 中的异常该如何处理?
今天来和小伙伴们聊一聊该如何处理 gRPC 中遇到的异常。
单测无用论,这是真的吗?
工作了快 10 年了,跟研发小伙伴聊起单测,绝大多数人的反应是 —— 单测没啥用,写单测就是为了应付单测覆盖率的 KPI 指标。恰好我最近在团队落地单测相关的内容,经过一段时间的持续迭代,我对单测的看法也从一开始的 没啥用 到后面的 好像有点东西,再到最后的 卧槽,真牛逼!。基本上随着单测写得越深入,我对单测就越发重视。
电商 SaaS 全渠道实时数据中台最佳实践
本文整理自聚水潭数据专家张成玉,聚水潭高级数据工程师应圣楚,在 FFA 2022 行业案例专场的分享。