Spark 经典面试题汇总《一》
大家好我是球球,面试的季节又要到了,球球给大家总结了一些Spark的经典面试题。
PostgreSQL 15 stats collector 在取消后是如何实现的原有功能的
在POSTGRESQL 15 有一个重要的功能去掉了stats collector 在说为什么去掉这个stats collector 的问题前,我们先得弄清出stats collector 到底是一个什么功能。
超大数据量迁移方案,XTTS vs OGG
正好近期和朋友讨论了一下 XTTS 和 OGG 对超大型数据库的迁移方案对比。所以就写下来记录一下。
MYSQL 5.7 升级 8.0 后的 由于字符集导致的大问题 ?
MYSQL 8.0 已经很多年了,但是,但是,但是,还有很多公司和业务项目在MYSQL5.6 ,5.7上继续奋斗,这还不是一个重要的问题,重要的问题是早期在MYSQL 5.7 上的一些基础,并未进行改变后到了MYSQL 8 上的使用一段时间产生的问题。
浅谈因果推断与在内容平台的实践
因果推断能够帮助我们解决 A/B 测试无法处理的问题,或者观察到预测模型无法解释的细节。本文将通过简洁生动的例子,介绍因果推断的基础知识和常见应用,希望能够帮助大家快速上手因果模型。
Flink CDC+Kafka 加速业务实时化
广义概念上,能够捕获数据变更的技术统称为 CDC(Change Data Capture)。通常我们说的 CDC 主要面向数据库的变更,是一种用于捕获数据库中数据变化的技术。
阿里云机器学习 AutoML 引擎介绍与应用
在算法行业有这样一种说法,80% 的时间用在做数据清洗和特征工程,仅有 20% 的时间用来做算法建模,其核心是在说明数据和特征所占比重之大。与此同时,越来越多的数据从业者们也希望能够降低机器学习的入门门槛,尤其是降低对特定领域的业务经验要求、算法调参经验等。基于这一背景,AutoML 应运而生。
大曝光!从RabbitMQ平滑迁移至Kafka架构设计方案!
历史原因,公司存在多个 MQ 同时使用的问题,我们中间件团队在去年下半年开始支持对 Kafka 和 Rabbit 能力的进行封装,初步能够完全支撑业务团队使用。
Ubuntu linux 为啥要开始选择ubuntu LINUX
其实纠结这个问题也是很长时间了,因为一个玩数据库的讨论系统的问题,也是在是不合场景。但没有办法,搞数据库的数据库也的在操作系统上运行,尤其是开源数据库,POSTGRESQL MYSQL 等,这些数据库很多都和操作系统粘合,操作系统的好坏,对于这些数据库是至关重要的。
中原银行 AI 平台建设实践
本文将分享中原银行在 AI 平台建设过程中的一些实践和思考。
美团二面:Redis与MySQL双写一致性如何保证?
有位好朋友去美团面试。他说,被问到Redis与MySQL双写一致性如何保证?这道题其实就是在问缓存和数据库在双写场景下,一致性是如何保证的?本文将跟大家一起来探讨如何回答这个问题。
Teradata,不仅是数仓的黄埔军校,更是数据分析服务的天花板!
Teradata最近宣布退出中国,但Teradata大规模从国内撤出其实从2019年就开始了,当时我作为甲方经历了与Teradata分手的整个过程,其撑了3年多已属不易。
MySQL 8.0 20个 InnoDB 及数据字典相关的新特性
本篇将聚焦于 MySQL 8.0 InnoDB 及数据字典相关的新特性。这些新特性涉及的范围包括:Redo log、事务调度算法、自增主键、回滚表空间、死锁、临时表空间、Doublewrite Buffer、数据字典、原子 DDL、information_schema、备份等。
Percona 8.0.30中"show engine innodb status"导致coredump排查及分析
GreatSQL合并Percona-Server 8.0.30的Beta版测试中,QA报了一个crash的bug
MYSQL collation 选好还能换吗
Collation 主要的作用是什么,排序。 数据库中的字符众多,而在这里很多的查询中都对这些符号进行一些比对的工作,如 A = a , B > BA , c < v 等等在查询中进行的条件输入的工作,而字符和字符之间如何进行比对,这个就全部依靠我们的collation 了。
故障分析 | redis cluster 从库无法自动恢复同步案例一则
线上有一套6节点 redis cluster ,6分片 * 2副本,每个节点上2个实例,端口号分别为7000和7001。 腊月29凌晨,有个节点硬件故障导致自动重启,重启后该节点上的实例变成从库,却迟迟无法完成和新主库的同步进而触发报警。 redis 版本为5.0。
小红书广告智能创意能力构建过程详解
经过一年多的探索与建设,我们构建了一套完整的广告创意生产与优选能力,帮助客户一站式投放广告创意。本文将介绍我们在小红书广告智能创意方向进行的能力构建和技术解决方案。
京东实时数据产品应用实践
本文根据京东集团数据计算平台部产品规划负责人王威讲座整理,本次分享题目为《京东实时数据产品应用实践》。
TiDB在转转公司的发展历程
转转是PingCAP最早的一批用户之一,见证了TiDB的发展,自身也沉淀了不少经验。
Java字节码,你还可以搲的更深一些!
要学习字节码,不能仅仅靠看枯燥的文档。本文会介绍几个有用的工具,可以非常容易的上手,来实际观测class文件这个小魔兽,助你搲的更深一些。