ITPub博客

本节视频分享了kafka技术，包括kafka的介绍，消息队列的形式，kafka架构中几个重要的角色，如何去实地搭建kafka集群以及如何使用命令行操作kafka，最后通过代码演示了如何通过java代码去操作kafka。

本视频将分享大数据体系中的分布式协调服务：Zookeeper。

这是一篇关于元数据在大数据领域中的文章。它探讨了元数据的定义、作用以及在大数据管理中的关键作用。文章涵盖了元数据类型、管理挑战以及未来发展趋势，文章指出元数据在大数据时代的重要性，并展望了技术创新为元数据管理带来的机遇。

今天分享几个算法题以及题解。

本文将分享lacus项目如何部署到自己的服务器上，包括前端和后端项目。

本节课程将介绍Hadoop技术中又非常重要的一个组成部分：资源调度（YARN）。本节视频介绍了什么是YARN，HDFS的组成架构，YARN的工作机制。另外简单介绍了一下MapReduce，下节课将详细介绍MapReduce。

本节课程将介绍Hadoop技术中非常重要的一个组成部分：数据存储（HDFS）。本节视频介绍了什么是HDFS，HDFS的优缺点，HDFS的组成架构，HDFS的命令行操作以及API操作以及HDFS的读写数据流程。

今天将从Hadoop开始走进大数据的世界。本章内容将介绍Hadoop的起源，三大发行版本，Hadoop生态以及Hadoop环境的搭建。只有真正搭建过Hadoop，才会对其有更加深刻的理解。所以，开始动手搭建Hadoop集群吧。

本系列是大数据技术学习系列，共包含20章，几乎涉及到目前大部分主流的大数据技术。课程主要以简单原理和实操经验为主，想了解更深层次的源码部分，可以私信我一起探讨。 本系列视频适合想入门大数据的同学；也适合已经从事大数据行业，想了解更多大数据技术的同学。如果在观看过程中发现有错误的观点，欢迎在评论区指正，共同交流。 第一节课程将带领大家了解大数据的起源，大数据的特点，作用以及应用场景，走进大数据的世界。

本文分享了在macos arm 架构下，使用 Vmware Fusion虚拟机如何配置Centos9静态ip。

本文将分享在使用Flink on Yarn时如何确定TaskManager数量；以及Yarn分配的内存是如何计算的。

如何在线程中使用ThreadLocal来传递对象，简单易懂。

本文将对 Flink CDC Mysql Connector的启动方式做出解释，以及如何使用 Flink Sql 和 Flink Datastream 的方式

本文将分享数据中台的一些概念，基础设施，组件，架构，应用以及目前面临的一些挑战和解决方案。

本文将分享如何基于 Doris 的 ODS 层来做实时数据分析，其他数仓方法类似。

本文主要介绍了 Hadoop Yarn 的由来、组成架构、任务提交流程、调度器、资源管理以及核心参数配置。

使用 supervisor 来管理进程，可以实现进程宕机自动重启。

本文分享了几种常见的Doris负载均衡配置，并且着重介绍了通过ProxySQL的方式来实现负载均衡。