程序员去大公司面试，java培训北京哪家好

· 2021/7/5 7:43:36 · 次浏览

01 kafka入门

1.1 什么是kafka

1.2 kafka中的基本概念

1.2.1 消息和批次

1.2.2 主题和分区

1.2.3 生产者和消费者、偏移量、消费者群组

1.2.4 Broker和集群

1.2.5 保留消息

image.png

image.png

02 为什么选择kafka

2.1 优点

2.2 常见场景

2.2.1 活动跟踪

2.2.2 传递消息

2.2.3 收集指标和日志

2.2.4 提交日志

2.2.5 流处理

image.png

03 kafka的安装、管理和配置

3.1 安装

3.1.1 预备环境

3.1.2 下载和安装kafka

3.1.3 运行

3.1.4 kafka基本的操作和管理

3.2 Broker配置

3.3 硬件配置对kafka性能的影响

3.3.1 磁盘吞吐量/磁盘容量

3.3.2 内存

3.3.3 网络

3.3.4 CPU

3.3.5 总结

image.png

image.png

04 kafka的集群

4.1 为何需要kafka集群

4.2 如何估算kafka集群中Broker的数量

4.3 Broker如何加入kafka集群

image.png

05 第一个kafka程序

5.1 创建我们的主题

5.2 生产者发送消息

5.2.1 必选属性（bootstrap.servers、key.serializer、value.serializer）

5.3 消费者接受消息

5.3.1 必选参数（group.id）

5.4 演示示例

image.png

06 kafka的生产者

6.1 生产者发送消息的基本流程

6.2 使用kafka生产者

6.2.1 三种发送方式（发送并忘记、同步发送、异步发送）

6.2.2 多线程下的生产者

6.2.3 更多发送配置（acks、buffer.mempry、max.block.ms、retries、batch.size、linger.ms、compression.type、client.id、、、顺序保证）

6.3 序列化

6.3.1 自定义序列化需要考虑的问题

6.4 分区

6.4.1 自定义分区器

image.png

07 kafka的消费者

7.1 消费者的入门

7.1.1 消费者群组

7.1.2 消费者配置

7.2 消费者中的基础概念

7.2.1 消费者群组

7.2.2 订阅

7.2.3 轮询

7.2.4 提交和偏移量

7.3 消费者中的核心概念

7.4 kafka中的消费安全

7.5 消费者提交偏移量导致的问题

7.5.1 自动提交

7.5.2 手动提交（同步）

7.5.3 异步提交

7.5.4 同步和异步组合

7.5.5 特定提交

7.6 分区再均衡

7.7 优雅1退出

7.8 反序列化

7.9 独立消费者

image.png

image.png

08 深入理解kafka

8.1 集群的成员关系

8.2 什么是控制器

8.3 复制-kafka的核心

8.3.1 replication-factor

8.3.2 副本类型

8.3.3 工作机制

8.4 处理请求的内部机制

8.4.1 生产请求

8.4.2 获取请求

8.4.3 ISR

8.5 物理存储机制

8.5.1 分区分配

8.5.2 文件管理

8.5.3 文件格式

8.5.4 索引

8.5.5 超时数据的清理机制

image.png

image.png

09 可靠的数据传递

9.1 kafka提供的可靠性保证和架构上的权衡

9.2 复制

9.3 Broker配置对可靠性的影响

9.3.1 复制系数

9.3.2 不完全的首领选举

9.3.3 最少同步副本

9.4 可靠系统里的生产者

9.4.1 发送确认

9.4.2 配置生产者的重试参数

9.4.3 额外的错误处理

9.5 可靠系统里的消费者

9.5.1 消费者的可靠性配置

9.5.2 显式提交偏移量

image.png

10 kafka和Spring的整合

10.1 与Spring集成

10.1.1 pom文件

10.1.2 统一配置

10.1.3 生产者端

10.1.4 消费者端

image.png

11 SpringBoot和kafka的整合

image.png

12 kafka实战之削峰填谷

13 数据管道和流式处理（了解即可）

13.1 数据管道基本概念

13.2 流式处理基本概念

image.png

Spring全套教学资料

Spring是Java程序员的《葵花宝典》，其中提供的各种大招，能简化我们的开发，大大提升开发效率！目前99%的公司使用了Spring，大家可以去各大招聘网站看一下，Spring算是必备技能，所以一定要掌握。

资料领取方式：点击这里前往蓝色传送门

目录：

部分内容：

Spring源码

  • 第一部分 Spring 概述
  • 第二部分 核心思想
  • 第三部分 手写实现 IoC 和 AOP（自定义Spring框架）
  • 第四部分 Spring IOC 高级应用
    基础特性
    高级特性
  • 第五部分 Spring IOC源码深度剖析
    设计优雅
    设计模式
    注意：原则、方法和技巧
  • 第六部分 Spring AOP 应用
    声明事务控制
  • 第七部分 Spring AOP源码深度剖析
    必要的笔记、必要的图、通俗易懂的语言化解知识难点

脚手框架：SpringBoot技术

它的目标是简化Spring应用和服务的创建、开发与部署，简化了配置文件，使用嵌入式web服务器，含有诸多开箱即用的微服务功能，可以和spring cloud联合部署。

Spring Boot的核心思想是约定大于配置，应用只需要很少的配置即可，简化了应用开发模式。

  • SpringBoot入门
  • 配置文件
  • 日志
  • Web开发
  • Docker
  • SpringBoot与数据访问
  • 启动配置原理
  • 自定义starter

微服务架构：Spring Cloud Alibaba

同 Spring Cloud 一样，Spring Cloud Alibaba 也是一套微服务解决方案，包含开发分布式应用微服务的必需组件，方便开发者通过 Spring Cloud 编程模型轻松使用这些组件来开发分布式应用服务。

  • 微服务架构介绍
  • Spring Cloud Alibaba介绍
  • 微服务环境搭建
  • 服务治理
  • 服务容错
  • 服务网关
  • 链路追踪
  • ZipKin集成及数据持久化
  • 消息驱动
  • 短信服务
  • Nacos Confifig—服务配置
  • Seata—分布式事务
  • Dubbo—rpc通信

Spring MVC

目录：

部分内容：

  • Dubbo—rpc通信

[外链图片转存中…(img-Bs6U1p0G-1625441559832)]

[外链图片转存中…(img-kPcuah7l-1625441559833)]

Spring MVC

目录：

[外链图片转存中…(img-IKkNMV9V-1625441559833)]

[外链图片转存中…(img-Mx2cQ04a-1625441559834)]

[外链图片转存中…(img-W8OORC21-1625441559835)]

部分内容：

[外链图片转存中…(img-7b7cfPEQ-1625441559836)]

[外链图片转存中…(img-qbbXMw1L-1625441559836)]

热门文章

暂无图片
编程学习 ·
2022/1/17 15:17:17

C语言二分查找详解

二分查找是一种知名度很高的查找算法，在对有序数列进行查找时效率远高于传统的顺序查找。 下面这张动图对比了二者的效率差距。 二分查找的基本思想就是通过把目标数和当前数列的中间数进行比较，从而确定目标数是在中间数的左边还是右边，将查…
暂无图片
编程学习 ·
2022/1/17 10:17:14

GMX 命令分类列表

建模和计算操作命令： 1.1 . 创建拓扑与坐标文件 gmx editconf - 编辑模拟盒子以及写入子组(subgroups) gmx protonate - 结构质子化 gmx x2top - 根据坐标生成原始拓扑文件 gmx solvate - 体系溶剂化 gmx insert-molecules - 将分子插入已有空位 gmx genconf - 增加…
暂无图片
编程学习 ·
2022/1/17 0:17:09

一文高效回顾研究生课程《数值分析》重点

数值分析这门课的本质就是用离散的已知点去估计整体，就是由黑盒子产生的结果去估计这个黑盒子。在数学里这个黑盒子就是一个函数嘛，这门课会介绍许多方法去利用离散点最大化地逼近这个函数，甚至它的导数、积分，甚至微分方程的解。…
暂无图片
编程学习 ·
2022/1/16 19:17:06

在职阿里5年，一个28岁女软测工程师的心声

简单的先说一下，坐标杭州，14届本科毕业，算上年前在阿里巴巴的面试，一共有面试了有6家公司（因为不想请假，因此只是每个晚上去其他公司面试，所以面试的公司比较少） ​ 编辑切换为居中…
暂无图片
编程学习 ·
2022/1/16 14:17:04

字符串左旋c语言

目录 题目： 解题思路： 第一步： 第二步： 第三步： 总代码： 题目： 实现一个函数，可以左旋字符串中的k个字符。 例如： ABCD左旋一个字符得到BCDA ABCD左旋两个字符…
暂无图片
编程学习 ·
2022/1/16 9:16:58

设计模式--观察者模式笔记

模式的定义与特点 观察者（Observer）模式的定义：指多个对象间存在一对多的依赖关系，当一个对象的状态发生改变时，所有依赖于它的对象都得到通知并被自动更新。这种模式有时又称作发布-订阅模式、模型-视图模式&#xf…
暂无图片
编程学习 ·
2022/1/16 4:16:55

睡觉突然身体动不了，什么是睡眠痽痪症

很多朋友可能有这样的体验，睡觉过程中突然意识清醒，身体却动弹不了。这时候感觉非常恐怖，希望旁边有一个人推自己一下。阳光以前也经常会碰到这样的情况，一年有一百多次，那时候很害怕晚上到来，睡觉了就会出…
暂无图片
编程学习 ·
2022/1/15 23:16:49

深入理解C++智能指针——浅析MSVC源码

文章目录unique_ptrshared_ptr 与 weak_ptrstd::bad_weak_ptr 异常std::enable_shared_from_thisunique_ptr unique_ptr 是一个只移型别（move-only type，只移型别还有std::mutex等）。 结合一下工厂模式，看看其基本用法&#xff…
暂无图片
编程学习 ·
2022/1/15 18:16:46

@TableField(exist = false)

TableField(exist false) //申明此字段不在数据库存在，但代码中需要用到它，通知Mybatis-plus在做写库操作是忽略它。,.
暂无图片
编程学习 ·
2022/1/15 13:16:44

Java Web day15

第十二章文件上传和下载 一、如何实现文件上传 要实现Web开发中的文件上传功能，通常需要完成两步操作：一.是在Web页面中添加上传输入项；二是在Servlet中读取上传文件的数据，并保存到本地硬盘中。 需要使用一个Apache组织提供一个…
暂无图片
编程学习 ·
2022/1/15 8:16:42

【51nod 2478】【单调栈】【前缀和】小b接水

小b接水题目解题思路Code51nod 2478 小b接水 题目 输入样例 12 0 1 0 2 1 0 1 3 2 1 2 1输出样例 6解题思路 可以发现最后能拦住水的都是向两边递减高度（？） 不管两个高积木之间的的积木是怎样乱七八糟的高度，最后能用来装水的…
暂无图片
编程学习 ·
2022/1/15 3:16:37

花了大半天写了一个UVC扩展单元调试工具

基于DIRECTSHOW 实现的，用的是MFC VS2019. 详见：http://www.usbzh.com/article/detail-761.html 获取方法 加QQ群:952873936，然后在群文件\USB调试工具&测试软件\UVCXU-V1.0(UVC扩展单元调试工具-USB中文网官方版).exe USB中文网 USB中文…
暂无图片
编程学习 ·
2022/1/14 22:16:30

贪心（一）：区间问题、Huffman树

区间问题 例题一：区间选点 给定 N 个闭区间 [ai,bi]请你在数轴上选择尽量少的点，使得每个区间内至少包含一个选出的点。 输出选择的点的最小数量。 位于区间端点上的点也算作区间内。 输入格式 第一行包含整数 N，表示区间数。 接下来 …
暂无图片
编程学习 ·
2022/1/14 12:16:25

C语言练习实例——费氏数列

目录 题目 解法 输出结果 题目 Fibonacci为1200年代的欧洲数学家，在他的着作中曾经提到：「若有一只免子每个月生一只小免子，一个月后小免子也开始生产。起初只有一只免子，一个月后就有两只免子，二个月后有三只免子…
暂无图片
编程学习 ·
2022/1/14 7:16:20

Android开发(2)： Android 资源

个人笔记整理 Android 资源 Android中的资源，一般分为两类： 系统内置资源：Android SDK中所提供的已经定义好的资源，用户可以直接拿来使用。 用户自定义资源：用户自己定义或引入的，只适用于当前应用的资源…
暂无图片
编程学习 ·
2022/1/14 2:16:16

零基础如何在短时间内拿到算法offer

​算法工程师是利用算法处理事物的职业 算法（Algorithm）是一系列解决问题的清晰指令，也就是说，能够对一定规范的输入，在有限时间内获得所要求的输出。 如果一个算法有缺陷，或不适合于某个问题，执…
暂无图片
编程学习 ·
2022/1/13 21:16:11

人工智能：知识图谱实战总结

人工智能python，NLP，知识图谱，机器学习，深度学习人工智能：知识图谱实战前言一、实体建模工具Protegepython，NLP，知识图谱，机器学习，深度学习 人工智能：知识图…
暂无图片
编程学习 ·
2022/1/13 16:16:06

【无标题】

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注…