皮皮网

1.一次“不负责任”的排查剖析 K8s 网络故障排查经验分享
2.KubeVirt网络源码分析
3.三种不同场景下的 Kubernetes 服务调试方法
4.成为一名k8s专家需要掌握哪些知识？当我读完k8s源码之后总结
5.kubelet 启动流程分析
6.听GPT 讲K8s源代码--cmd(一)

一次“不负责任”的 K8s 网络故障排查经验分享

       一次K8s网络故障排查的实战分享

       作者骆冰利在处理一起客户K8s集群扩容失败问题时，揭示了深入排查的源码源码整个过程。客户使用的排查剖析是1..版本的Kubernetes，宿主机内核为4.（CentOS 8.2），源码源码遇到节点无法加入集群的排查剖析问题。故障现象表现为新节点无法通过master service VIP访问，源码源码rnweex源码但直接访问master hostIP则正常。排查剖析以下是源码源码排查的关键步骤：

       首先，常规排查显示iptables模块加载正常，排查剖析iptables转发规则默认接受，源码源码宿主机和容器网络都正常。排查剖析接着，源码源码通过ipvsadm发现kube-proxy在启动后存在异常连接，排查剖析syn_recv状态，源码源码表明K8s service网络出现问题。排查剖析

       进一步分析，通过tcpdump抓包发现SYN包未从本地发送，初步锁定问题在kube-proxy。查看kube-proxy日志后，发现与iptables-restore命令的执行异常有关，涉及到KUBE-MARK-DROP链的创建问题。深入源码后，发现1..版本在特定条件下存在逻辑缺陷，导致报错。aj留言本源码

       问题的根源在于，CentOS 8.2的4.内核环境下的iptables配置与kube-proxy容器内的配置不一致，因为Kubernetes的kubelet也在操作iptables。解决办法是升级内核至3.或5.0+，或者更新Kubernetes版本至1..以上。

       总结这次经验，对于K8s网络故障，关键在于理解内核、kube-proxy、kubelet之间的交互，以及选用正确的工具，如iptables或nftables。希望这个案例能帮助其他开发者在遇到类似问题时能更快定位和解决。

       如果想了解更多Erda项目信息，可以添加小助手微信（Erda）加入交流群。Erda是一个开源的云原生PaaS平台，欢迎关注、贡献代码和Star支持。

       Erda Github 地址 | Erda Cloud - 企业级数字平台

KubeVirt网络源码分析

       在KubeVirt的网络架构中，virt-launcher与虚拟机之间建立了一对一的对应关系，即在每个pod中运行一台虚拟机。本文将聚焦于网络组件的分析。

       下图展示了KubeVirt的本地验证码源码网络体系，三个实线框表示从外到里依次为：Kubernetes工作节点、工作节点上的POD、以及POD中运行的虚拟机。三个虚线框从下到上分别为：Kubernetes网络（Kubernetes CNI负责配置）、libvirt网络，以及虚拟机网络。本文仅关注libvirt网络与虚拟机网络。

       在kubevirt中，LibvirtDomainManager类的preStartHook方法在虚拟机启动前执行，通过调用SetupPodNetwork方法为虚拟机准备网络环境。

       SetupPodNetwork方法执行三个关键步骤，分别对应discoverPodNetworkInterface、preparePodNetworkInterfaces和StartDHCP方法。discoverPodNetworkInterface方法收集pod的网络接口信息，包括IP和MAC地址。这些信息将通过DHCP协议传递给虚拟机。为确保虚拟机能接收这些信息，preparePodNetworkInterfaces方法对容器网络进行相应调整。

       此方法会启动一个只提供一个DHCP客户端的DHCP服务器（SingleClientDHCPServer）。DHCP服务提供给虚拟机的不仅仅是IP地址，还包括网关信息和路由信息。此过程确保虚拟机在KubeVirt环境中能够正常访问网络。

       本文以KubeVirt 0.4.1版本的et源码阅读器源码为例分析网络部分，后续将对更最新版本的KubeVirt virt-lancher网络功能进行深入探索。

三种不同场景下的 Kubernetes 服务调试方法

       在开发和调试 Kubernetes 生产环境下的服务时，会遇到各种调试需求。本文将介绍三种不同场景下的解决方案和相应的工具。

       基本配置

       假设我们有三个服务：service-front 面向外部，通过服务暴露；service-front 后端是 service-middle，后者又依赖 service-back。通信通过 Kubernetes 服务进行。安装配置如下：

       源代码可在：github.com/erkanerol/se...

       工具1：kubectl port-forward

       场景：开发者希望在不影响其他服务的情况下，通过 service-back 直接发送请求并查看结果，但 service-back 不对外公开。

       解决方案：使用 kubectl 的 port-forward 功能创建本地到集群的隧道。

       步骤：

       在终端运行：kubectl port-forward service-back: localhost:

       在另一个终端中，尝试用 curl 访问 localhost: 来验证连接。

       工具2：kubefwd

       场景：开发者希望在本地 IDE 中设置断点调试 service-front，但 service-front 和依赖服务难以本地模拟。

       解决方案：kubefwd 可以批量端口转发并管理本地 DNS，简化配置。

       步骤：

       运行：kubefwd service-front:

       使用 sudo，配置 KUBECONFIG，运行本地 front 应用并设置断点。

       在集群中测试服务交互。

       工具3：telepresence

       场景：开发者需要在本地调试 service-middle，网页源码中的跳转同时 service-middle 依赖 service-back，并且集群环境不易模拟。

       解决方案：telepresence 提供双向通道，支持本地服务与集群服务间的调试。

       步骤：

       删除集群中的 service-middle，运行 telepresence。

       本地运行 middle 应用并设置断点。

       通过集群临时 Pod 发送请求到 service-front。

       总结：

       对于不暴露服务的访问，kubectl port-forward 足够。

       本地调试时，kubefwd 管理 DNS，提供单向通道。

       需要双向通道和依赖服务调试时，使用 telepresence。

成为一名k8s专家需要掌握哪些知识？当我读完k8s源码之后总结

       要成为一名Kubernetes（简称k8s）专家，需要系统性地掌握一系列关键知识与技能。首先，深入理解容器技术，包括容器的底层原理和实现机制，这是Kubernetes能够高效管理资源的基础。接着，了解Kubernetes的计算模型，熟悉如何在集群中调度和管理容器。在存储方面，需要掌握如何在Kubernetes中配置和使用不同类型的存储卷，以支持各种工作负载的需求。

       网络管理在Kubernetes中同样重要，包括掌握如何配置网络策略、服务发现和负载均衡，确保服务间的通信流畅。此外，了解Kubernetes的插件机制，即如何利用和扩展Kubernetes的生态系统，接入第三方服务和工具，是提升Kubernetes使用灵活性的关键。

       深入研究Kubernetes的源码理解，不仅有助于开发者更精准地定位和解决问题，还能在定制和优化Kubernetes部署时发挥重要作用。学习Kubernetes的编排能力，包括配置Pod、Service、Deployment等核心资源，以及理解如何利用Kubernetes的自动化功能，如自动扩展、滚动更新等。

       在Kubernetes的自定义资源定义（CRD）开发方面，掌握如何定义和操作自定义的资源类型，以满足特定业务场景的需求，是提高Kubernetes应用复杂度和灵活性的重要技能。最后，对Prometheus等监控工具的全组件学习，能够帮助Kubernetes专家构建全面的监控和报警机制，确保集群的稳定运行。

       通过上述知识体系的学习和实践，一名Kubernetes专家将能够熟练地规划、部署、管理和优化大规模的Kubernetes集群，应对各种复杂场景和挑战，成为企业级分布式系统运维和开发的高效工具。

kubelet 启动流程分析

       kubernetes版本：v1.

       kubelet启动流程从其main函数开始，调用NewKubeletCommand方法获取配置参数并校验，为参数设置默认值。

       Run方法仅调用run方法执行后续启动逻辑，run方法为kubelet启动配置及检查工作，主要逻辑涉及基本配置和检查。

       RunKubelet调用createAndInitKubelet方法，完成kubelet组件初始化，随后调用startKubelet启动组件。

       createAndInitKubelet方法调用三个方法实现kubelet初始化，NewMainKubelet方法初始化kubelet依赖模块，每个模块功能在前文“kubelet架构浅析”中介绍过。

       startKubelet通过调用k.Run启动kubelet所有模块和主流程，启动es（K8s）的cmd目录中，包含了一系列命令行入口文件或二进制文件，它们主要负责启动、管理和操控Kubernetes相关组件或工具。这些文件各司其职，如：

       1. **check_cli_conventions.go**: 该文件作用于检查CLI约定的规范性，确保命令行工具的一致性和易用性。它提供函数逐项验证命令行工具的帮助文本、标志名称、标志使用、输出格式等，输出检查结果并提供改进意见。

       2. **cloud_controller_manager**: 这是启动Cloud Controller Manager的入口文件。Cloud Controller Manager是Kubernetes控制器之一，负责管理和调度与云平台相关的资源，包括负载均衡、存储卷和云硬盘等。

       3. **kube_controller_manager**: 定义了NodeIPAMControllerOptions结构体，用于配置和管理Kubernetes集群中的Node IPAM（IP地址管理）控制器。此文件包含配置选项、添加选项的函数、应用配置的函数以及验证配置合法性的函数。

       4. **providers.go**: 用于定义和管理云提供商的资源。与底层云提供商进行交互，转换资源对象并执行操作，确保Kubernetes集群与云提供商之间的一致性和集成。

       5. **dependencycheck**: 用于检查项目依赖关系和版本冲突，确保依赖关系的正确性和没有版本冲突。

       6. **fieldnamedocs_check**: 检查Kubernetes代码库中的字段名称和文档是否符合规范，确保代码的规范性和文档的准确性。

       7. **gendocs**: 生成Kubernetes命令行工具kubectl的文档，提供命令的用法说明、示例、参数解释等信息，方便用户查阅和使用。

       8. **genkubedocs**: 生成用于文档生成的Kubernetes API文档，遍历API组生成相应的API文档。

       9. **genman**: 用于生成Kubernetes命令的man手册页面，提供命令的说明、示例和参数等信息。

       . **genswaggertypedocs**: 生成Kubernetes API的Swagger类型文档，提供API的详细描述和示例。

       . **genutils**: 提供代码生成任务所需的通用工具函数，帮助在代码生成过程中创建目录和文件。

       . **genyaml**: 为kubectl命令生成YAML配置文件，方便用户定义Kubernetes资源。

       . **importverifier**: 检查代码中的导入依赖，并验证其是否符合项目中的导入规则。

       . **kube_apiserver**: 实现kube-apiserver二进制文件的入口点，负责初始化和启动关键逻辑。

       . **aggregator**: 为聚合API提供支持，允许用户将自定义API服务注册到Kubernetes API服务器中，实现与核心API服务的集成。

       这些文件共同构建了Kubernetes命令行界面的底层逻辑，使得Kubernetes的管理与操作变得更加高效和灵活。