首页 > 解决方案 > Pod 无法访问 kubernets clusterIP 服务 (10.96.0.1)

问题描述

kubeadm最近我确实使用仿生ubuntu和lxc在我的旧双核AMD机器上安装了kubernetes 。这是我在网上找到的 lxc 个人资料:

config:
  limits.cpu: "2"
  limits.memory: 2GB
  limits.memory.swap: "false"
  linux.kernel_modules: nf_conntrack_ipv4,ip_tables,ip6_tables,netlink_diag,nf_nat,overlay,br_netfilter
  raw.lxc: "lxc.apparmor.profile=unconfined\nlxc.cap.drop= \nlxc.cgroup.devices.allow=a\nlxc.mount.auto=proc:rw
    sys:rw"
  security.nesting: "true"
  security.privileged: "true"
description: LXD profile for Kubernetes
devices:
  eth0:
    name: eth0
    nictype: bridged
    parent: lxdbr0
    type: nic
  root:
    path: /
    pool: default
    type: disk
name: k8s
used_by:
 - /1.0/containers/kmaster1
 - /1.0/containers/kworker1

我确实跑了:

# mount --make-rshared /
# lxc config device add "kmaster1" "kmsg" unix-char source="/dev/kmsg" path="/dev/kmsg"
# lxc config device add "kworker1" "kmsg" unix-char source="/dev/kmsg" path="/dev/kmsg"

由于kube-proxy此错误消息,无法运行:

write /sys/module/nf_conntrack/parameters/hashsize: operation not supported

所以我确实通过编辑kube-proxy配置并将连接跟踪设置为零来修复它。之后我确实部署flannel为 cni。我的 Pod 现在无法访问默认集群 IP 10.96.0.1,但是服务在那里:

#kubectl describe svc kubernetes
Name:              kubernetes
Namespace:         default
Labels:            component=apiserver
                   provider=kubernetes
Annotations:       <none>
Selector:          <none>
Type:              ClusterIP
IP Families:       <none>
IP:                10.96.0.1
IPs:               10.96.0.1
Port:              https  443/TCP
TargetPort:        6443/TCP
Endpoints:         10.46.157.182:6443
Session Affinity:  None
Events:            <none>

可能禁用连接跟踪会产生问题并且正在使用NAT,我不知道。有什么想法可以解决吗?

标签: kuberneteslxcflannellxd

解决方案


我分两步解决了这个问题:首先我确实将kube-proxy配置更改为默认值。然后我确实写入了HOST手动 kube-proxy 所需的/sys/module/nf_conntrack/parameters/hashsize哈希大小。然后删除 kube-proxy pod 并让它部署以再次自动创建主题。主要问题是Flannel配置。flannel 部署不会查找我的集群默认 IP 范围并将其设置为 IP 范围10.244.0.0/16 所以我确实编辑了它的配置并将其更改为我的范围:

kubectl edit cm -n kube-system kube-flannel-cfg

再次,删除所有 flannel pod 并让它部署以再次自动创建它们。

现在我的 pod 可以访问 kubernetes 默认 clusterIP 服务。


推荐阅读