沈玉彪 發表於 2021-4-29 15:12:06

K8S二进制部署的K8S(1.15)部署hpa功能

<p>友情提醒:</p>
<div class="jb51code">
<pre class="brush:plain;">
#不要把启动文件中例如的
--authentication-token-webhook=true
# 自作聪明的改为
--authentication-token-webhook true
# 不然。。。。。</pre>
</div>
<h2>一、生成metrics-proxy证书</h2>
<p>在管理机上生成证书配置文件及证书</p>
<div class="jb51code">
<pre class="brush:plain;">
# metrics-proxy证书请求
cat &gt;metrics-proxy-csr.json &lt;&lt;'EOF'
{
"CN": "aggregator",
"hosts": [],
"key": {
    "algo": "rsa",
    "size": 2048
},
"names": [
    {
      "C": "CN",
      "ST": "beiJing",
      "L": "beiJing",
      "O": "zq",
      "OU": "ops"
    }
]
}
EOF

#生成mertic证书
cfssl gencert \
    -ca=ca.pem \
    -ca-key=ca-key.pem \
    -config=ca-config.json \
    -profile=peer \
    metrics-proxy-csr.json | cfssl-json -bare metrics-proxy
   
#分发证书到master节点
# profile=peer 中的peer,依据自己的配置改,反正需要有server端和client的证书权限
#略,目录在 /opt/kubernetes/server/bin/cert/</pre>
</div>
<h2>二、修改apiserver启动配置</h2>
<p>修改apiserver启动脚本,添加以下参数:</p>
<div class="jb51code">
<pre class="brush:plain;">
vim /opt/kubernetes/server/bin/kube-apiserver.sh

--requestheader-allowed-names "" \
--requestheader-extra-headers-prefix X-Remote-Extra- \
--requestheader-group-headers X-Remote-Group \
--requestheader-username-headers X-Remote-User \
--proxy-client-cert-file ./cert/metrics-proxy.pem \
--proxy-client-key-file./cert/metrics-proxy-key.pem \</pre>
</div>
<p>参数说明:</p>
<p><code>--requestheader-XXX --proxy-client-XXX</code>:</p>
<p>是 kube-apiserver 的 aggregator layer 相关的配置参数,metrics-server &amp; HPA 需要使用;</p>
<p><code>--requestheader-client-ca-file</code>:</p>
<p>用于签名 --proxy-client-cert-file 和 --proxy-client-key-file 指定的证书(ca证书),在启用了 metric aggregator 时使用;</p>
<p>注1:</p>
<p>如果 --requestheader-allowed-names 不为空,则--proxy-client-cert-file 证书的 CN 必须位于 allowed-names 中,默认为 aggregator;如果 kube-apiserver 机器没有运行 kube-proxy,则还需要添加 --enable-aggregator-routing=true 参数</p>
<p>重启apiserver</p>
<div class="jb51code">
<pre class="brush:plain;">
supervisorctl restart kube-apiserver</pre>
</div>
<h2>三、kubelet参数修改并重启</h2>
<div class="jb51code">
<pre class="brush:plain;">
vim /opt/kubernetes/server/bin/kubelet.sh
#添加参数:
--authentication-token-webhook=true \
如果有参数:--read-only-port=0,则需删除

#重启服务:
supervisorctl restart kube-kubelet</pre>
</div>
<h2>四、下载metrics-server镜像及配置清单</h2>
<p>A 获取配置清单(6个)</p>
<p>项目地址:https://github.com/kubernetes/kubernetes/tree/master/cluster/addons/metrics-server</p>
<p>配置文件有两种,单机版和集群版获取方式:<br />
https://github.com/kubernetes-incubator/metrics-server (单机)<br />
https://github.com/kubernetes/kubernetes/tree/master/cluster/addons/metrics-server (集群)<br />
集群版可以自动扩容metrics自己,推荐使用</p>
<div class="jb51code">
<pre class="brush:plain;">
# 创建目录
mkdir -p/data/k8s-yaml/metrics/
cd /data/k8s-yaml/metrics/

# 下载配置文件
metrics_url='https://raw.githubusercontent.com/kubernetes/kubernetes/v1.14.1/cluster/addons/metrics-server'
wget $metrics_url/auth-delegator.yaml
wget $metrics_url/auth-reader.yaml
wget $metrics_url/metrics-apiservice.yaml
wget $metrics_url/metrics-server-deployment.yaml
wget $metrics_url/metrics-server-service.yaml
wget $metrics_url/resource-reader.yaml</pre>
</div>
<p>B 修改启动参数</p>
<div class="jb51code">
<pre class="brush:plain;">
## 修改metrics-server-deployment.yaml
###1 mertics-server部分修改启动参数镜像地址
containers:
      - name: metrics-server
      image: registry.cn-hangzhou.aliyuncs.com/google_containers/metrics-server-amd64:v0.3.1
      command:
      - /metrics-server
      - --metric-resolution=30s
      - --kubelet-insecure-tls
      - --kubelet-preferred-address-types=InternalIP,Hostname,InternalDNS,ExternalDNS,ExternalIP
      
###2 metrics-server-nanny部分修改镜像地址及启动参数
......
- name: metrics-server-nanny
      image: registry.cn-hangzhou.aliyuncs.com/google_containers/addon-resizer:1.8.4
.....
command:
          - /pod_nanny
          - --config-dir=/etc/config
          - --cpu=100m
          - --extra-cpu=0.5m
          - --memory=100Mi
          - --extra-memory=50Mi
          - --threshold=5
          - --deployment=metrics-server-v0.3.1
          - --container=metrics-server
          - --poll-period=300000
          - --estimator=exponential
      
### 在新的版本中,授权文内没有 node/stats 的权限,需要手动去添加resource-reader.yaml
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
name: system:metrics-server
rules:
- apiGroups:
- ""
resources:
- pods
- nodes
- nodes/stats## 添加此参数
- namespaces</pre>
</div>
<p>mertics-server镜像参数解释:</p>
<p>--kubelet-insecure-tls:</p>
<p>不验证客户端证书</p>
<p>--kubelet-preferred-address-types</p>
<p>metrics-server连节点时默认是连接节点的主机名,但是coredns里面没有物理机主机名的解析,需要加个参数,让它连接节点的IP</p>
<p>C 应用配置清单并验证</p>
<div class="jb51code">
<pre class="brush:plain;">
kubectl apply -f .</pre>
</div>
<h2>五、结果验证</h2>
<div class="jb51code">
<pre class="brush:plain;">
# kubectl top nodes
NAME            CPU(cores)   CPU%   MEMORY(bytes)   MEMORY%
xx01.host.com   411m         2%   36881Mi         57%
xx02.host.com   509m         3%   33127Mi         51%</pre>
</div>
<p>到此这篇关于K8S二进制部署的K8S(1.15)部署hpa功能的文章就介绍到这了,更多相关k8s1.15 二进制部署内容请搜索琼殿技术社区以前的文章或继续浏览下面的相关文章希望大家以后多多支持琼殿技术社区!</p>
                           
                            <div class="art_xg">
                              <b>您可能感兴趣的文章:</b><ul><li>kubernetes1.5.2升级到kubernetes1.10一些主要的设定修改记录</li><li>利用二进制文件安装etcd的教程详解</li><li>二进制方式安装 Kubernetes1.18.3版本实现脚本</li></ul>
                            </div>

                        </div>
                        <!--endmain-->
頁: [1]
查看完整版本: K8S二进制部署的K8S(1.15)部署hpa功能