kubernetes配置自定义域名记录

中原游侠 發表於 2019-9-28 14:47:00

<h1> 问题背景</h1>

<h2>        客户业务pod运行在内网，无法访问外网，对于一些应用，需要访问企业微信，淘宝等外部api接口时，采用代理的方式，即配置pod要访问的外部域名解析为内部代理服务器的ip，如配置api.weixin.qq.com,pod请求访问此域名时，dns解析为内部代理服务器ip-10.xxx.xx.xx,即需要自定义域名解析，经调研，有如下方式：</h2>

 

<h2 id="kubernetes配置自定义域名记录，通过coredns-1.客户存在内网dns，且该内网dns可以解析用户需要的域名。这种情况只需要确保coredns所在的宿主机的/etc/resolv.conf中配了该dns即可。">1.客户存在内网dns，且该内网dns可以解析用户需要的域名。这种情况只需要确保coredns所在的宿主机的/etc/resolv.conf中配了该dns即可。</h2>

<h2 id="kubernetes配置自定义域名记录，通过coredns-2.使用kubernetes原生的hostalias功能，对于每个pod额外配置dns记录（https://kubernetes.io/docs/concepts/services-networking/add-entries-to-pod-etc-hosts-with-host-aliases/）">2.使用kubernetes原生的hostalias功能，对于每个pod额外配置dns记录（https://kubernetes.io/docs/concepts/services-networking/add-entries-to-pod-etc-hosts-with-host-aliases/）</h2>

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>kind:</code> <code>Pod</code>

<code>metadata:</code>

<code>  </code><code>name:</code> <code>hostaliases-pod</code>

<code>spec:</code>

<code>  </code><code>restartPolicy:</code> <code>Never</code>

<code>  </code><code>hostAliases:</code>

<code>  </code><code>-</code> <code>ip</code><code>:</code> <code>"127.0.0.1"</code>

<code>    </code><code>hostnames:</code>

<code>    </code><code>-</code> <code>"foo.local"</code>

<code>    </code><code>-</code> <code>"bar.local"</code>

<code>  </code><code>-</code> <code>ip</code><code>:</code> <code>"10.1.2.3"</code>

<code>    </code><code>hostnames:</code>

<code>    </code><code>-</code> <code>"foo.remote"</code>

<code>    </code><code>-</code> <code>"bar.remote"</code>

<code>  </code><code>containers:</code>

<code>  </code><code>-</code> <code>name</code><code>:</code> <code>cat-hosts</code>

<code>    </code><code>image:</code> <code>busybox</code>

<code>    </code><code>command:</code>

<code>    </code><code>-</code> <code>cat</code>

<code>    </code><code>args:</code>

<code>    </code><code>-</code> <code>"/etc/hosts"</code>
</td>
</tr></tbody></table> 

<h2 id="kubernetes配置自定义域名记录，通过coredns-3使用coredns来做集群内全局的记录增加">3使用coredns来做集群内全局的记录增加</h2>

<h3 id="kubernetes配置自定义域名记录，通过coredns-3.1用file插件（单独配置a记录用，也可以做转发但配置不直观，这里不写了）">3.1用file插件（单独配置a记录用，也可以做转发但配置不直观，这里不写了）</h3>

 

首先修改coredns的configmap，<code>kubectl -n kube-system edit cm coredns</code> 
默认情况下如下

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>我们将其修改为

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>file /etc/coredns/example.db example.org //使用中将example.org换为根域名</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>  </code><code>example.db:</code> <code>|</code>

<code>    </code><code>example.org.            IN      SOA     sns.dns.icann.org. noc.dns.icann.org. 2019062541 7200 3600 1209600 3600 // 修改example.org.换为对应的，不要漏了.</code>

<code>    </code><code>xxx.example.org.            IN      A       1.1.1.1 // 对应a记录在这里添加</code><code>,</code><code>用户想加几个域名就仿照这行格式在下面增加</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>修改后保存即可。 
之后修改coredns的deployment，将example.db挂载进去 <code>kubectl -n kube-system edit deploy coredns</code> 
找到volumes

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>volumes:</code>

<code>- configMap</code><code>:</code>

<code>    </code><code>defaultMode:</code> <code>420</code>

<code>    </code><code>items:</code>

<code>    </code><code>-</code> <code>key</code><code>:</code> <code>Corefile</code>

<code>      </code><code>path:</code> <code>Corefile</code>

<code>    </code><code>name:</code> <code>coredns</code>

<code>  </code><code>name:</code> <code>config-volume</code>
</td>
</tr></tbody></table>将其改为

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>volumes:</code>

<code> </code><code>-</code> <code>name</code><code>:</code> <code>config-volume</code>

<code>   </code><code>configMap:</code>

<code>     </code><code>name:</code> <code>coredns</code>

<code>     </code><code>items:</code>

<code>     </code><code>-</code> <code>key</code><code>:</code> <code>Corefile</code>

<code>       </code><code>path:</code> <code>Corefile</code>

<code>     </code><code>-</code> <code>key</code><code>:</code> <code>example.db</code>

<code>       </code><code>path:</code> <code>example.db</code>
</td>
</tr></tbody></table>然后保存退出即可。

 

<h3 id="kubernetes配置自定义域名记录，通过coredns-3.2用hosts插件(单独配置a记录用）https://coredns.io/plugins/hosts/">3.2用hosts插件(单独配置a记录用）https://coredns.io/plugins/hosts/</h3>

 

首先修改coredns的configmap，<code>kubectl -n kube-system edit cm coredns</code> 
默认情况下如下

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>我们将其修改为

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>hosts example.org </code><code>{</code> <code>//修改这里，example.org为根域名</code>

<code>            </code><code>10.0.0.1 bbb.example.org //这里就跟本地配host格式一样</code>

<code>            </code><code>fallthrough</code>

<code>        </code><code>}</code>

<code>        </code><code>// 这里如果宿主机配了hosts，也可以直接写hosts，不用上面的写法</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>修改后保存即可。然后重建下coredns的pod就行

 

<h3 id="kubernetes配置自定义域名记录，通过coredns-3.3用fowrad插件（做解析转发用）https://coredns.io/plugins/forward/">3.3用fowrad插件（做解析转发用）https://coredns.io/plugins/forward/</h3>

 

首先修改coredns的configmap，<code>kubectl -n kube-system edit cm coredns</code> 
默认情况下如下

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>我们将其修改为

<table border="0" cellpadding="0" cellspacing="0"><tbody><tr><td>
<code>apiVersion:</code> <code>v1</code>

<code>data:</code>

<code>  </code><code>Corefile:</code> <code>|</code>

<code>    </code><code>.:</code><code>53 </code><code>{</code>

<code>        </code><code>errors</code>

<code>        </code><code>health</code>

<code>        </code><code>kubernetes cluster.local in-addr.arpa ip6.arpa </code><code>{</code>

<code>           </code><code>pods insecure</code>

<code>           </code><code>upstream</code>

<code>           </code><code>fallthrough in-addr.arpa ip6.arpa</code>

<code>        </code><code>}</code>

<code>        </code><code>prometheus :</code><code>9153</code>

<code>        </code><code>forward example.org. 127</code><code>.0.0.1:</code><code>9005 127</code><code>.0.0.1:</code><code>9006 // 这里example.org.是根域名，后面是客户的dns服务器地址，可以写多个</code>

<code>        </code><code>proxy . /etc/resolv.conf</code>

<code>        </code><code>cache</code> <code>30</code>

<code>        </code><code>loop</code>

<code>        </code><code>reload</code>

<code>        </code><code>loadbalance</code>

<code>    </code><code>}</code>

<code>kind:</code> <code>ConfigMap</code>

<code>metadata:</code>

<code>  </code><code>creationTimestamp:</code> <code>"2019-06-18T08:10:05Z"</code>

<code>  </code><code>name:</code> <code>coredns</code>

<code>  </code><code>namespace:</code> <code>kube-system</code>

<code>  </code><code>resourceVersion:</code> <code>"181"</code>

<code>  </code><code>selfLink:</code> <code>/api/v1/namespaces/kube-system/configmaps/coredns</code>

<code>  </code><code>uid:</code> <code>7abf504f-91a0-11e9-8570-52540089b1e0</code>
</td>
</tr></tbody></table>修改后保存即可。然后重建下coredns的pod就行 
来源：https://www.cnblogs.com/360linux/p/13062062.html

頁: [1]

琼殿技术论坛's Archiver

kubernetes配置自定义域名记录