首页 › 后端架构/服务器综合论坛 › 基于saltstack实现的配置集中化管理

海上逆行者 發表於 2023-9-20 00:00:00

基于saltstack实现的配置集中化管理

<p>Saltstack是一个具备puppet与func功能为一身的集中化管理平台，saltstack基于python实现，功能十分强大，各模块融合度及复用性极高，官方极力推荐作为云计算平台的基础架构。轻松维护成千上万台服务器不是问题，现分享作者基于saltstack实现一个集中化的配置管理平台，以Nginx配置例子展开，涉及salt的grains、grains_module、pillar、States、jinja（template）等，本文适合有salt基础的同学阅读。</p>
<p>一、设备环境说明<br>
有两组web业务服务器，组名分别为web1group与web2group，设备硬件配置、web根目录存在异常.</p><pre class="brush:bash;toolbar:false">id                                groupsnode                cpus        webroot
SN2012-07-010        web1group                2                /www
SN2012-07-011        web1group                4                /www
SN2012-07-012        web1group                2                /www
SN2013-08-021        web2group                2                /data
SN2013-08-022        web2group                2                /data</pre><p>二、master配置说明<br>
1、关键配置定义：</p><pre class="brush:bash;toolbar:false">nodegroups:
   web1group: 'L@SN2012-07-010,SN2012-07-011,SN2012-07-012'
   web2group: 'L@SN2013-08-021,SN2013-08-022'

file_roots:
base:
    - /srv/salt

pillar_roots:
base:
    - /srv/pillar</pre><p>2、定义的文件树结构</p>
<p><img src="https://zhuji.jb51.net/uploads/img/20230519/98246bad68052e6989b1879fe4067508.jpg" width="303" height="338"><br>
三、自定义grains_module<br>
1）#vi /srv/salt/_grains/nginx_config.py</p><pre class="brush:bash;toolbar:false">import os,sys,commands

def NginxGrains():
    '''
      return Nginx config grains value
    '''
    grains = {}
    max_open_file=65536
    #Worker_info={'cpus2':'01 10','cpus4':'1000 0100 0010 0001','cpus8':'10000000 01000000 00100000 00010000 00001000 00000100 00000010 00000001'}
    try:
      getulimit=commands.getstatusoutput('source /etc/profile;ulimit -n')
    except Exception,e:
      pass
    if getulimit==0:
      max_open_file=int(getulimit)
    grains['max_open_file'] = max_open_file
    return grains</pre><p>2)同步grains模块</p><pre class="brush:bash;toolbar:false"># salt '*' saltutil.sync_all</pre><p>3)刷新模块(让minion编译模块)</p><pre class="brush:bash;toolbar:false"># salt '*' sys.reload_modules</pre><p>4)验证max_open_file key的value</p><pre class="brush:bash;toolbar:false"># salt '*' grains.item max_open_file            
SN2013-08-022:
max_open_file: 1024
SN2013-08-021:
max_open_file: 1024
SN2012-07-011:
max_open_file: 1024
SN2012-07-012:
max_open_file: 1024
SN2012-07-010:
max_open_file: 1024</pre><p>四、配置pillar<br>
本例使用分组规则定义pillar，即不同分组引用各自的sls属性<br>
1)定义入口top.sls<br>
#vi /srv/pillar/top.sls</p><pre class="brush:bash;toolbar:false">base:
web1group:
    - match: nodegroup
    - web1server
web2group:
    - match: nodegroup
    - web2server</pre><p>2)定义私有配置，本例只配置web_root的数据，当然可以根据不同需求进行定制，格式为python的字典形式，即"key:value"。</p><pre class="brush:bash;toolbar:false">#vi /srv/pillar/web1server.sls
nginx:
    root: /www

#vi /srv/pillar/web2server.sls
nginx:
    root: /data</pre><p>3）验证配置结果：</p><pre class="brush:bash;toolbar:false">#salt 'SN2013-08-021' pillar.data nginx
SN2013-08-021:
    ----------
    root:
      /data

#salt 'SN2012-07-010' pillar.data nginx
SN2012-07-010:
    ----------
    root:
      /www</pre><p>五、配置States<br>
1）定义入口top.sls</p><pre class="brush:bash;toolbar:false">#vi /srv/salt/top.sls
base:
'*':
    - nginx</pre><p>2)定义nginx配置及重启服务SLS,其中salt://nginx/nginx.conf为配置模板文件位置。</p><pre class="brush:bash;toolbar:false">#vi /srv/salt/nginx.sls
view plainprint?
nginx:
pkg:
   - installed
file.managed:
   - source: salt://nginx/nginx.conf
   - name: /etc/nginx/nginx.conf
   - user: root
   - group: root
   - mode: 644
   - template: jinja

service.running:
   - enable: True
   - reload: True
   - watch:
   - file: /etc/nginx/nginx.conf
   - pkg: nginx</pre><p>3）Nginx配置文件（引用jinja模板）<br>
功能点：<br>
1、worker_processes参数采用grains['num_cpus'] 上报值（与设备CPU核数一致）；<br>
2、worker_cpu_affinity分配多核CPU根据当前设备核数进行匹配，分别为2\4\8\其它核；<br>
3、worker_rlimit_nofile参数与grains['max_open_file'] 获取的系统ulimit -n一致；<br>
4、worker_connections 参数理论上为grains['max_open_file']；<br>
5、 root参数为定制的pillar['nginx']['root']值。</p><pre class="brush:bash;toolbar:false">#vi /srv/salt/nginx/nginx.conf
# For more information on configuration, see:
user            nginx;
worker_processes{{ grains['num_cpus'] }};
{% if grains['num_cpus'] == 2 %}
worker_cpu_affinity 01 10;
{% elif grains['num_cpus'] == 4 %}
worker_cpu_affinity 1000 0100 0010 0001;
{% elif grains['num_cpus'] &gt;= 8 %}
worker_cpu_affinity 00000001 00000010 00000100 00001000 00010000 00100000 01000000 10000000;
{% else %}
worker_cpu_affinity 1000 0100 0010 0001;
{% endif %}
worker_rlimit_nofile {{ grains['max_open_file'] }};

error_log/var/log/nginx/error.log;
#error_log/var/log/nginx/error.lognotice;
#error_log/var/log/nginx/error.loginfo;

pid      /var/run/nginx.pid;

events {
    worker_connections{{ grains['max_open_file'] }};
}

http {
    include       /etc/nginx/mime.types;
    default_typeapplication/octet-stream;

    log_formatmain'$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log/var/log/nginx/access.logmain;

    sendfile      on;
    #tcp_nopush   on;

    #keepalive_timeout0;
    keepalive_timeout65;

    #gzipon;

    # Load config files from the /etc/nginx/conf.d directory
    # The default server is in conf.d/default.conf
    #include /etc/nginx/conf.d/*.conf;
    server {
      listen       80 default_server;
      server_name_;

      #charset koi8-r;

      #access_loglogs/host.access.logmain;

      location / {
            root   {{ pillar['nginx']['root'] }};
            indexindex.html index.htm;
      }

      error_page404            /404.html;
      location = /404.html {
            root   /usr/share/nginx/html;
      }

      # redirect server error pages to the static page /50x.html
      #
      error_page   500 502 503 504/50x.html;
      location = /50x.html {
            root   /usr/share/nginx/html;
      }

    }

}</pre><p>4)同步配置</p><pre class="brush:bash;toolbar:false">#salt '*' state.highstate</pre><p>5）验证结果：<br>
注意查看root定义值和worker_processes值。<br>
1、登录root@SN2013-08-021</p><pre class="brush:bash;toolbar:false">#vi /etc/nginx/nginx.conf</pre><p>2、登录root@SN2012-07-010</p><pre class="brush:bash;toolbar:false">#vi /etc/nginx/nginx.conf</pre><p></p>

查看完整版本: 基于saltstack实现的配置集中化管理