terraform-ci-infra/1n_nmd/nginx/conf/nomad/nginx.hcl

   1 job "${job_name}" {
   2   # The "region" parameter specifies the region in which to execute the job.
   3   # If omitted, this inherits the default region name of "global".
   4   # region = "global"
   5   #
   6   # The "datacenters" parameter specifies the list of datacenters which should
   7   # be considered when placing this task. This must be provided.
   8   datacenters = "${datacenters}"
   9
  10   # The "type" parameter controls the type of job, which impacts the scheduler's
  11   # decision on placement. This configuration is optional and defaults to
  12   # "service". For a full list of job types and their differences, please see
  13   # the online documentation.
  14   #
  15   # For more information, please see the online documentation at:
  16   #
  17   #     https://www.nomadproject.io/docs/jobspec/schedulers.html
  18   #
  19   type = "service"
  20
  21   update {
  22     # The "max_parallel" parameter specifies the maximum number of updates to
  23     # perform in parallel. In this case, this specifies to update a single task
  24     # at a time.
  25     max_parallel      = 0
  26
  27     # The "min_healthy_time" parameter specifies the minimum time the allocation
  28     # must be in the healthy state before it is marked as healthy and unblocks
  29     # further allocations from being updated.
  30     min_healthy_time  = "10s"
  31
  32     # The "healthy_deadline" parameter specifies the deadline in which the
  33     # allocation must be marked as healthy after which the allocation is
  34     # automatically transitioned to unhealthy. Transitioning to unhealthy will
  35     # fail the deployment and potentially roll back the job if "auto_revert" is
  36     # set to true.
  37     healthy_deadline  = "3m"
  38
  39     # The "progress_deadline" parameter specifies the deadline in which an
  40     # allocation must be marked as healthy. The deadline begins when the first
  41     # allocation for the deployment is created and is reset whenever an allocation
  42     # as part of the deployment transitions to a healthy state. If no allocation
  43     # transitions to the healthy state before the progress deadline, the
  44     # deployment is marked as failed.
  45     progress_deadline = "10m"
  46
  47     # The "auto_revert" parameter specifies if the job should auto-revert to the
  48     # last stable job on deployment failure. A job is marked as stable if all the
  49     # allocations as part of its deployment were marked healthy.
  50     auto_revert       = false
  51
  52     # The "canary" parameter specifies that changes to the job that would result
  53     # in destructive updates should create the specified number of canaries
  54     # without stopping any previous allocations. Once the operator determines the
  55     # canaries are healthy, they can be promoted which unblocks a rolling update
  56     # of the remaining allocations at a rate of "max_parallel".
  57     #
  58     # Further, setting "canary" equal to the count of the task group allows
  59     # blue/green deployments. When the job is updated, a full set of the new
  60     # version is deployed and upon promotion the old version is stopped.
  61     canary            = 0
  62   }
  63
  64   # The reschedule stanza specifies the group's rescheduling strategy. If
  65   # specified at the job level, the configuration will apply to all groups
  66   # within the job. If the reschedule stanza is present on both the job and the
  67   # group, they are merged with the group stanza taking the highest precedence
  68   # and then the job.
  69   reschedule {
  70     delay             = "30s"
  71     delay_function    = "constant"
  72     unlimited         = true
  73   }
  74
  75   # The "group" stanza defines a series of tasks that should be co-located on
  76   # the same Nomad client. Any task within a group will be placed on the same
  77   # client.
  78   #
  79   # For more information and examples on the "group" stanza, please see
  80   # the online documentation at:
  81   #
  82   #     https://www.nomadproject.io/docs/job-specification/group.html
  83   #
  84   group "prod-group1-nginx" {
  85     # The "count" parameter specifies the number of the task groups that should
  86     # be running under this group. This value must be non-negative and defaults
  87     # to 1.
  88     count = 1
  89
  90     # https://www.nomadproject.io/docs/job-specification/volume
  91     %{ if use_host_volume }
  92     volume "prod-volume1-nginx" {
  93       type      = "host"
  94       read_only = false
  95       source    = "${host_volume}"
  96     }
  97     %{ endif }
  98
  99     # The restart stanza configures a tasks's behavior on task failure. Restarts
 100     # happen on the client that is running the task.
 101     #
 102     # https://www.nomadproject.io/docs/job-specification/restart
 103     #
 104     restart {
 105       interval  = "30m"
 106       attempts  = 40
 107       delay     = "15s"
 108       mode      = "delay"
 109     }
 110
 111     # The "task" stanza creates an individual unit of work, such as a Docker
 112     # container, web application, or batch processing.
 113     #
 114     # For more information and examples on the "task" stanza, please see
 115     # the online documentation at:
 116     #
 117     #     https://www.nomadproject.io/docs/job-specification/task.html
 118     #
 119     task "prod-task1-nginx" {
 120       # The "driver" parameter specifies the task driver that should be used to
 121       # run the task.
 122       driver = "docker"
 123
 124       # The "config" stanza specifies the driver configuration, which is passed
 125       # directly to the driver to start the task. The details of configurations
 126       # are specific to each driver, so please see specific driver
 127       # documentation for more information.
 128       config {
 129         image        = "nginx:stable"
 130         port_map {
 131           https      = 443
 132         }
 133         privileged   = false
 134         volumes      = [
 135           "/etc/consul.d/ssl/consul.pem:/etc/ssl/certs/nginx-cert.pem",
 136           "/etc/consul.d/ssl/consul-key.pem:/etc/ssl/private/nginx-key.pem",
 137           "custom/upstream.conf:/etc/nginx/conf.d/upstream.conf",
 138           "custom/logs.conf:/etc/nginx/conf.d/logs.conf",
 139           "custom/docs.conf:/etc/nginx/conf.d/docs.conf"
 140         ]
 141       }
 142
 143       # The "template" stanza instructs Nomad to manage a template, such as
 144       # a configuration file or script. This template can optionally pull data
 145       # from Consul or Vault to populate runtime configuration data.
 146       #
 147       # For more information and examples on the "template" stanza, please see
 148       # the online documentation at:
 149       #
 150       #     https://www.nomadproject.io/docs/job-specification/template.html
 151       #
 152       template {
 153         data = <<EOH
 154           upstream storage {
 155             {{ range service "storage" }}
 156               server {{ .Address }}:{{ .Port }};
 157             {{ end }}
 158           }
 159         EOH
 160         destination = "custom/upstream.conf"
 161       }
 162       template {
 163         data = <<EOH
 164           server {
 165             listen 443 ssl default_server;
 166             server_name logs.nginx.service.consul;
 167             keepalive_timeout 70;
 168             ssl_session_cache shared:SSL:10m;
 169             ssl_session_timeout 10m;
 170             ssl_protocols TLSv1.2;
 171             ssl_prefer_server_ciphers on;
 172             ssl_ciphers "ECDHE-ECDSA-AES256-GCM-SHA384:ECDHE-RSA-AES256-GCM-SHA384:ECDHE-ECDSA-CHACHA20-POLY1305:ECDHE-RSA-CHACHA20-POLY1305:ECDHE-ECDSA-AES256-SHA384:ECDHE-RSA-AES256-SHA384";
 173             ssl_certificate /etc/ssl/certs/nginx-cert.pem;
 174             ssl_certificate_key /etc/ssl/private/nginx-key.pem;
 175             location / {
 176               chunked_transfer_encoding off;
 177               proxy_connect_timeout 300;
 178               proxy_http_version 1.1;
 179               proxy_set_header Host $host:$server_port;
 180               proxy_set_header Connection "";
 181               proxy_pass http://storage/logs.fd.io/;
 182               server_name_in_redirect off;
 183             }
 184             location ~ (.*html.gz)$ {
 185               add_header Content-Encoding gzip;
 186               add_header Content-Type text/html;
 187               chunked_transfer_encoding off;
 188               proxy_connect_timeout 300;
 189               proxy_http_version 1.1;
 190               proxy_set_header Host $host:$server_port;
 191               proxy_set_header Connection "";
 192               proxy_pass http://storage/logs.fd.io/$1;
 193               server_name_in_redirect off;
 194             }
 195             location ~ (.*txt.gz|.*log.gz)$ {
 196               add_header Content-Encoding gzip;
 197               add_header Content-Type text/plain;
 198               chunked_transfer_encoding off;
 199               proxy_connect_timeout 300;
 200               proxy_http_version 1.1;
 201               proxy_set_header Host $host:$server_port;
 202               proxy_set_header Connection "";
 203               proxy_pass http://storage/logs.fd.io/$1;
 204               server_name_in_redirect off;
 205             }
 206             location ~ (.*xml.gz)$ {
 207               add_header Content-Encoding gzip;
 208               add_header Content-Type application/xml;
 209               chunked_transfer_encoding off;
 210               proxy_connect_timeout 300;
 211               proxy_http_version 1.1;
 212               proxy_set_header Host $host:$server_port;
 213               proxy_set_header Connection "";
 214               proxy_pass http://storage/logs.fd.io/$1;
 215               server_name_in_redirect off;
 216             }
 217         }
 218         EOH
 219         destination = "custom/logs.conf"
 220       }
 221       template {
 222         data = <<EOH
 223           server {
 224             listen 443 ssl;
 225             server_name docs.nginx.service.consul;
 226             keepalive_timeout 70;
 227             ssl_session_cache shared:SSL:10m;
 228             ssl_session_timeout 10m;
 229             ssl_protocols TLSv1.2;
 230             ssl_prefer_server_ciphers on;
 231             ssl_ciphers "ECDHE-ECDSA-AES256-GCM-SHA384:ECDHE-RSA-AES256-GCM-SHA384:ECDHE-ECDSA-CHACHA20-POLY1305:ECDHE-RSA-CHACHA20-POLY1305:ECDHE-ECDSA-AES256-SHA384:ECDHE-RSA-AES256-SHA384";
 232             ssl_certificate /etc/ssl/certs/nginx-cert.pem;
 233             ssl_certificate_key /etc/ssl/private/nginx-key.pem;
 234             location / {
 235               chunked_transfer_encoding off;
 236               proxy_connect_timeout 300;
 237               proxy_http_version 1.1;
 238               proxy_set_header Host $host:$server_port;
 239               proxy_set_header Connection "";
 240               proxy_pass http://storage/docs.fd.io/;
 241               server_name_in_redirect off;
 242             }
 243           }
 244         EOH
 245         destination = "custom/docs.conf"
 246       }
 247
 248       # The service stanza instructs Nomad to register a service with Consul.
 249       #
 250       # For more information and examples on the "task" stanza, please see
 251       # the online documentation at:
 252       #
 253       #     https://www.nomadproject.io/docs/job-specification/service.html
 254       #
 255       service {
 256         name       = "nginx"
 257         port       = "https"
 258         tags       = [ "docs", "logs" ]
 259       }
 260
 261       # The "resources" stanza describes the requirements a task needs to
 262       # execute. Resource requirements include memory, network, cpu, and more.
 263       # This ensures the task will execute on a machine that contains enough
 264       # resource capacity.
 265       #
 266       # For more information and examples on the "resources" stanza, please see
 267       # the online documentation at:
 268       #
 269       #     https://www.nomadproject.io/docs/job-specification/resources.html
 270       #
 271       resources {
 272         cpu        = 2000
 273         memory     = 4096
 274         network {
 275           mode     = "bridge"
 276           port "https" {
 277             static = 443
 278           }
 279         }
 280       }
 281     }
 282   }
 283 }