CLI Bash/AWS: попытка выяснить, как проверить массив времени безотказной работы с двумя проверками при перезагрузке групп экземпляров EC2 через AWS SSM.

Я изо всех сил пытался найти лучший способ решить эту проблему для сценария bash. У меня есть команда, которая будет проверять группы серверов на время их безотказной работы в минутах. Я хочу перейти к следующей группе перезагрузок только после того, как все серверы будут работать в течение 5 минут, но также хочу убедиться, что они не работали более часа на случай, если перезагрузка не произойдет.

Первоначально я пытался настроить цикл while, который продолжал бы выдавать команду для проверки времени безотказной работы и отправки вывода в массив. Я пытаюсь понять, как вы можете перебирать массив, пока все элементы этого массива не будут больше 5 и меньше. Я даже не добился успеха в первой проверке больше 5. Возможно ли вообще постоянно записывать в массив и выполнять арифметические проверки для каждого значения в массиве, чтобы все значения должны быть больше X в цикле while? Количество серверов, которые будут помещать свое текущее время безотказной работы в массив, варьируется для каждой группы, поэтому количество значений в массиве не всегда будет одинаковым.

Является ли массив даже правильным способом сделать это? Я бы привел примеры того, что я пробовал до сих пор, но это огромный беспорядок, и я думаю, что лучше всего начать с нуля, просто попросив ввода.

Вывод команды, которую я запускаю для подтягивания времени безотказной работы, выглядит примерно так:

1
2
1
4
3
2

Редактировать

Благодаря предоставленной помощи я смог получить функциональное доказательство концепции для этого, и я в восторге. Вот это на случай, если это может помочь любому, кто попытается сделать что-то подобное в будущем. Проблема заключалась в том, что мы используем AWS SSM для всех исправлений наших серверов Windows, и много раз, когда SSM приказывает серверам перезагрузиться после исправления, агенту SSM требуется много времени для регистрации. Это замедляет весь наш процесс, который сейчас выполняется вручную. десятки групп патчей. Много раз нам приходится идти и вручную проверять, действительно ли сервер перезагрузился после того, как мы сказали ему об этом из SSM, чтобы мы знали, что можем начать перезагрузку для следующей группы исправлений. Благодаря этому мы сможем создать единый сценарий, который выполняет перезагрузку для наших групп исправлений в правильном порядке и проверяет правильность перезагрузки серверов, прежде чем переходить к следующей группе.

#!/bin/bash

### The purpose of this script is to automate the execution of commands required to reboot groups of AWS Windows servers utilizing SSM while also verifying their uptime and only continuing on to the next group once the previous has reached X # of minutes. This solves the problems of AWS SSM Agents not properly checking in with SSM post-reboot.

patchGroups=(01 02 03)                      # array containing the values of the RebootGroup tag


for group in "${patchGroups[@]}"
do
    printf "Rebooting Patch Group %q\n" "$group"
    aws ec2 reboot-instances --instance-ids `aws ec2 describe-instances --filters "Name=tag:RebootGroup,Values=$group" --query 'Reservations[].Instances[].InstanceId' --output text`

    sleep 2m

    unset      passed failed serverList                      # wipe arrays
    declare -A passed failed serverList                      # declare associative arrays

    serverList=$(aws ec2 describe-instances --filter "Name=tag:RebootGroup,Values=$group" --query 'Reservations[*].Instances[*].[InstanceId]' --output text)

    for server in ${serverList}                  # loop through list of servers
    do
        failed["${server}"]=0                     # add to the failed[] array
    done

    while [[ "${#failed[@]}" -gt 0 ]]             # loop while number of servers in the failed[] array is greater than 0
    do
        for server in "${!failed[@]}"             # loop through servers in the failed[] array
        do
            ssmID=$(aws ssm send-command --document-name "AWS-RunPowerShellScript" --document-version "1" --targets "[{\"Key\":\"InstanceIds\",\"Values\":[\"$server\"]}]" --parameters '{"commands":["$wmi = Get-WmiObject -Class Win32_OperatingSystem ","$uptimeMinutes =    ($wmi.ConvertToDateTime($wmi.LocalDateTime)-$wmi.ConvertToDateTime($wmi.LastBootUpTime) | select-object -expandproperty \"TotalMinutes\")","[int]$uptimeMinutes"],"workingDirectory":[""],"executionTimeout":["3600"]}' --timeout-seconds 600 --max-concurrency    "50" --max-errors "0" --region us-west-2 --output text --query "Command.CommandId")

            sleep 5

            uptime=$(aws ssm list-command-invocations --command-id "$ssmID" --details --query 'CommandInvocations[].CommandPlugins[].Output' --output text | sed 's/\r$//')

            printf "Checking instance ID %q\n" "$server"
            printf "Value of uptime is = %q\n" "$uptime"

            # if uptime is within our 'success' window then move server to passed[] array

            if [[ "${uptime}" -ge 3 && "${uptime}" -lt 60 ]] 
            then
                passed["${server}"] = "${uptime}"   # add to passed[] array
                printf "Server with instance ID %q has successfully rebooted.\n" "$server"
                unset failed["${server}"]         # remove from failed[] array
            fi
        done

        # display current status (edit/remove as desired)

        printf "\n++++++++++++++ successful reboots\n"
        printf "%s\n" "${!passed[@]}" | sort -n

        printf "\n++++++++++++++ failed reboot\n"

        for server in ${!failed[@]}
        do
            printf "%s - %s (mins)\n" "${server}" "${failed[${server}]}"
        done | sort -n

        printf "\n"

        sleep 60                            # adjust as necessary
    done
done