Назад | Перейти на главную страницу

Массовое удаление снимков ec2 из Jenkins

Пример использования:
Экспорт списка снимков в txt файле (old_snapshots.txt) в корзину S3. Из Jenkins используйте команду aws cp, скопируйте файл в каталог Jenkins / tmp /

--dry-run did not show any error 

Однако, когда передается следующая строка bash с командой aws delete в Jenkins, она показывает УСПЕХ, в то же время говорит, что произошла ошибка, и снимки не удаляются.

## actual deletion
        file="/tmp/old_snapshots.txt"
         while read delete_data
         do
        aws ec2 --region eu-west-1 delete-snapshot --snapshot-id $file
        echo "Deleting snapshot $delete_data"
        done <"$file"

Вывод

An error occurred (InvalidParameterValue) when calling the DeleteSnapshot operation: Value (/tmp/old_snapshots.txt) for parameter snapshotId is invalid. Expected: 'snap-...'.
Deleting snapshot snap-xxxx81xxxxxx7fxxx

An error occurred (InvalidParameterValue) when calling the DeleteSnapshot operation: Value (/tmp/old_snapshots.txt) for parameter snapshotId is invalid. Expected: 'snap-...'.
Deleting snapshot snap-xxxacc49xxxxxxc26


An error occurred (InvalidParameterValue) when calling the DeleteSnapshot operation: Value (/tmp/old_snapshots.txt) for parameter snapshotId is invalid. Expected: 'snap-...'.
Deleting snapshot snap-04xxxxxxxx3fa3cxxxxxxf4

[Pipeline] }
[Pipeline] // stage
[Pipeline] }
[Pipeline] // node
[Pipeline] End of Pipeline
Finished: SUCCESS

Запрос: Эта ошибка An error occurred (InvalidParameterValue) when calling the DeleteSnapshot operationкажется слишком общим? Кто-нибудь испытывал проблему с кажущимся видом? Кроме того, я вручную проверил удаление только одного снимка с помощью aws cli, вручную добавив идентификатор снимка в Jenkins, и это отлично работает. Любое предложение будет принято с благодарностью.

Включая команду aws

aws ec2 --region eu-west-1 delete-snapshot --snapshot-id snap-01x1618xxxxxxa51x
Found snapshotid: snap-01x1618xxxxxxa51x in the uploaded file: /tmp/old_snapshots.txt
Now deleting snapshot id snap-01x1618xxxxxxa51x

Вам нужно немного изменить свой сценарий.

$ sh abc.sh

What is in delete_data snap-xxxx81xxxxxx7fxxx
What is in file /tmp/old_snapshots.txt
Deleting snapshot snap-xxxx81xxxxxx7fxxx
What is in delete_data snap-xxxacc49xxxxxxc26
What is in file /tmp/old_snapshots.txt
Deleting snapshot snap-xxxacc49xxxxxxc26
What is in delete_data snap-04xxxxxxxx3fa3cxxxxxxf4
What is in file /tmp/old_snapshots.txt
Deleting snapshot snap-04xxxxxxxx3fa3cxxxxxxf4

$ cat abc.sh
## actual deletion

    file="/tmp/old_snapshots.txt"
    while read delete_data
    do
    #aws ec2 --region eu-west-1 delete-snapshot --snapshot-id $file
    echo "What is in delete_data $delete_data"
    echo "What is in file $file"
    echo "Deleting snapshot $delete_data"
    done < $file

Ваш сценарий звонит file переменная постоянна, но вам нужно передавать содержимое файла построчно. Итак, замените ниже

aws ec2 --region eu-west-1 delete-snapshot --snapshot-id $file

С участием

aws ec2 --region eu-west-1 delete-snapshot --snapshot-id $delete_data

В интересах других пользователей сообщества я использовал --debug флаг, чтобы обнаружить этот дополнительный символ '\r' были добавлены к щелчок-#

Вывод отладки

2020-01-28 18:09:02,295 - MainThread - botocore.hooks - DEBUG - Event load-cli-arg.ec2.delete-snapshot.snapshot-id: calling handler <awscli.paramfile.URIArgumentHandler object at >
2020-01-28 18:09:02,296 - MainThread - botocore.hooks - DEBUG - Event process-cli-arg.ec2.delete-snapshot: calling handler <awscli.argprocess.ParamShorthandParser object at >
2020-01-28 18:09:02,296 - MainThread - awscli.arguments - DEBUG - Unpacked value of u'snap-0xxxxxxxxxxxxxxxx\r' for parameter "snapshot_id": u'snap-0xxxxxxxxxxxxxxxx\r'

Для решения вопроса: сдал tr -d '\r' к переменной, содержащей значение, для разговора.

пример:

tr -d '\r' < input > output

Обновленный скрипт

file="/tmp/old_snapshots.txt"
cat $file | tr -d '\r' | while read -r line; 
do 
aws ec2 --region eu-west-1 delete-snapshot --snapshot-id $line                        
done