如何通過boto3在EC2實例上運行python腳本

Question

我在如何使用boto3 SSH和在EC2中運行命令之前閱讀了此問題？ 。 許多回答只是說用戶不必使用ssh連接到EC2並運行命令。 但是，我仍然不知道如何通過boto3運行python腳本。 在boto2中，這是一個run_instances函數，用戶可以將其腳本傳遞到EC2節點並運行它，就像下面的代碼列表一樣

def run(self, **kwargs):
    ec2 = boto.connect_ec2(settings.PDF_AWS_KEY, settings.PDF_AWS_SECRET)
    sqs = boto.connect_sqs(settings.PDF_AWS_KEY, settings.PDF_AWS_SECRET)

    queue = sqs.create_queue(REQUEST_QUEUE)
    num = queue.count()
    launched = 0
    icount = 0

    reservations = ec2.get_all_instances()
    for reservation in reservations:
        for instance in reservation.instances:
            if instance.state == "running" and instance.image_id == AMI_ID:
                icount += 1
    to_boot = min(num - icount, MAX_INSTANCES)

    if to_boot > 0:
        startup = BOOTSTRAP_SCRIPT % {
            'KEY': settings.PDF_AWS_KEY,
            'SECRET': settings.PDF_AWS_SECRET,
            'RESPONSE_QUEUE': RESPONSE_QUEUE,
            'REQUEST_QUEUE': REQUEST_QUEUE}
        r = ec2.run_instances(
            image_id=AMI_ID,
            min_count=to_boot,
            max_count=to_boot,
            key_name=KEYPAIR,
            security_groups=SECURITY_GROUPS,
            user_data=startup)
        launched = len(r.instances)
    return launched

BOOTSTRAP_SCRIPT is a python script

我用boto3編寫一些代碼：

# -*- coding: utf-8 -*-

SCRIPT_TORUN = """

import boto3

bucket = random_str()
image_name = random_str()
s3 = boto3.client('s3')
Somedata = 'hello,update'

upload_path = 'test/' + image_name
s3.put_object(Body=Somedata, Bucket='cloudcomputing.assignment.storage', Key=upload_path)

"""

import boto3
running_instance = []
ec2 = boto3.resource('ec2')

for instance in ec2.instances.all():
    if instance.state['Name'] == 'running':         # Choose running instance and save their instance_id
        running_instance.append(instance.id)
        print instance.id, instance.state
print running_instance

我可以獲取正在運行的實例的詳細信息，有人可以告訴我run_instances中是否有類似run_instances的boto3 ，我可以使用該SCRIPT_TORUN在我正在運行的EC2實例之一中運行腳本SCRIPT_TORUN 。

Answer 1

請參閱： Boto3 run_instances

您正在尋找的參數是： UserData ='string'

UserData (string) -

實例可用的用戶數據。 有關更多信息，請參閱啟動時在Linux實例上運行命令（Linux）和添加用戶數據（Windows）。 如果使用命令行工具，則將為您執行base64編碼，並且可以從文件中加載文本。 否則，您必須提供base64編碼的文本。

此值將自動進行base64編碼。 在執行該操作之前，請勿對此值進行base64編碼。

Answer 2

如果要一次（僅在EC2啟動時）運行一次腳本，則可以在調用run_instances時在userdata中提供腳本。

但是，如果要臨時在一個（或多個）EC2實例上運行腳本，則應查看EC2 Systems Manager（ Run Command ）或類似Fabric （ 示例 ）的東西。

Answer 3

這是我做的

import boto3
import botocore
import boto
import paramiko

ec2 = boto3.resource('ec2')

instances = ec2.instances.filter(
Filters=[{'Name': 'instance-state-name', 'Values': ['running']}])
i = 0
for instance in instances:
  print(instance.id, instance.instance_type)
  i+= 1
x = int(input("Enter your choice: "))
try:
  ssh = paramiko.SSHClient()
  ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
  privkey = paramiko.RSAKey.from_private_key_file('address to .pem key')
  ssh.connect(instance.public_dns_name,username='ec2-user',pkey=privkey)
  stdin, stdout, stderr = ssh.exec_command('python input_x.py')
  stdin.flush()
  data = stdout.read().splitlines()
for line in data:
    x = line.decode()
    #print(line.decode())
    print(x,i)
    ssh.close()
except:
  --------

對於憑據，我添加了AWSCLI程序包，打開終端並運行命令

aws configure

並輸入詳細信息，這些信息將被保存並由boto3從.aws文件夾自動讀取。

Answer 4

這是使用另一個名為paramiko的python lib來做的

import paramiko

user_name='ubuntu'
instance_id='i-08h873123123' #just an example
pem_addr='/Users/folder1/.ssh/jack-aws.pem' # folder path to aws instance key
aws_region='us-east-1' 


instances = ec2.instances.filter(Filters=[{'Name': 'instance-state-name', 'Values': ['running']}])


for instance in instances:
    if (instance.id==instance_id):
        p2_instance=instance
        break;



ssh = paramiko.SSHClient()
ssh.set_missing_host_key_policy(paramiko.AutoAddPolicy())
privkey = paramiko.RSAKey.from_private_key_file(pem_addr)
ssh.connect(p2_instance.public_dns_name,username=user_name,pkey=privkey)


cmd_to_run='dropbox start && source /home/ubuntu/anaconda3/bin/activate py36 && cd /home/ubuntu/xx/yy/ && python3 func1.py' #you can seperate two shell commands by && or ;
stdin4, stdout4, stderr4 = ssh.exec_command(cmd_to_run,timeout=None, get_pty=False)
ssh.close()