使用Python从qcow2映像文件创建自定义EC2 AMI

Question

我正在编写一项服务，需要根据qcow2图像文件在每个EC2区域中注册自定义AMI。

我一直在探索apache-libcloud和boto库，但似乎AMI注册函数是为了基于正在运行的实例创建AMI而构建的，我想将AMI基于我的qcow2映像文件。

如果没有一个简单的解决方案来解决这个问题，我将采取一个复杂的解决方案。 如果由于某种原因使用qcow2图像文件是不可能的，我也可以访问RAW图像文件。

Answer 1

我成功地以编程方式完成了这项工作。 我的解决方案使用原始图像文件，因为它们可以直接写入磁盘。 如果您需要从qcow2图像文件转换，可以使用qemu-img手动完成，或者查看转换的简单Python实现 。

基于原始图像文件的AMI注册过程概述：

1. 选择AMI和相应的AKI作为“实用程序实例”。 它不必与您尝试注册的图像是相同的操作系统。 如果AMI在/etc/sudoers启用了requiretty ，则需要确保在尝试SSH到节点时请求伪终端，例如使用Paramiko的Channel.get_pty()方法。

2. 根据所选的AMI和AKI启动实用程序实例。 它必须经过EBS优化（ m1.large size实例可以很好地与EBS配合使用），并且应该附加一个辅助EBS卷，该卷足够大，可以注册您要注册的整个未压缩映像。 我使用/dev/sdb作为此设备名称。

3. 一旦可以通过SSH访问实用程序实例，就可以将原始映像文件写入辅助卷。 就个人而言，我从互联网上提取了一个.raw.xz文件，这是我要写的图像，所以我的实用命令是sudo sh -c 'curl RAW_XZ_URL | xzcat > /dev/xvdb sudo sh -c 'curl RAW_XZ_URL | xzcat > /dev/xvdb 。 请注意，在我的所有经验中， /dev/sdX设备在实际实例上作为/dev/xvdX进行访问，但在所有情况下可能并非如此。

4. 实用程序命令完成后，您可以销毁实用程序节点，假设您在节点终止时未删除/dev/sdb卷。 如果还没有，只需停止节点即可。 如果以编程方式执行实用程序命令，则可以使用Paramiko的Channel.recv_exit_status()方法等待命令完成，然后检查指示成功的0退出状态。

5. 实用程序实例不再运行后，请拍摄/dev/sdb卷的快照。

6. 快照完成后，您可以将其注册为AMI。 确保使用与您一直使用的相同的AKI，以及正确的根设备名称（我使用完整的磁盘映像，因此我的根设备名称是/dev/sda而不是/dev/sda1 ）。 亚马逊建议你现在使用hd0 pv-grub AKIs，而不是hd00。

这一切都可以通过apache-libcloud和paramiko Python库完成，这两种方法都是pip -installable。 一个很好的例子是Fedimg库，它实现了这种精确的方法，以便在Fedora云映像构建完成时自动在所有EC2区域中注册新的AMI。

实际执行此过程时，会涉及相当多的时间，异常处理和其他“陷阱”。 这只是通过我的方法解决挑战必须采取的步骤的概述。