我可以设置一个ARM64 Docker映像，但是可以运行任何东西

Question

我有一个centos 7 x86_64虚拟机。我需要在Oracle Linux 8 ARM64 Docker容器中做一些事情。

我安装了Docker和Qemu：

$ sudo yum install -y yum-utils
$ sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo 
$ sudo yum install -y docker-ce docker-ce-cli containerd.io docker-compose-plugin \
 qemu-system-arm qemu qemu-user qemu-kvm qemu-kvm-tools libvirt virt-install \
 libvirt-python libguestfs-tools-c

然后，我启动Docker并设置QEMU-USER静态：

$ sudo systemctl start docker
$ docker run --rm --privileged multiarch/qemu-user-static --reset

我的DockerFile是：

FROM oraclelinux:8.5
ENV container docker
RUN dnf -y install sssd nscd unzip zip xz which file
RUN useradd --uid 1001 -ms /bin/bash cm
RUN uname -m

然后使用以下内容创建X86_64和ARM64映像：

docker buildx create --name ol8_builder
docker buildx --builder ol8_builder build -t frickson/oracle8 . --platform=linux/amd64 --load --progress=plain
docker buildx --builder ol8_builder build -t frickson/oracle8arm . --platform=linux/arm64 --load --progress=plain

在两个图像上的构建过程中，run uneradd 工作和用户是创建的。 运行UNAME -M在两个系统上都可以使用，生成正确的输出（x86_64和aarch64）。

X86_64机器工作正常：

$ docker run --rm --privileged frickson/oracle8 uname -m
x86_64

但是ARM64机器没有：

$ docker run --platform linux/arm64 --rm --privileged frickson/oracle8arm uname -a
exec /usr/bin/uname: no such file or directory

我猜它没有找到一个或多个库，因为它在图像构建过程中起作用。尝试运行任何命令（bash，ls，true）都会在同一错误消息中导致。

有什么想法我缺少什么？谢谢！

编辑：回答 @josephsible-reinstatemonica：

它不起作用。而且我无法访问手臂主机来检查我的图像。

$ sudo docker run --platform linux/arm64 -it --rm --privileged oraclelinux:8 /bin/bash
Unable to find image 'oraclelinux:8' locally
8: Pulling from library/oraclelinux
e12ce518ed4b: Pull complete 
Digest: sha256:cad3a3dc2dd9f03dec02642dce1f194562e7f21820bc36ceb9f7b070d337fb45
Status: Downloaded newer image for oraclelinux:8
exec /bin/bash: no such file or directory

Answer 1

当您运行docker运行-RM-私有的Multiarch/Qemu-user static -Reset时，它将Aarch64二进制文件的处理程序设置为：

[root@localhost ~]# cat /proc/sys/fs/binfmt_misc/qemu-aarch64
enabled
interpreter /usr/bin/qemu-aarch64-static
flags:
offset 0
magic 7f454c460201010000000000000000000200b700
mask ffffffffffffff00fffffffffffffffffeffffff

不幸的是，Centos 7没有没有- 静态这些二进制文件的版本：

[root@localhost ~]# ls /usr/bin/qemu-aarch64*
/usr/bin/qemu-aarch64

幸运的是，Multiarch/Qemu-user static容器在图像中包含必要的二进制文件；您可以像这样复制到主机上：

$ docker run --rm  --entrypoint tar multiarch/qemu-user-static \
    -C /usr/bin -cf- . | tar -C /usr/bin -xf-

现在我们有：

[root@localhost bin]# ls /usr/bin/qemu-aarch64*
/usr/bin/qemu-aarch64  /usr/bin/qemu-aarch64_be-static  /usr/bin/qemu-aarch64-static

这使我们如此接近，但是我们需要将静态二进制安装到图像中，如 for Multiarch/qemu-user static ：（

[root@localhost bin]# docker run --platform linux/arm64 --rm -v /usr/bin/qemu-aarch64-static:/usr/bin/qemu-aarch64-static  oraclelinux:8.5 uname -a
Linux 2d7e2e0ce6d7 3.10.0-1160.66.1.el7.x86_64 #1 SMP Wed May 18 16:02:34 UTC 2022 aarch64 aarch64 aarch64 GNU/Linux

或您需要将解释器构建到图像中。）

我们需要Mount QEMU-AARCH64静态在CentOS 7上的容器内部，因为内核似乎不支持f flag BINFMT_MISC解释器。 f标志意味着：

f-修复二进制

BINFMT_MISC的通常行为是在调用MISC格式文件时懒洋洋地产生二进制的行为。但是，面对安装命名空间和更换磁盘，这并不能很好地工作，因此F模式在安装仿真并使用打开的图像来产生仿真器后立即打开二进制文件，这意味着它始终安装后可以使用，不管环境如何变化。

（来自“ noreferrer”> kernel document

） Multiarch/Qemu-user static 如果您设置
- 在命令行上持续YES，但是在CentOS 7上失败了：

$ docker run --rm --privileged multiarch/qemu-user-static --reset
--persistent yes
...
Setting /usr/bin/qemu-aarch64-static as binfmt interpreter for aarch64
sh: write error: Invalid argument

---

使用最近的Fedora发行版（以及可能还有其他），您可以简单地安装QEMU-user static /code>软件包，一切都将工作（无需使用Multiarch/Qemu-user static image）：

$ cat /etc/fedora-release
Fedora release 34 (Thirty Four)
$ rpm -q qemu-user-static
qemu-user-static-5.2.0-9.fc34.x86_64
$ uname -m
x86_64
$ docker run --platform linux/arm64 --rm oraclelinux:8.5 uname -a
Linux 6f04d17234f5 5.17.6-100.fc34.x86_64 #1 SMP PREEMPT Mon May 9 14:41:31 UTC 2022 aarch64 aarch64 aarch64 GNU/Linux

qemu-user static软件包软件包安装所有<代码> binfmt_misc
给您的注册。