通用 Numba AOT 输出文件 - 我们可以生成 C++或者来自 AOT 编译函数的 Cython 之类的文件?

发布于 2025-01-10 07:08:57 字数 728 浏览 0 评论 0原文

问题:寻找更熟悉 Numba AOT 和我尚未找到的任何“输出中间文件”选项的人。

首先-> Pythran 是一个从 Python 到 C++ 到 PYD 的编译器。您可以使用简单的 -e 选项将 cpp 文件输出到编译器。它还需要 #pragma omp 标志,例如 #omp parallel for。现在谈论较多的Numba大多用于JIT模式。但它可以选择 AOT(提前)编译模块,但它们会失去并行优化。

所以我在项目中使用这两个库。 Numba AOT 编译函数比 Pythran 函数快得多(Pythran 函数使用 #omp 并行 for 循环,而 Numba AOT 则不使用)。尽管如此,Numba 版本更快,所以它做了一些我的 Pythran 程序没有做的事情。

所以我想看看它在做什么 - 但是当我从 numba.pycc import CC 查看 Numba 的 AOT 源代码时,我发现 Numba 实际上以某种方式生成字节代码,然后将其编译成 PYD。但文档并没有说明这是在任何地方进行的,或者是否有可能在编译和检查之前获取 Numba 生成的初步文件。如果它们是字节码,那么我无论如何都无法读取。但如果它们采用 Cython 或 CPP 格式,那么很容易检查正在进行的优化。所以...

正在寻找更熟悉 Numba AOT 和我尚未找到的任何“输出中间文件”选项的人。

即使答案是“不,你不能这样做”,我也需要听到它,然后我就可以专注于我实际上可以更改的代码部分。

赞赏!

Question: Looking for someone that is more familiar with Numba AOT and any "output intermediate files" option I haven't found yet.

First off -> Pythran is a Python to C++ to PYD compiler. You can output the cpp files with a simple -e option to the compiler. It also takes #pragma omp flags like #omp parallel for. Now the more talked about Numba is used in JIT mode mostly. But it has an option to AOT (ahead of time) compile modules, but they lose parallel optimizations.

So I am using both of these libraries in a project. The Numba AOT compiled function is much faster than the Pythran one (and the Pythran one is using #omp parallel for loops while Numba AOT doesn't). Nonetheless, the Numba version is faster, so it's doing something my Pythran program is not.

So I want to see what it's doing - but when I look at the source code for Numba's AOT from numba.pycc import CC it appears Numba somehow is actually generating byte code and then compiles that into a PYD. But the documentation doesn't state this is being done anywhere, or if it's even possible to get the preliminary files Numba generates prior to compiling to examine. If they are in bytecode, well, I can't read that anyway. BUT if they are in either Cython or CPP format, then it's easy to examine the optimizations being done. SO...

Looking for someone that is more familiar with Numba AOT and any "output intermediate files" option I haven't found yet.

Even if the answer is "NO YOU CAN'T DO THAT" I need to hear it, then I can focus on parts of the code I can actually change.

Appreciated!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文