node-prune 源码阅读笔记

发布于 2022-07-16 18:25:14 字数 4913 浏览 229 评论 0

node-prune 是 tj 大神用 go 写的用来删除 node_modules 里不必要的文件(如 .md、.eslintrc)以更快地部署 serverless 应用。这是一个命令行工具,安装之后只需要运行一下 node-prune 就可以删除掉这些文件。

本身命令比较简单,因此没有使用到类似 https://github.com/urfave/cli 这种命令行第三方库,直接使用了内置的 flag 库来实现

同时支持 verbose flag 作为定位bug时的输出,同时支持 exclude 和 include option 来支持指定不包括和包括删除的文件(文件夹)

这个库的核心是一个 Prune 的 struct,


这 Prune 中定义了默认删除的文件、文件夹和文件后缀:


同时也定义了一堆用在初始化参数去修改这些默认的方法,最后将这些方法通过 New 方法去初始化 prune struct:

在开始遍历前根据 cpu 数量创建多个协程去消费 chan:

这里通过 sync.WaitGroup 来做子协程的等待。

遍历对应的文件夹(默认为 node_modules),同时将删除文件夹和文件的操作推入通道内,这样可以充分利用 go 的并发特性

对于这里的并发特性,使用一个项目进行测试,使用协程时花费的时间:

当去掉协程,同步去做删除操作的时候,耗时为:

很明显,使用协程的高并发性能确实提升了。

在对最后文件数量和 size 统计的时候使用了 https://github.com/dustin/go-humanize 这个库,这个库的作用就是把 size、time、number 等变成人更加易读的表示

总体来说,整个库功能简单,代码量不多,是一个方便学习 go 制作 cli、go 协程、文件处理的一个库。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据

关于作者

久伴你

暂无简介

0 文章
0 评论
25 人气
更多

推荐作者

已经忘了多久

文章 0 评论 0

15867725375

文章 0 评论 0

LonelySnow

文章 0 评论 0

走过海棠暮

文章 0 评论 0

轻许诺言

文章 0 评论 0

信馬由缰

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文