如何使用 Node.js 访问维基百科
我正在研究将 Wikipedia 集成到 Node.js 应用程序中的最简单方法。 要求是能够搜索条目并在每个条目中查找实体。
有任何已知的现有库/方法吗?
谢谢
I am looking into the simplest way to integrate Wikipedia into a node.js app.
The requirements are to be able to search for entries and find entities in each entry.
Any known existing libs/methods for that?
Thanks
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(2)
有一个新推出的 wiki 文本开源解析器 (http://sweble.org/),如果您推出自己的解决方案,它可能对您有用。当然,这需要您下载维基百科数据转储、解析并将实体存储在数据库中。
您还可以查看 dbpedia (http://dbpedia.org/About),尽管这需要将 rdf 堆栈集成到您的应用程序中(运行本地 rdf 存储库或通过 sparql 与经常不稳定的在线版本进行通信)。
一种简单的方法是使用搜索引擎 api 并限制为 site:wikipedia.org - 例如:
http://www.google.com/search?q=node.js+site%3Awikipedia.org
我发现效果非常好。
There's a newly available open source parser for wiki text (http://sweble.org/) that might be useful to you if you roll your own solution. Of course that would require you downloading the wikipedia data dump, parsing, and storing entities in a db.
You could also look at dbpedia (http://dbpedia.org/About), though that would require integrating the rdf stack into your app (either running a local rdf repository or communicating with the often flaky online version via sparql).
One easy approach is to use a search engine api and restrict to site:wikipedia.org - e.g:
http://www.google.com/search?q=node.js+site%3Awikipedia.org
I've found that can work really well.
使用 jquery 进行抓取的 Spider 非常棒:
https://github.com/mikeal/spider
Mikeal 就是那个人
想必您会将此用于一个业余(个人)项目。不知道用刮刀在维基百科上狂奔是多么的干净。
Spider for scraping using jquery is fantastic:
https://github.com/mikeal/spider
Mikeal is the man
Presumably you'd be using this for a side (personal) project though. Not sure how kosher it is to run wild on wikipedia with a scraper.