水晶语言的网页抓取库

Question

4

我一直在使用Python的Scrapy进行网页抓取，是否有类似于Scrapy的东西适用于Crystal语言？我尝试过谷歌搜索，但没有发现相关结果。

- Caffeinatedwolf

1

在这里的awesome-crystal列表中似乎没有任何内容可用。您可以在此处的crystal-libraries-needed存储库中提出需要的库请求。就个人而言，我不知道制作网络爬虫库有多困难，因此我不确定仅制作库本身的可行性。希望这可以帮助到您。 - Qwerp-Derp

2

顺便提一下，这种类型的问题通常不会在SO上被接受，因为你要求一个实现某个目的的特定库，这会吸引有主观意见的答案而不是客观的答案。你可以在项目的Gitter聊天室这里中问同样的问题。 - Qwerp-Derp

你可以自己下载文件：https://dev59.com/J5_ha4cB1Zd3GeqP2q1L 但这并不是一个专门的网络爬虫库。 - rogerdpack

1个回答

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- MegaTux · Accepted Answer

这个网站是我个人认为寻找碎片的最佳去处。关于解析 HTML，我开始尝试使用Myhtml，但也发现了Crystagiri和June。