文件名称:voyager-在锈中爬行和刮擦网页-Rust开发
文件大小:29KB
文件格式:ZIP
更新时间:2024-06-16 12:25:03
Rust Network programming
使用voyager,您可以轻松地从网站中提取结构化数据。 voyager借助voyager,您可以轻松地从网站中提取结构化数据。 按照状态机模型,用voyager编写自己的爬虫/爬虫。 示例示例使用tokio作为其运行时,因此您的Cargo.toml可能如下所示:[dependencies] voyager = {version =“ 0.1”} tokio = {version =“ 0.2”,features = [“ full”]}声明您的拥有自己的刮板和模型// //声明刮板以及所有选择器等。struct HackernewsScraper {post_selector:选择器,
【文件预览】:
voyager-main
----LICENSE-MIT(1KB)
----Cargo.toml(827B)
----.github()
--------workflows()
----src()
--------error.rs(3KB)
--------robots.rs(9KB)
--------requests.rs(4KB)
--------response.rs(811B)
--------lib.rs(22KB)
--------domain.rs(22KB)
----LICENSE-APACHE(11KB)
----examples()
--------hackernews.rs(4KB)
--------reddit.rs(4KB)
--------explore.rs(2KB)
----README.md(8KB)
----.gitignore(25B)