yolo_crawler:基于事件的域爬虫

时间:2024-07-11 11:48:01
【文件属性】:

文件名称:yolo_crawler:基于事件的域爬虫

文件大小:35KB

文件格式:ZIP

更新时间:2024-07-11 11:48:01

PHP

#yolo爬虫 状态标签 状态值 建造 代码质量 查找损坏的链接示例 require 'bootstrap/autoload.php' ; use WP \ Crawler \ LinkFinder ; use WP \ Crawler \ DomainCrawler ; use WP \ Crawler \ Queue \ QueueManager ; use WP \ Crawler \ Queue \ ArrayQueue ; use WP \ Crawler \ Queue \ Store \ ArrayStore ; use WP \ Crawler \ Queue \ Validator \ ValidFileExtension ; use WP \ Crawler \ Queue \ Validator \ NoPseudoUrl ; use WP \ Crawler \


【文件预览】:
yolo_crawler-master
----composer.json(866B)
----.travis.yml(352B)
----phpunit.xml(522B)
----bootstrap()
--------autoload.php(51B)
----index.php(1KB)
----.scrutinizer.yml(302B)
----phpunit(2KB)
----tests()
--------LinkFinderTest.php(1KB)
--------data()
--------DomainCrawlerTest.php(8KB)
--------LinkFactoryTest.php(1KB)
--------Downloader()
--------LinkTest.php(1KB)
--------DomainTest.php(381B)
--------Queue()
----src()
--------Domain.php(713B)
--------Event()
--------LinkFactory.php(524B)
--------Downloader()
--------Link.php(3KB)
--------DomainCrawler.php(5KB)
--------LinkFinder.php(769B)
--------Queue()
--------LinkFinderInterface.php(370B)
--------CrawlerProcess.php(762B)
----.gitignore(22B)
----README.md(1KB)

网友评论