文件名称:scraping-uoc-with-apify
文件大小:78KB
文件格式:ZIP
更新时间:2024-06-12 05:44:39
JavaScript
使用Apify取消UOC课程 介绍 该项目获取并取消了UOC中任何学位的课程提纲。 它在后台将Apify与node.js结合使用,并折衷了两个过程: 生成PuppeteerCrawler可以在数据集中将有关课程的所有所需数据进行剪贴 读取数据集并将其从json转换为xslx格式。 目标 目标是将课程表主题及其评估模式的信息提取到xlsx中,这样我们就无需手动进行该过程。 执行 rm -rf apify_storage/request_queues/ * node index.js node transform-dataset-to-xlsx.js 去做 更优雅地处理handleFailedRequestFunction:异步({request,error,})=> { 删除jquery依赖关系以使其更加健壮并使用( )这种技术 了解lib的代码:xabikos.javascripts
【文件预览】:
scraping-uoc-with-apify-master
----.eslintrc.json(212B)
----helper.js(983B)
----test.js(154B)
----README.MD(936B)
----uoc_functions.js(2KB)
----examples()
--------example.js(3KB)
--------write_dataset.js(431B)
----stats_pending_handled.sh(240B)
----exported-data()
--------subjects_20210206_110853.xlsx(7KB)
--------subjects_20210129_125056.xlsx(13KB)
--------~$subjects_20210206_110853.xlsx(165B)
--------subjects_20200929_003032.xlsx(6KB)
--------subjects_20200929_005321.xlsx(6KB)
--------~$subjects_20200929_005321.xlsx(165B)
----transform-dataset-to-xlsx.js(3KB)
----.gitignore(28B)
----index.js(7KB)
----package-lock.json(133KB)
----package.json(394B)