flyberry_task:美联储现场采矿API

时间:2021-06-20 03:09:06
【文件属性】:
文件名称:flyberry_task:美联储现场采矿API
文件大小:73KB
文件格式:ZIP
更新时间:2021-06-20 03:09:06
Python 网站挖掘 API ###测试服务器 常用网址 ###开发者笔记 这个练习很有趣也很吸引人 我总共花了大约 8 到 10 个小时,我让服务站起来,大约 70% 的解析是在去度假之前写的。 然后我直到 1 月 18 日才能够回到任务中。 我建议进行以下重构... sqlite 应该被 mongo 或其他一些可扩展的数据存储取代 应使用计划的异步作业来刷新数据。 目前我正在使用一种 hack 来检查 web 视图功能的刷新,这不是生产级别的做法。 我还想对每个抓取的页面使用 MD5 签名之类的东西,以便我可以判断当前页面是否与以前抓取的页面相同。 如果是这样,我不会用以前抓取的数据来膨胀数据存储。 最后,我想改进 JSON 版本的投影表的数据整形。 ###用法 所有查询的基本 URL 前缀是: /fed/fomc 在没有任何其他参数的情况下调用此前缀将返回服务的版本信息。 例如.
【文件预览】:
flyberry_task-master
----fed()
--------fed()
--------templates()
--------fomc()
--------db.sqlite3(584KB)
--------manage.py(246B)
----.gitignore(9B)
----README.md~(5KB)
----README.md(4KB)

网友评论