financial_data_pools:多进程多线程、协程高效爬取A股股票市场数据

时间:2024-05-24 06:49:07
【文件属性】:

文件名称:financial_data_pools:多进程多线程、协程高效爬取A股股票市场数据

文件大小:42KB

文件格式:ZIP

更新时间:2024-05-24 06:49:07

Python

新增同花顺操作文件,通过操作同花顺进行自动化交易 需要下载的包:pyperclip、pywinauto、pandas;通过pip install 安装即可。 多进程、多线程、协程秒级爬取A股市场交易数据 目前能够获取的数据包括: 业绩报表,秒级爬取一个季度数据 资产负债表,秒级爬取一个季度数据 现金流量表,秒级爬取一个季度数据 利润表,秒级爬取一个季度数据 停复牌信息,秒级爬取两年数据 解禁个股信息,秒级爬取两年数据 板块概念,秒级爬取所有数据 20年的历史交易数据,10分钟爬取1.3G、4000多个文件数据 个股公告,秒级爬取两年公告数据 沪深港通,秒级爬取盘后所有数据 以上数据支持全量下载,比如根据时间下载任何季度的业绩报表 代码需要的运行环境: Python3,本机的Python版本为3.7.9, redis,代码使用了redis作为队列临时存储数据,下载地址 MySQL,作为数据存


【文件预览】:
financial_data_pools-master
----requirements.txt(91B)
----LICENSE(11KB)
----autotrade.py(6KB)
----stock_financial()
--------coroutine_lhblist_down.py(6KB)
--------coroutine_tradedetail_down.py(3KB)
--------__init__.py(0B)
--------data_urls.py(12KB)
--------coroutine_statements_down.py(2KB)
--------coroutine_cashflow_down.py(2KB)
--------coroutine_balancesheets_down.py(3KB)
--------conf.ini(161B)
--------coroutine_suspended_down.py(2KB)
--------comm_funcs.py(12KB)
--------concepts_down.py(3KB)
--------coroutine_hsgt_down.py(4KB)
--------coroutine_financial_down.py(2KB)
--------coroutine_unlocked_down.py(4KB)
--------financing_notices_down.py(5KB)
--------history_trade_down.py(3KB)
--------conf.cnf(161B)
----README.md(3KB)
----.gitattributes(66B)
----sql_create_tables()
--------trade_detail.sql(1KB)
--------balance_sheets.sql(2KB)
--------financial_profits.sql(2KB)
--------notices.sql(655B)
--------cashflows.sql(2KB)
--------suspended_items.sql(806B)
--------finacial_statements.sql(2KB)
--------concepts.sql(413B)
--------unlocked_items.sql(1KB)
--------s_hgst_detail.sql(2KB)

网友评论