miemiekurisu
分享一个自己写的股票数据抓取脚本,
其实就是从网站API里简单套取的上交所数据,每个股票历年的每日开盘,收盘, 成交量等等.
指标比较少, 也没有到分时数据, 但是做一些基本的金融时间序列研究和挖掘还是可以的.
脚本写得比较粗糙, 因为最初目标是一次性导入
(主因是想抓些数据深入学习一下时间序列, 所以觉得加APScheduler每日定时跑有点麻烦,
有需要的童鞋可以改成每日定时抓取导入),
就没有做太多处理(多线程并发,持久化框架之类的)
数据库用的PostgreSQL, 直接SQL插入, 有需要的童鞋可以自行替换成相应数据库的驱动.
另外, 本来应该用setting.py作为设置模块的, 因为一些原因用了cfg配置文件.
dbinfo.cfg的格式:
[database]
dbname =
user =
password =
host =
[薄码] 传送门地址: https://github.com/miemiekurisu/stockdata