作者在自学机器学习的过程中,尝试开发了一个基于机器学习的A股选股工具。本文是在赤兔的“数据挖掘”小组分享的此次开发过程和心得体会的整理。 A股选股器开发过程 数据来源 就财经类的数据而言,现在各大门户网站都有专门的频道,信息很多,如果对实时要求高,通过爬虫取其中有用的部分应该是一个办法。 它是免费的,提供结构化的数据,感觉每天更新也挺快。 预处理 拿到数据后第一步是做预处理。我认为股票的数据主要是做归一化,使得不同股票具有可比性。比如涨幅百分比,复权等等。 最初是用了最近3年的数据,后来考虑到A股从2007年到2015年恰好走过了一个上涨到下降再到上涨的完整周期,因此扩大到了8年的数据。 再是对算法的改进,我尝试引入了“推荐指数”的概念。 股灾日经常是“千股跌停”,上涨的股票太少了…可以看出在这些“股灾日”的时候,模型也不太准确,出现了失真。 总结与心得 选股工具利用机器学习算法,一般情况下比传统的算法(或者人为经验)的准确率高。
过去几年,量化机构和高频基金拥有的是数据优势与系统优势。而现在,借助OpenClaw这样的Agent框架,加上实时行情API和自动化调度能力,普通个人也可以在10分钟内搭建一个“专属股票分析系统”。 这篇文章,会手把手带你完成这件事:从服务器部署,到QQ机器人接入;从股票分析Agent人设设计,到实时数据打通;最后,实现每天自动筛选5支潜力股。不需要写复杂代码。不需要专业量化背景。 skill能力接下来,测试一下是否正确调用Finnhub,如果有返回数据则说明接入成功最后效果我让openclaw帮我输出一份盘前的报告,帮助我进行选股,最后的效果如下写在最后到这里,其实整个流程已经闭环了 :服务器部署完成→Agent人设配置完成→实时数据接入完成→QQ机器人打通完成→自动生成盘前报告。 真正重要的,不是“选出5支股票”本身。而是——你把“盯盘”这件事,彻底从人工操作,升级成了Agent工作流。它每天固定时间输出报告;它自动抓取实时行情;它会结合新闻与技术面;它还能持续学习你的偏好。
策划&撰写:温暖 10月10日,美国三大股指集体暴跌,标普指数连跌5日,创下了2015年以来首次“五连跌”。道指跌超过830点,创近两个月新低,纳指跌逾4%,创三个多月新低。 并且,隔夜美股的暴跌态势已经蔓延到了亚太股市和欧洲股市。 今日早上,亚太市场开盘后随美股一样暴跌。 台股加权指数开盘跌1.9%,目前跌幅扩大至逾4%。 在美股惨遭血洗的时候,其中,科技巨头的股票也一路下跌。 国内媒体认为,美债收益率上升是美股承压原因之一。美国国债收益率本月以来一直攀升,10年美债收益率一度触及3.25%的七年最高水平。10月5日,有数据显示,美国失业率降到了3.7%的历史低位。
八股 浏览器输入网址到看到结果的全过程 ==首先是解析url,然后进行缓存判断,判断请求的资源在不在缓存中,如果在缓存中且没有失效,就直接使用,否则就要向服务器发起请求。 (5)TCP三次握手: 下面是 TCP 建立连接的三次握手的过程,首先客户端向服务器发送一个 SYN 连接请求报文段和一个随机序号,服务端接收到请求后向服务器端发送一个 SYN ACK报文段,确认连接请求 数据链路层(Data Link Layer): 主要功能:在直接连接的两个设备之间提供可靠的数据传输。 作用:将物理层提供的比特流分组成数据帧,并负责数据的错误检测和纠正。 网络层(Network Layer): 主要功能:实现数据包的路由和转发,为数据在不同网络之间的传输提供路径。 作用:负责逻辑寻址、数据包的路由选择和跨网络的数据传输。IP协议是网络层的代表。 通常用于实现不同应用程序之间的数据交互。 表示层(Presentation Layer): 主要功能:数据格式转换、数据加密和解密。
主要优势:实时数据:毫秒级更新,支持实时价格和逐笔成交。历史数据查询:批量获取多股 K 线数据,包括开盘价、最高价、最低价、收盘价和成交量(OHLCV)。 批量历史 K 线查询支持多股同时查询历史 K 线数据,周期从分钟线到月线。适合历史数据查询和 K 线数据分析。请求路径:GET /stock/klines? 请求失败:", data['msg']) else: print("HTTP错误:", response.status_code)# 示例:批量查询韩国股市行情和新加坡股市行情的日K线(5条 )get_klines("KR", "005930,000660", 8, 5) # Samsung和SK Hynixget_klines("SG", "D05,O39", 8, 5) # DBS和 OCBC这个功能便于历史数据查询和 K 线数据分析,支持多股批量操作。
本文将系统介绍 A 股 Level-2 行情数据 API 的技术特点、接入方案及实战应用,帮助开发者在量化交易的道路上构建坚实的数据底座。 数据量方面,A 股 Level-2 行情每日增量约 30-45GB,历史数据可达 10TB 级别。这意味着,处理 Level-2 数据不仅需要高效的 API 接入方案,更需要强大的数据存储与计算能力。 同花顺 iFinD:延迟在 100-200 毫秒,覆盖全市场 A 股及港股数据。采用年费制,数据质量稳定,功能丰富,适合专业投资机构使用。 4.2 实时行情接入代码示例以下提供 iTick API 的完整接入示例,包括 REST API 和 WebSocket 两种方式,涵盖 A 股、港股、美股等市场。 def get_stock_kline(region, code, ktype, limit=100): """ 获取历史 K 线数据 ktype: 1-1分钟, 2-5分钟, 3-15
作者寄语 更新之前的港股和美股接口直接返回复权后的数据,方便策略回测使用,具体的使用方法参见文档。 AkShare 股票数据 美股-历史行情 接口: stock_us_daily 目标地址: http://finance.sina.com.cn/stock/usstock/sector.shtml 描述 : 获取美股历史行情数据,设定 adjust="qfq" 则返回前复权后的数据,默认 adjust="", 则返回未复权的数据,历史数据按日频率更新 限量: 单次返回指定上市公司指定 adjust 后的所有历史行情数据 输入参数 名称 类型 必选 描述 symbol str Y 美股代码, 可以通过 「get_us_stock_name」 函数返回所有美股代码, 由于美股数据量大, 建议按需要获取 adjust str -05-18 5 16.28 2017-05-19 5 11.88 2016-05-20 5 8.83 ...
作者寄语 熟悉东方财富的小伙伴一定听过东方财富的股吧评论数据,无论是学术论文还是业界的金工报告都有提及相关内容,本次更新根据股吧浏览、自选股添等数据统计得出,关注指数越高代表该股越受市场关注的千股千评指数接口 ,本数据有东方财富制定。 /stockcomment/ 描述: 获取东方财富网-数据中心-特色数据-千股千评 限量: 单次获取所有数据 输入参数 名称 类型 必选 描述 - - - - 输出参数 名称 类型 默认显示 描述 TDate 接口示例 import akshare as akstock_em_comment_df = ak.stock_em_comment()print(stock_em_comment_df) 数据示例 - - -3953 2020-03-23T00:00:00 900955 海创B股 ...
作者寄语 更新 破净股统计 接口,破净是指市值跌破净资产值,破净股是指股票的每股市场价格低于它每股净资产价格。 数据的时间段为:2005年-至今 更新接口 "stock_a_below_net_asset_statistics" # A 股破净股统计 破净股统计 接口: stock_a_below_net_asset_statistics 目标地址: https://www.legulegu.com/stockdata/below-net-asset-statistics 描述: 获取 A 股破净股统计数据 限量: 单次获取所有历史数据 输入参数 名称 类型 必选 描述 - - - - 输出参数 名称 类型 默认显示 描述 date datetime Y 交易日 below_net_asset float Y 破净股家数 total_company = ak.stock_a_below_net_asset_statistics() print(stock_a_below_net_asset_statistics_df) 数据示例
作者寄语 本次接口主要东方财富的行业板块中成份股,可以与同花顺的对照使用。 更新接口 "stock_board_industry_cons_em" # 东方财富-成份股 东方财富-成份股 接口: stock_board_industry_cons_em 目标地址: https: stock_board_industry_cons_em_df = ak.stock_board_industry_cons_em(symbol="小金属") print(stock_board_industry_cons_em_df) 数据示例 101.36 9.38 3 4 000795 英洛华 8.82 9.98 ... 8.20 8.02 7.67 52.16 4.03 4 5 600392 盛和资源 23.12 8.90 ... 21.12 21.23 8.03 36.60 4.97 5 6 002182 云海金属 22.92
对于金融科技开发者而言,如何稳定、低延迟地获取美股数据是开发全球资产配置工具的第一步。本文将基于 StockTV 全球金融 API,为你详解如何快速集成美股实时行情、历史数据及指数信息。 一、 美股接口对接美股数据通常面临着交易所授权费高昂、API 协议复杂(如 FIX 协议)等痛点。 涨跌幅排行榜:使用 stock/updownList 接口快速获取美股全市场的“涨幅榜”或“跌幅榜”,实时挖掘热点个股。 数据缓存:对于 stock/companies 接口提供的公司描述、行业分类等静态信息,建议在本地数据库做缓存,以优化 App 加载速度。 结语对接美股数据并不复杂,关键在于选择一个稳定且数据维度丰富的供应商。StockTV API 以其标准化的 JSON 结构和覆盖全球的金融数据,极大地降低了金融应用的开发门槛。
核心技术工具说明本次自动化选股项目依赖 Python 的三大核心库,各自承担关键职责:Requests:轻量高效的 HTTP 请求库,负责向金融数据网站发送请求,获取公开的个股行情与财务数据,是爬虫实现的核心工具 Pandas:高性能的数据处理与分析库,负责对提取的金融数据进行清洗、整理、指标计算与筛选,是实现选股逻辑的关键支撑。2. :处理抓取到的缺失值、异常值、格式错误等问题,形成标准化数据集;选股逻辑实现:基于价值投资与成长投资的核心指标,预设筛选规则,利用 Pandas 完成自动化筛选;结果输出:将筛选出的潜力股整理为表格,保存为本地文件方便查阅 A 股列表数据,提取核心选股指标。 选股逻辑优化本文预设的选股逻辑为基础版本,实际投资中可根据需求扩展:增加更多财务指标:资产负债率、毛利率、现金流净额等;加入行情趋势指标:5 日均线、20 日均线、成交量增长率等;引入量化模型:结合均线策略
2,引擎:InnoDB,MyIsam 3,超键,候选键,主键,外键 4,Sql约束: 主键约束:唯一性,非空 唯一约束:唯一性,有一个可为空 检查约束:对列的数据范围限定 默认约束:数据的默认值 外键约束 5,varchar和char 6,in和exist(不会草) 7,drop,delete,truncate的区别 drop删表,删结构 delete 删元组,但是会记入到日志中,可以回滚。 8,mysql查询过程 事务 1,ACID 2,事务隔离级别 3,什么是事务 4,什么是脏读,不可重复读,幻读 5,事务实现原理 6,redo log,undo log 7,binlog 8,事务中可以混合使用引擎吗 不可以,正常情况下没问题,但是如果需要回滚,innodb没问题,myisam就会无法撤销,出现数据不一致。 5,什么是死锁,怎么解决 6,隔离级别和锁的关系 7,优化锁的意见 8,Select 。。。
日股历史数据和实时报价对量化工作意义重大。 日股 API 为量化工作者获取这两类数据提供便捷途径,专业日股 API 能定制数据获取,提高效率和准确性,满足量化交易要求,免费报价 API 虽有局限,但对初步量化研究和小型量化团队也有价值,能降低成本开展工作 近期日股整体呈现上涨趋势,具体来看以下几个方面:指数表现:当地时间 1 月 15 日,日股三大股指全面大幅上涨。 上涨原因分析通胀数据符合预期:最新发布的消费者价格指数(CPI)数据显示,日本 2024 年 12 月 CPI 同比上升 2.9%,环比升 0.4%,均与市场预期相符。 请求K线python -m pip install requests"""**iTick**:是一家数据代理机构,为金融科技公司和开发者提供可靠的数据源APIs,涵盖外汇API、股票API、加密货币API
港美A股实时盘口数据:Python 接入示例教程在量化交易和大宗交易决策中,实时盘口数据(也称为市场深度或 Level 2 数据)是关键要素。 本文聚焦港股(HK)、美股(US)和 A 股(SH/SZ)的实时盘口,介绍如何通过 RESTful API 和 WebSocket 方式接入这些数据,支持多市场覆盖和毫秒级更新。 实时盘口指的是股票买卖双方的挂单信息,通常包括多档(例如 5-10 档)买盘(Bid)和卖盘(Ask)。每个档位包含:价格(Price):挂单价格。挂单量(Volume):该价格下的总挂单数量。 例如,在港股市场,腾讯控股(700.HK)的盘口可能显示买一价 568 HKD,挂单量 75000 股。 美股 (US):如 AAPL (苹果)、TSLA (特斯拉)。A 股 (SH/SZ):上海和深圳交易所股票。接入方式有批量查询(REST)和实时推送(WebSocket)。
stock_rank_cxd_ths" # 创新低 创新低 接口:stock_rank_cxd_ths 目标地址:http://data.10jqka.com.cn/rank/cxd/ 描述:同花顺-数据中心 -技术选股-创新低 限量:单次指定 symbol 的所有数据 输入参数 名称 类型 描述 symbol str symbol="创月新低"; choice of {"创月新低", "半年新低", "一年新低 akshare as ak stock_rank_cxd_ths_df = ak.stock_rank_cxd_ths(symbol="创月新低") print(stock_rank_cxd_ths_df) 数据示例 14.90 14.90 2021-10-28 3 4 000038 深大通 0.00 0.42 8.04 8.04 2021-10-28 4 5
更新接口 "stock_dzjy_hygtj" # 大宗交易-活跃A股统计 大宗交易 活跃A股统计 接口: stock_dzjy_hygtj 目标地址: http://data.eastmoney.com /dzjy/dzjy_hygtj.aspx 描述: 获取东方财富网-数据中心-大宗交易-活跃 A 股统计 限量: 单次返回所有历史数据 输入参数 名称 类型 必选 描述 period str Y period 总成交额 float Y 注意单位: 万元 折溢率 float Y 注意单位: 万元 成交总额/流通市值 str Y - 上榜日后平均涨跌幅-1日 str Y 注意符号: % 上榜日后平均涨跌幅-5日 import akshare as ak stock_dzjy_hygtj_df = ak.stock_dzjy_hygtj(period='近三月') print(stock_dzjy_hygtj_df) 数据示例 0.17680629921259783 0.81875039370078784 3 4 600399 ... 0.51943 0 4 5
作者寄语 本次更新港股通成份股的接口 更新接口 "stock_hk_ggt_components_em" # 港股通成份股 港股通成份股 接口: stock_hk_ggt_components_em 目标地址: https://quote.eastmoney.com/center/gridlist.html#hk_components 描述: 东方财富网-行情中心-港股市场-港股通成份股 限量: 单次获取所有港股通成份股数据 输入参数 名称 类型 描述 - - - 输出参数 名称 类型 描述 序号 int64 - 代码 object - 名称 object - 最新价 float64 注意单位 stock_hk_ggt_components_em_df = ak.stock_hk_ggt_components_em() print(stock_hk_ggt_components_em_df) 数据示例 3704000 34850480.0 3 4 06185 康希诺生物-B 187.50 ... 182.00 178.00 1809797 342741632.0 4 5
物联网(IoT)包括所有这些设备和对象,它们都通过Internet与数据中心相互通信。 该公司的G6系统包括一个自动应用器,一个传感器和一个发射器以及一个显示实时葡萄糖数据的触摸屏接收器。兼容的智能手机和智能手表也可以用于显示数据。 根据疾病控制中心的数据,美国被诊断出患有糖尿病的人数从1958年的158万增加到2015年的2335万。 Impinj Impinj 是该名单上最小的股票,价值约5亿美元。该公司专门从事涉及射频识别或RFID的解决方案。零售商,制造商和物流公司使用Impinj的RFID标签来跟踪库存和资产。 5.全球X物联网ETF 如果不是要挑选个人股票,您仍然可以通过投资Global X Internet of Things 交易所买卖基金来获得IoT的投资。
,并调用对应的业务逻辑方法 3.业务处理完毕,返回更新后的数据给servlet 4.servlet转向到jsp,jsp渲染页面 5.响应给前端更新后的页面C:控制器 1.取得表单数据/json数据 2. 以及管理他们的生命周期容器实现:ioc容器是实现ioc的核心,通常使用beanfactory或applicationcontext来管理bean2.aop实现机制有两种动态代理:基于jdk \基于cglib5. 5.成功获得HandlerAdapter,此时将开始执行拦截器的preHandler(…)方法【正向】 6.提取request的数据,执行controller里面的方法 7.Handler执行完成后, 减少开发者做出的决策,保证团队开发的一致性 2.自动化配置:可以根据项目的环境和依赖,配置应用程序,如果项目引入了mvc依赖,springboot会自动配置一个基本的web应用程序上下文 3.起步依赖:快速搭建框架5. #":防sql注入,会采用预编译的方式 "$":简单的拼接,不能防止sql注入的安全问题5.MybatisPlus和Mybatis的区别?