- 自动生成采集任务
- 自动根据库中数据自动更新数据
- 统计采集的任务
- 任务调度
作者文章归档:course
await-Python
await
是 Python 中异步编程的关键字,通常与 async
搭配使用,用于等待一个异步操作完成。它的作用是让你在非阻塞的情况下等待某个操作,比如 I/O 操作(如网络请求、文件读写等)完成,而不会阻塞整个程序的执行。
主要作用:
-
异步等待:
await
会暂停当前协程的执行,直到被等待的异步操作完成,期间其他协程可以继续执行,这样就能提高程序的效率,尤其是在 I/O 密集型的场景中。 -
非阻塞 I/O:在传统的同步编程中,如果某个操作需要等待(如数据库查询、网络请求等),它会阻塞后续操作。而在异步编程中,
await
可以让你等待一个异步操作完成,但不会阻塞其他任务,程序可以...
QuantConnect-开源的算法交易平台-V2
一段话总结
QuantConnect是一个开源的算法交易平台,提供统一的API,支持研究、回测和实盘交易。其具备强大的量化分析功能,拥有36.8万用户的全球社区,每月进行超50万次回测,交易量达450亿美元,收益超市场7% 。平台提供云服务和本地部署方案,涵盖从研究到生产的完整流程,支持多资产类别,还有丰富的替代数据集。开源的LEAN交易引擎为用户提供定制自由,受到众多机构和个人的认可。
思维导图
## **平台概述**
- 开源算法交易平台
- 提供统一API
- 有云服务和本地部署方案
## **平台功能**
- 云研究:连接海量数据,支持机器学习
- 回测:多资产,调整费用等因素...
Lean-算法交易引擎
这个仓库是QuantConnect的Lean算法交易引擎,是一个事件驱动、专业级别的算法交易平台,具备优雅的工程设计和深度的量化概念建模。以下是对该仓库的详细介绍:
仓库概述
- 平台特点:LEAN是一个事件驱动、专业级别的算法交易平台,注重优雅的工程设计和深度的量化概念建模。它支持开箱即用的替代数据和实时交易。
- 模块化设计:该平台采用模块化设计,每个组件都可插拔和定制,并且自带了适用于所有主要插件点的模型。
- CLI工具:提供QuantConnect Lean CLI命令行界面工具,方便开发者与Lean算法交易引擎进行交互,可用于管理项目、运行回测、部署实时算法等任务。
主要功能模块
-
...
QuantLib-定量金融的免费开源库
这个仓库是QuantLib,一个用于定量金融的免费开源库,旨在为定量金融提供一个全面的软件框架,可用于建模、交易和风险管理等实际场景。以下是对该仓库的详细介绍:
仓库基本信息
- 项目链接:https://www.quantlib.org
- 许可证:采用BSD 3 - Clause许可证,属于非版权保留的自由软件和OSI认证的开源软件。
- 下载地址:https://www.quantlib.org/download.shtml
- 安装说明:https://www.quantlib.org/install.shtml,提供了大多数平台的安装指南。
- 文档资料:https://www.quantlib...
DATA-ONE-API -设计文档-架构
股票 数据平台
股票列表
可交易股票列表
ST 股票列表
退市的股票列表
高风险股票列表
股票的历史数据
股票的实时行情数据
分析/统计平台
预测准确率
特征平台
特征列表
预测平台
涨停的列表
跌停的列表
可视化平台
前端展示平台
mcp.so-MCP服务器聚合平台
-
一段话总结:mcp.so是一个社区驱动的MCP服务器聚合平台,目前收录了7093个MCP Server,涵盖高德地图、百度地图、Blender等多领域应用。同时展示了精选及最新的MCP客户端和服务器,还解答了关于MCP协议、服务器的常见问题,如MCP由Anthropic开发,通过客户端 - 服务器架构让AI系统连接数据源,MCP服务器安全且能提供资源、工具和提示等,平台支持用户提交自己的MCP服务器。
-
思维导图
## **MCP服务器聚合平台**
- 收录7093个MCP Server
- 社区驱动,可提交服务器
## **精选MCP Server**
- 涵盖地图领域,如...
producer-Kafka
Kafka生产者(Producer)概述
在Apache Kafka生态中,生产者(Producer)是负责将消息(数据记录)发送到Kafka主题(Topic)的核心组件。它作为数据的“发送者”或“发布者”,将各类数据源的数据注入Kafka,供后续的消费者(Consumer)进行处理、分析或存储。
核心工作原理
- 消息创建
生产者生成的消息以键值对(Key-Value)形式存在(键为可选)。 - 键(Key):用于消息的分区路由(如按用户ID分区,确保相同用户的消息进入同一分区),也可用于消息去重或排序。
-
值(Value):实际的数据负载,例如用户行为日志、传感器数据、订...
pandas-DataFrame-循环获取每行数据
import pandas as pd
创建一个示例 DataFrame
data = { 'Name': ['Alice', 'Bob', 'Charlie'], 'Age': [25, 30, 35], 'City': ['New York', 'Los Angeles', 'Chicago'] } df = pd.DataFrame(data)
获取列名(title)
columns = df.columns
循环遍历每一行
for index, row in df.iterrows(): print("当前行索引:", index) for...
行业-板块
行业与板块是金融市场中两个既相互关联又存在差异的核心概念,它们的关系可以从以下几个维度深入解析:
一、本质定义与核心差异
行业是基于企业经济活动的同质性进行的基础分类,例如制造业、金融业、信息技术业等。其划分标准通常由权威机构制定,如全球行业分类标准(GICS)将行业细分为11个板块、24个行业组、69个行业和158个子行业。这种分类强调企业的主营业务性质,具有稳定性和普适性,适用于宏观经济分析和产业研究。
板块则是金融市场中对股票或资产的动态归类,其划分依据更为多元。除了行业属性外,还可能基于地域(如“一带一路”板块)、政策主题(如“碳中和”板块)、市场热点(如“元宇宙”概念)甚至市值...