curl https://api.openai.com/v1/chat/completions \
-H "Content-Type: application/json" \
-H "Authorization: Bearer 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...
分类目录归档:知识库
集思录-投资网站
- 一段话总结:集思录网页包含实时投资数据,如可转债等权指数为2124.859↑ +7.920 +0.370% 56.47℃等多种投资品类信息。社区内容丰富,有湘财吸收合并大智慧等各类话题讨论,涵盖投资分析、实盘记录等,其中“2023年重新出发”实盘记录有430个回复、153541次浏览,还有广发证券开户广告等。
- 思维导图
## **实时投资数据**
- 可转债等权指数:2124.859↑ +7.920 +0.370% 56.47℃
- 多种投资品类:T+0 QDII、股息率等
## **社区话题**
- 投资分析:冀东转债分析等
- 实盘记录:“2023年重新出发”等
- 其他话题:...
yfinance源码解析-scrapers-screener-02
在 yfinance
仓库中,scrapers
和 screener
是两个不同但相关的功能模块,主要区别和联系如下:
1. 功能定位不同
scrapers
(数据抓取器)
- 定位:底层数据获取工具,负责从雅虎财经页面或 API 中直接抓取原始数据,并解析为结构化格式(如 JSON、DataFrame)。
- 典型场景:抓取股票持有者信息(如机构持有者、内幕交易数据)、实时行情数据、历史价格等。
- 示例模块:
scrapers/holders.py
中的Holders
类,通过_fetch
和_parse
方法从网页或 API 提取原始数据并清洗。
screener
(筛选器)
- 定位:上层...
yfinance 源码仓库解析-01
这个仓库 yfinance
是一个用于从雅虎财经(Yahoo! Finance)的 API 下载金融和市场数据的 Python 库。以下是对该仓库的详细介绍:
主要特点
- Pythonic 接口:提供了简洁易用的 Python 接口,方便用户获取金融和市场数据。
- 多类型数据支持:可以获取单个股票(
Ticker
)、多个股票(Tickers
)的数据,还能下载多只股票的市场数据(download
)。 - 丰富的功能模块:包括获取市场信息(
Market
)、实时流式数据(WebSocket
和AsyncWebSocket
)、搜索报价和新闻(Search
)、获取行业和板块信息(Sector
和Ind...
基于 Python 的分布式并发写入方案-V2
- 从mongodb数据库的集合中 获取所有的股票代码 stocks
- 把stocks 放入redis 队列
- 启动多进程池 然后 并发的从队列中取 stock
- 处理完后,把数据存入mongodb 中
写成一个类updateStockData ,包含上面的这些方法
基于 Python 的分布式并发写入方案
以下是基于Python、Redis队列和MongoDB的分布式并发写入方案,适用于5000个接口数据处理:
方案架构
- 技术栈
• 任务队列:Redis(List结构实现FIFO队列,支持分布式消费)。
• 并发处理:Python多进程/线程(或异步框架如FastAPI+协程)。
• 存储层:MongoDB(分片集群或副本集,支持高并发写入)。
核心步骤
- 数据入队
• 接口请求:
◦ 用Python遍历5000个接口,将每个接口URL/参数作为任务存入Redis队列(如task_queue)。
◦ 示例代码: import redis r = redis.Redis(host='l...
FineBI-大数据分析工具
一段话总结
FineBI是一款强大好用、人人可用的大数据分析工具,能连接多种数据源,具备数据编辑、可视化、分享协作等功能,内置50+图表,可实现一站式主题分析,比传统数据分析提效50%,图表可视化效率较传统BI提升19%。它拥有丰富函数,能智能分析数据变化原因,还可设置预警。该工具能满足不同岗位人员的数据分析需求,提供丰富业务场景模板和案例,获得30000+企业认可,支持免费体验。
## **产品功能**
- 连接多种数据源,一键接入数据库表或导入Excel
- 可视化编辑数据,无需SQL,含多种新增列功能
- 内置50+图表,支持联动钻取特效
- 多人协同编辑仪表板,复用报表,一键...
CausalStock: Deep End-to-end Causal Discovery for News-driven Stock Movement Prediction-论文
这篇论文提出了一种名为CausalStock的模型,用于预测受新闻影响的多只股票价格走势,核心内容如下: 1. 研究背景:在预测多只股票价格走势时,现有方法存在两个问题。一是股票关系常为单向,以往基于相关性的关系建模不合适,因果关系更能准确反映股票间影响;二是新闻数据噪声大,传统文本挖掘模块难以提取有效信息。 2. 创新点 - 因果关系发现:设计了与时间滞后相关的因果发现模块,能根据时间滞后直观地建立股票间的因果关系,比以往不考虑时间滞后的方法更适合股票数据。 - 新闻信息提取:提出基于大语言模型(LLM)的去噪新闻编码器。它能从多个角度给新闻文本打分,有效去除噪声,提取...
归一化-sklearn.preprocessing.MinMaxScaler-数据预处理工具
sklearn.preprocessing.MinMaxScaler
是 scikit-learn 库中的一个数据预处理工具,用于将特征数据按比例缩放到指定的范围,通常是 [0, 1] 或 [-1, 1]。这种归一化处理有助于消除特征之间的尺度差异,使得各特征在同一量级上,从而提高机器学习模型的训练效率和性能。
🔍 功能说明
MinMaxScaler
对每个特征(列)进行线性变换,使其值缩放到指定的范围默认情况下,缩放范围是 [0, 1],但可以通过 feature_range
参数设置为其他范围,如 [-1, 1]
变换公式如下
[
X_{\text{scaled}...
Cursor-中文界面设置
要将 Cursor 代码编辑器的界面设置为中文,可通过以下两种主流方法实现,涵盖 Windows、Mac、Linux 全平台操作:
方法一:通过扩展市场安装中文语言包
-
打开扩展市场
启动 Cursor 后,按下Ctrl + Shift + X
(Windows/Linux)或Cmd + Shift + X
(Mac),左侧边栏会出现扩展商店界面。在搜索框输入 "Chinese" 或 "中文",选择下载量最高的 "Chinese (Simplified) Language Pack for Visual Studio Code"(插件 ID:MS-CEINTL)进行安装。 -
重...