作者文章归档：course
Embedding（嵌入）是机器学习和人工智能领域的核心概念，本质是将高维、离散、稀疏的数据（如文字、图片、音频、用户、商品等）转换为低维、连续、稠密的实数向量表示的过程。这些向量被称为嵌入向量（Embedding Vector），其神奇之处在于能在向量空间中捕获并保留原始数据的语义、关系或特征。
利用智能体人工智能（Agentic AI）与多大型语言模型（LLMs）创建更智能解决方案的解读报告
一、引言
在人工智能技术飞速发展的当下，大型语言模型（Large Language Models，简称LLMs ）已成为推动各领域创新的关键力量。而智能体人工智能（Agentic AI）概念的出现，进一步拓展了LLMs的应用边界，为构建更智能、更具协同性的解决方案提供了新路径。本次报告聚焦于“Using Agentic AI to create smarter solutions with multiple LLMs (step - by - step process)”这一主题，通过对相...
2025年6月3日至5日在旧金山举办的AI Engineer World's Fair已第三届，是工程师必参加的盛会，由Microsoft和smol.ai主办，汇聚世界顶尖AI实验室人员、创始人、财富500强CTO与AI工程师等约1000人，有超150场分18个轨道的演讲、20+场实践工作坊、前沿博览会等丰富活动，其高技术性、高生产价值获参与者盛赞，称其信号噪音比高、内容前沿，还可查看2023-2025年演讲。
## **基本信息**
- 时间：2025年6月3-5日
- 地点：旧金山
- 主办方：Microsoft、smol.ai
- 参与人员：约1000名创...量化投资旨在通过金融工具在连续交易期内实现收益最大化与风险最小化，受AI技术快速发展及其在量化投资中创新潜力的启发，AI驱动的量化研究与投资工作流应用日益增多，与此同时，AI技术在丰富量化投资方法论的同时，也对量化投资系统提出了基础设施需升级以适应新学习范式、需更强大性能以满足数据驱动特性、以及在金融场景中应用AI解决不同任务存在独特挑战等新要求，为应对这些挑战并桥接AI技术与量化投资，我们设计开发了Qlib，其旨在实现AI技术在量化投资中的潜力、赋能相关研究并创造价值。
## **标题**
- Qlib: An AI-oriented Quantitative...Policy Gradient Ascent（策略梯度上升）是强化学习中直接优化策略参数的一类方法，核心思想是通过梯度上升调整策略网络的参数，使得智能体在环境中获得的期望累积回报最大化。它属于策略梯度（Policy Gradient）算法家族，适用于连续或高维动作空间场景（如机器人控制）。
与价值函数方法（如Q-learning，通过估计“状态-动作价值”间接优化策略）不同，策略梯度方法直接对策略参数$\theta$（如神经网络权重）进行优化。策略$\pi_\theta(a|s)$表示在状态$s$下选择动作$a$的概率（随机策略）或确定动作（确定性策略）。目标是最...
在强化学习（Reinforcement Learning, RL）中，策略网络（Policy Network）是直接输出智能体（Agent）动作策略的神经网络模型，是策略梯度（Policy Gradient）类算法（如REINFORCE、PPO、TRPO等）的核心组件。其核心作用是将环境状态映射到动作的概率分布（或确定性动作），指导智能体在不同状态下做出决策。
时间差分学习（Temporal Difference Learning, TD Learning）是强化学习（Reinforcement Learning, RL）中的核心方法之一，它巧妙结合了动态规划（Dynamic Programming, DP）和蒙特卡洛（Monte Carlo, MC）方法的优点，能够在无需完全知晓环境模型的情况下，通过采样交互数据在线更新值函数。以下从核心概念、算法原理、优势对比及应用场景等方面展开概述：
智能体（Agents）的“智能体化”程度探究：现状、挑战与未来方向
一、幻灯片内容解析
（一）核心问题：How agentic are our agents?（我们的智能体有多“智能体化”？ ）
这一问题聚焦于当下智能体（agents）在自主性、功能实现等维度，与理想中具备高度智能体特质（如自主决策、长期任务执行等）的契合度探究，是理解智能体发展现状与瓶颈的关键切入点。
（二）具体要点展开
◦ Low degree of autonomy（低自主性 ）：这类智能体多遵循预设的、线性的流程运行，像工厂流水线...