查看全课大纲(第 40 / 52 节)
- 1.量化分析基本概念:从咖啡馆到华尔街
- 2.量化交易员学习路线:从零基础到策略开发
- 3.量化策略生命周期:数据分析的五大流程
- 4.量化数据类型:数值型与类别型数据
- 5.量化沙盒搭建(1):Python与Anaconda安装
- 6.量化沙盒搭建(2):Jupyter Notebook与库配置
- 7.本地多源数据:量化历史回测的基石
- 8.TXT数据流操作:处理金融交易日志
- 9.JSON数据流操作:解析股票行情API响应
- 10.CSV行情文件操作:读取与存储历史K线
- 11.Excel报表操作:清洗财报与财务指标
- 12.量化数据库:SQL常用查询语法
- 13.量化数据库:Python连接与写入
- 14.量化多表连接:关联股票信息与行情
- 15.实战:小象咖啡店营业数据与个股财务指标的多源数据分析
- 16.量化数据采集:爬虫工作原理与合规
- 17.量化爬虫核心:URL管理与去重策略
- 18.量化网页下载:防反爬与请求头伪装
- 19.网页解析(1):使用XPath定位财经新闻
- 20.网页解析(2):使用CSS选择器与ItemLoader
- 21.Scrapy框架:构建工业级量化爬虫
- 22.Scrapy实战(1):新建项目与数据模型定义
- 23.Scrapy实战(2):编写财经爬虫逻辑
- 24.Scrapy实战(3):启用数据管道清洗行情
- 25.Scrapy实战(4):防反爬中间件配置
- 26.实战:构建每日热门个股行情自动采集系统
- 27.NumPy与SciPy:加速量化矩阵计算
- 28.NumPy数组:构建股票价格矩阵
- 29.数组切片:提取特定股票与交易日数据
- 30.NumPy常用方法:计算均值与波动率
- 31.向量化计算:摆脱缓慢的For循环
- 32.通用函数ufunc:计算对数收益率与累计收益
- 33.实战:股票组合资产收益率与协方差矩阵计算
- 34.Pandas Series:管理单只股票收盘价
- 35.Pandas DataFrame:构建多只股票行情面板
- 36.Pandas Index:时间序列索引与对齐
- 37.DataFrame索引操作:loc与iloc定位行情
- 38.索引总结:量化多字段筛选与定位
- 39.运算与对齐:合并不同交易日的数据
- 40.Pandas map:对股票代码与状态做映射
- 41.Pandas apply:滚动计算技术指标
- 42.排序操作:按市盈率与收益率对股票排名
- 43.数据清洗:填充与剔除停牌股票缺失值
- 44.数据清洗:剔除重复报价与异常交易数据
- 45.常用统计:量化最大回撤与分位数风险评估
- 46.极值定位:寻找历史最高价与最低价的发生日
- 47.风险与累计收益:计算年化波动率与累计回报
- 48.实战:小象咖啡店营业数据与热门个股时间序列清洗分析
- 49.Series索引操作:按位置与标签访问行情数据
- 50.文件读写操作:CSV行情数据导入导出
- 51.数据清洗:替换异常报价数据
- 52.常用统计:sum/mean/median/count聚合指标
Pandas map:对股票代码与状态做映射
约 8 分钟
小象实战讲义 · 量化交易Python入门:从咖啡馆到华尔街
Pandas 是量化交易员最核心的武器。本章你将通过 Series 和 DataFrame 深度处理时间序列行情数据,掌握 loc/iloc 定位筛选、缺失值与重复值清洗、以及最大回撤与年化波动率等核心指标统计计算。
💡 核心导读
本节将深入讲解 Pandas 中 map() 方法的核心用法与实战技巧。通过学习,您将掌握:1)map() 方法的基本原理与适用场景;2)如何对 Series 数据执行元素级转换;3)结合字典和自定义函数实现复杂映射逻辑。重点培养数据清洗和特征工程中的映射转换能力。
基本概念
map() 是 Pandas Series 的专有方法,用于执行元素级的数据转换。与 apply() 不同,map() 专门针对单列数据操作,效率更高且语法更简洁。
核心特点:
- 输入:字典、函数或 Series
- 输出:新 Series
- 典型应用场景:值替换、数据标准化、分类编码
操作指南
字典映射
import pandas as pd
data = pd.Series(['苹果', '香蕉', '橙子', '苹果'])
print("原始数据:")
print(data)
fruit_code = {'苹果': 'A', '香蕉': 'B', '橙子': 'C'}
coded_data = data.map(fruit_code)
print("\n映射结果:")
print(coded_data)原始数据:
0 苹果
1 香蕉
2 橙子
3 苹果
dtype: str
映射结果:
0 A
1 B
2 C
3 A
dtype: str函数映射
import pandas as pd
temps = pd.Series([36.5, 37.1, 38.2, 35.9])
def check_fever(temp):
return '发热' if temp >= 37.3 else '正常'
health_status = temps.map(check_fever)
print("\n体温状态:")
print(health_status)体温状态:
0 正常
1 正常
2 发热
3 正常
dtype: str缺失值处理
import pandas as pd
incomplete_data = pd.Series(['苹果', '梨', '香蕉', None])
fruit_code = {'苹果': 'A', '香蕉': 'B', '橙子': 'C'}
safe_mapping = incomplete_data.map(fruit_code, na_action='ignore')
print("\n安全映射结果:")
print(safe_mapping)安全映射结果:
0 A
1 NaN
2 B
3 NaN
dtype: str性能优化技巧
- 预编译函数:对复杂逻辑优先使用
numpy.vectorize - 字典替代条件语句:比多重
if-else效率更高 - 链式操作:结合
astype()等方法减少中间变量
import pandas as pd
import numpy as np
vector_func = np.vectorize(lambda x: x.upper() if pd.notnull(x) else x)
result = pd.Series(['a', 'b', None]).map(vector_func)
print("向量化映射结果:")
print(result)向量化映射结果:
0 A
1 B
2 NaN
dtype: str📝 动手练一练
第 1 题 · 概念应用
假设你正在处理一个量化因子库,其中有一个名为 factor_signal 的 Series,其值为 1、0 或 -1,分别代表“强烈看多”、“中性”和“强烈看空”。现在你需要将其转换为更易读的标签,用于生成报告。
以下哪种方法是最合适且高效的?
- A. 使用
factor_signal.apply(lambda x: '强烈看多' if x == 1 else ('中性' if x == 0 else '强烈看空')) - B. 使用
factor_signal.map({1: '强烈看多', 0: '中性', -1: '强烈看空'}) - C. 使用
factor_signal.astype(str).replace({'1':'强烈看多', '0':'中性', '-1':'强烈看空'}) - D. 使用
factor_signal.transform(lambda x: '强烈看多' if x == 1 else ('中性' if x == 0 else '强烈看空'))
👉 点击查看参考答案
答案:B
推理过程:
- 本题的核心是将离散的数值映射为对应的分类标签,这正是
Series.map()方法的典型应用场景。 - 选项B:直接使用字典进行映射,语法简洁,且
map()方法针对 Series 的元素级操作进行了优化,在处理此类简单映射时通常比apply效率更高。 - 选项A:虽然功能正确,但使用了多层嵌套的
lambda函数,代码可读性较差,且apply在简单映射场景下的执行效率通常低于map(dict)。 - 选项C:先转换为字符串再进行替换,增加了不必要的类型转换步骤,效率较低,且逻辑不够直接。
- 选项D:
transform方法主要用于与分组操作结合,在此处使用并不合适,且其内部逻辑与apply类似,效率并非最优。
因此,使用 map() 配合字典是最佳实践。
第 2 题 · 代码填空
在回测中,你有一个持仓股票代码的 Series,需要根据一个行业分类字典,快速映射出每只股票所属的行业名称,以便进行行业暴露分析。请补全以下代码。
import pandas as pd
import numpy as np
# 模拟持仓股票代码
positions = pd.Series(['000001.SZ', '600519.SH', '000858.SZ', '002415.SZ'])
# 行业分类字典 (股票代码 -> 行业)
industry_dict = {
'000001.SZ': '银行',
'600519.SH': '食品饮料',
'000858.SZ': '食品饮料',
'002415.SZ': '计算机'
}
# 使用 map 方法,根据字典映射出行业信息
positions_industry = positions.______(industry_dict)
print("股票代码对应的行业:")
print(positions_industry)👉 点击查看参考答案
空位应填:map
补全后的完整可运行代码如下:
import pandas as pd
import numpy as np
# 模拟持仓股票代码
positions = pd.Series(['000001.SZ', '600519.SH', '000858.SZ', '002415.SZ'])
# 行业分类字典 (股票代码 -> 行业)
industry_dict = {
'000001.SZ': '银行',
'600519.SH': '食品饮料',
'000858.SZ': '食品饮料',
'002415.SZ': '计算机'
}
# 使用 map 方法,根据字典映射出行业信息
positions_industry = positions.map(industry_dict)
print("股票代码对应的行业:")
print(positions_industry)股票代码对应的行业:
0 银行
1 食品饮料
2 食品饮料
3 计算机
dtype: str本章小结
📋 行动清单
- 使用字典映射将省份名称转换为对应的区号
- 编写自定义函数实现成绩等级转换(90+ → A,80-89 → B)
- 对包含缺失值的商品价格序列应用安全映射策略
—— 小象教研组