Pandas inf值替换
填坑小铁锹 人气:0使用Pandas从MySQL读取数据,在处理之后再写回到数据库时报了一个错误:
sqlalchemy.exc.ProgrammingError: (MySQLdb._exceptions.ProgrammingError) inf can not be used with MySQL
很明确报错说明,是因为DataFrame中存在inf数据
出现inf的原因
在数据处理过程中用到了除法,并且出现了除数为0,导致出现inf,而数据库不支持写入该值
说明,np.inf为正无穷,-np.inf为负无穷
解决办法
将处理过之后的DataFrame中的inf值替换掉,替换代码:
df = df.replace([np.inf, -np.inf], np.nan)
上述代码将处理结果中的正无穷和负无穷都替换为空值,最后写入到数据为中的为null值
PS:为了方便后续处理,可以利用numpy,将这些inf值进行替换。
1. 将某1列(series格式)中的 inf 替换为数值。
import numpy as np df['Col'][np.isinf(df['Col'])] = -1
2. 将某1列(series格式)中的 inf 替换为NA值。
import numpy as np df['Col'][np.isinf(df['Col'])] = np.nan
3. 将整个DataFrame中的 inf 替换为数值(空值同理)。#感谢评论区的补充
import numpy as np df.replace(np.inf, -1) #替换正inf为-1 #替换正负inf为NA,加inplace参数 df.replace([np.inf, -np.inf], np.nan, inplace=True)
加载全部内容