工作中用到的一些基本数据处理的操作命令汇总(更新ing)
#引入library
import pandas as pd
1. 读写基本操作
#读取txt或csv,读取出来数据格式是DataFrame
data=pd.read_csv(filename)
#写入txt或csv
df=DataFrame(array/list, columns=['cl1', ...])
df.to_csv(address+output_filename)
查找
查找数据中相同或不同的元素
#查找两列数据中的相同元素
set(data1['x']) & set(data2['y'])
#查找两列数据中的不同元素
set(data1['x']) ^ set(data2['y'])
统计
#dataframe统计某一列中各个值出现的频率
df[col_name].value_counts()
#list统计各个值出现的频率
from collections import Counter
results=Counter(list1)