python导入csv/txt文件

 1. 导入csv文件

### python导入csv文件的三种方法

```python

#原始的方式

lines = [line.split(\',\') for line in open(\'iris.csv\')]
df = [[float(x) for x in line[:4]] for line in lines[1:]]

#使用numpy包

import numpy as np
lines = np.loadtxt(\'iris.csv\',delimiter=\',\',dtype=\'str\')
df = lines[1:,:4].astype(\'float\')

#使用pandas包

import pandas as pd
df = pd.read_csv(\'iris.csv\')
df=df.ix[:,:4]

这三种方法中最后一种最简单，不过花费时间比较长一点，第一种最麻烦，不过用时最短。这个可以通过ipython中的magic函数%%timeit来看。

 

2. 导入txt文件

数据：

将数据转为DataFrame格式，代码如下：

def read_file(path,is_test=False):
    fp = open(path,encoding=\'utf-8\')
    dataset = []
    for line in fp.readlines():
        line = line.strip().split(\'\t\')
        if is_test:
            line.append(\'-1\')
        dataset.append(line)
    data = pd.DataFrame(dataset)
    data.columns = [\'prefix\',\'query_prediction\',\'title\',\'tag\',\'label\']
    return data

　　

 

 

 

 

参考文献：

【1】numpy.loadtxt()