Python：导入逗号与TXT文件分开的数据

Question

我用Raspberry Pi Pico构建了数据记录仪。数据记录器每六分钟在TXT文件中节省每六分钟的温度。 我目前未能将数据从TXT文件导入到Python中。

数据看起来像这样： 1,20.5,2,21.0,3,21.0,4,4,21.0,5,5,21.0,6,6,21.0,7,21.0，...

数据集因此包含两个变量，这些变量由逗号，一个增加的计数器和一个小数位的温度。该数据集大约有240个测量值。

到目前为止，我已经尝试了不同的方法来导入数据。我已经将TXT文件变成了CSV文件，并尝试使用pandas作为数据帧进行导入：

temp_df = pd.read_csv（'temp_data.csv'，header = none

）以及三位数的变量。我不能将数据集导入只有两个变量和大约240个观测值。

我还试图将数据导入列表：

import csv 
file = open("temp_data.csv", "r")
temp_list = list(csv.reader(file, delimiter=","))
file.close()
print(temp_list)

这导致错误： “ typeError：'list'对象不可callable”。

- ＆gt;总而言之，我需要一个直接使用TXT文件并创建DF的解决方案。 我仍然对Python非常没有经验，并希望您的帮助！ 提前致谢

Answer 1

这有帮助吗？

import pandas


data = dict()

with open("data.txt") as f:
    for line in f.readlines():
        splitted = line.split(",")
        data = {**data, **dict(zip(splitted[::2], splitted[1::2]))}

as_dataframe = pandas.DataFrame({"counter": data.keys(), "temperature": data.values()})

Answer 2

您应该尝试pd.read_fwf。它用于读取固定宽度格式。

https://pandas.pydata.org/docs/reference/api/ pandas.read_fwf.html

Answer 3

我会在这里使用numpy。 Numpy是具有良好功能的Python列表。它们允许您将列表保存/检索.npy文件。

例如。

import numpy as np
import pandas as pd

data = [1,20.5,2,21.0,3,21.0,4,21.0,5,21.0,6,21.0,7,21.0]
data_numpied = np.array(data,dtype=float)
np.save("numpy_data_storage.npy",data_numpied,allow_pickle = True)

# Restart / exit here

new_data = [42,42,1.0]
old_data = np.load("numpy_data_storage.npy",allow_pickle=True)
new_data2 = np.concatenate((old_data,new_data))

dataframe = pd.DataFrame(new_data2,columns = ["Temperature"])

但是，“ .npy”文件不可读。

Answer 4

给定输入文件

1,20.5,2,21.0,3,21.0,4,21.0,5,21.0,6,21.0,7,21.0`

作为例如，尝试以下操作：

import pandas as pd
df = pd.read_csv('temp_data.csv', header=None)
temp_df = pd.DataFrame(index=df.iloc[0,0::2].astype(int).values, data=dict(temp=df.iloc[0,1::2].values))
print(temp_df)

结果：

     temp
1  20.5
2  21.0
3  21.0
4  21.0
5  21.0
6  21.0
7  21.0