我有一个.dat文件,它需要一列中的数千行(比如说,列是time,t),现在我想查找间隔在列中的行之间,这意味着从第一行减去第二行的值,等等。(找到dt)。然后我想用这些间隔值创建一个新列,并将其与原始列进行比较。如果python以外的任何其他语言在这种情况下都有帮助,我也会赞赏他们的建议。
我写了一个伪Python代码为:在python熊猫数据框中从前面的行中减去列的行
import pandas as pd
import numpy as np
from sys import argv
from pylab import *
import csv
script, filename = argv
# read flash.dat to a list of lists
datContent = [i.strip().split() for i in open("./flash.dat").readlines()]
# write it as a new CSV file
with open("./flash.dat", "wb") as f:
writer = csv.writer(f)
writer.writerows(datContent)
columns_to_keep = ['#time']
dataframe = pd.read_csv("./flash.csv", usecols=columns_to_keep)
df = pd.DataFrame({"#time"})
df["#time"] = df["#time"] + [pd.Timedelta(minutes=m) for m in np.random.choice(a=range(60), size=df.shape[0])]
df["value"] = np.random.normal(size=df.shape[0])
df["prev_time"] = [np.nan] + df.iloc[:-1]["#time"].tolist()
df["time_delta"] = df.time - df.prev_time
df
pd.set_option('display.height', 1000)
pd.set_option('display.max_rows', 1000)
pd.set_option('display.max_columns', 500)
pd.set_option('display.width', 1000)
dataframe.plot(x='#time', y='time_delta', style='r')
print dataframe
show()
更新我的代码,我也是共享的.dat文件我的工作。执行涉及来自不同行的值的操作 https://www.dropbox.com/s/w4jbxmln9e83355/flash.dat?dl=0
大熊猫的转换功能应该有所斩获。 –