使用xlwt读取日志数据并创建一个xls文件
需求实现
- 给定了一个日志文件,想要把日志里面的数据,xsl表格当中,对应实际例子是:
- 打开日志文件,想要把train_acc 以及 val_accuracy对应的列数据存到表格中
代码实现:
import xlwt
import os
w = xlwt.Workbook(encoding="utf-8",style_compression=0)
ws = w.add_sheet('data4')
ws.write(0, 0, 'train_acc')
ws.write(0, 1, 'val_accuracy')
n = 1
with open("resnet34_for_CT_zhifangtu_9bi1(1).log", 'r+') as fr:
for text in fr.readlines():
ws.write(n, 0, text.split(" ")[8])
ws.write(n, 1, text.split(" ")[13])
n = n + 1
w.save('data4.xls')
最后得到的数据结果是:
注意点:
- 日志文件可以直接放在创建包的下面->填写地址的时候会更加方便一点,创建以后的数据直接写上文件名 +
后缀(xsl)就保存在创建包文件目录下:
with open("resnet34_for_CT_zhifangtu_9bi1(1).log", 'r+') as fr:
- text.split(" ")[n]:返回根据指定的分隔符 separator 拆分文本值 text 而得到的文本值列表。其中的n值需要你自己数一个,如果无法判断,可以每次通过观察处理好以后的数据来得到,最后得到的结果是
实现效果图
是符合预期的。
使用pandas读取excel表格及用matplotlib画图
需求分析
- 使用pandas对xls文件里面的数据进行读取,用一个多维数组来进行存取
- 对于多维数组中的每一列用一个一维数组存取
- 绘图
代码实现
代码有很多注释进行了测试
import pandas as pd
import numpy as np
from matplotlib import pyplot as plt
df = pd.read_excel('D:\Language learning\Python\PythonDemo\PythonDemo\SimulationForXiaozhengnan\data.xls')
height, width = df.shape
x = np.zeros((height, width))
for i in range(0, height):
for j in range(1, width+1):
x[i][j-1] = df.iat[i,j-1]
train_acc = []
val_accuracy = []
for i in range(height):
train_acc.append(x[i, 0])
val_accuracy.append(x[i, 1])
plt.figure(figsize=(10, 8), dpi = 80)
x = np.linspace(0 ,50, 100)
plt.xlabel('epoch')
plt.plot(x, train_acc, label = 'train_acc',)
plt.plot(x, val_accuracy, label = 'val_accuracy')
plt.legend()
plt.title('model accuracy')
plt.savefig('D:\Language learning\Python\PythonDemo\PythonDemo\SimulationForXiaozhengnan\Fig\Fig1.png')
plt.show()
注意点
- 对文件里面内容进行获取用的是df.iat[i,j],不再使用df.ix[i, j]了
- 二维数组的横纵坐标的存取需要多加注意
- 在pycharm当中,要找到当前文件的全地址可以这样:右键然后点击File Path然后进行相应复制即可!
实现效果图
|