【发布时间】:2016-04-21 04:48:45
【问题描述】:
谢谢!我从here 修改了我的滑动窗口代码,但它仍然比应有的少一个窗口。
如果您想了解有关该问题的更多信息,我在那里写了有关最初问题的信息。简而言之,我正在处理一个包含这种格式的 pi 小数位的大文本文件。注意头部全是数字,没有字符串。
我需要制作一个使用三个参数(window_size、step_size 和 last_windowstart)裁剪文件的滑动窗口。 last_windowstart 是最后一个窗口开始的地方。
它可以工作,但应该有 238 个窗口而不是 237 个。
我知道 lastcounter 工作正常,但我不确定 lastwindow_start。我试过改变它的值,这绝对是问题的一部分。
Xrange 也是问题的一部分
对sliding_window 或lastwindow_start 有什么想法吗?
inputFileName = "sample.txt"
import itertools
import linecache
def sliding_window(window_size, step_size, lastwindow_start):
for i in xrange(0, lastwindow_start, step_size):
yield (i, i + window_size)
def PiCrop(window_size, step_size):
f = open(inputFileName, 'r')
first_line = f.readline().split()
Total_Pi_Digits = int(first_line[0])
lastwindow_start = Total_Pi_Digits-(Total_Pi_Digits%window_size)
lastcounter = (Total_Pi_Digits//window_size)*(window_size/step_size)
flags = [False for i in range(lastcounter)]
first_line[0] = str(window_size)
second_line = f.readline().split()
offset = int(round(float(second_line[0].strip('\n'))))
first_line = " ".join(first_line)
f. close()
with open(inputFileName, 'r') as f:
header = f.readline()
data = [line.strip().split(',') for line in f.readlines()]
for counter, window in enumerate(sliding_window(window_size,step_size,lastwindow_start)):
chunk = data[window[0]:window[1]]
with open('PiCrop_{}.txt'.format(counter), 'w') as output:
if (flags[counter] == False):
flags[counter] = True
headerline = float(linecache.getline(inputFileName, window[1]+1)) - offset
output.write(str(window_size) + " " + str("{0:.4f}".format(headerline)) + " " + 'L' + '\n')
for item in chunk:
newline = str("{0:.4f}".format(float(str(item).translate(None, "[]'"))-offset))
output.write(str(newline) + '\n')
PiCrop(1000,500)
【问题讨论】:
标签: python text iterator full-text-search sliding-window