DIY“天气预报” | LSTM预测时间序列

LSTM(Long Short-Term Memory)是长短期记忆网络,是一种时间递归神经网络,适合用来处理时间序列数据,在时间序列的预测问题中表现尤为突出。下图是百度百科中的LSTM“三重门”结构:



时间序列是指按时间顺序排列的、随时间变化的且相互关联的数据序列。实际中遇到的时间序列往往有三个主要特性:趋势性、季节性和非平稳性,而时间序列分析一般都是预测问题。
1、数据集:北京的连续2360天的温度数据
(原始数据好像上传不了,直接上图好了。)



2、实验
实验部分可分为四部分:数据预处理、建模、模型训练和预测。

实验中,按照训练集:测试集 = 9:1的比例做数据集划分,滑动窗口取了20,也可以理解为这20个点中,前19个点作为data,最后一个点作为label,LSTM的网络结构如下:


实验结果貌似还不错,测试集包含234个点,训练150轮,在非归一化的数据上,loss收敛到了6左右,下图是预测的2016.11.9到2017.6.30之间234天的每日最高温与当日真实值的对比图。蓝线表示真实值,橙线表示预测值。


既然测试集上效果还比较理想,索性开一下脑洞,预测出未来31天的最高温,反正没有真实值做对比,结果飞了就飞了,坐等打脸了[捂脸]。

# 预测得到的7月份30天每日最高温数值
predict_series : [33.0, 32.0, 33.0, 32.0, 31.0, 32.0, 32.0, 31.0, 31.0, 32.0, 31.0, 31.0, 32.0, 30.0, 31.0, 31.0, 30.0, 30.0, 30.0, 30.0, 30.0, 29.0, 29.0, 29.0, 29.0, 29.0, 28.0, 28.0, 28.0, 28.0, 30.0]
# coding: utf-8
#预测7月份北京的每日最高温
__author__ = "孙欢"
import xlrd
import xlwt
import os
import numpy as np
import pandas as pd
import time
import matplotlib.pyplot as plt
from numpy import newaxis
from keras.layers.core import Dense, Activation, Dropout
from keras.layers.recurrent import LSTM
from keras.models import Sequential
#变量声明
day_high = []  #一天中的最高温度
day_low = []    #一天中的最低温度
predict_series = []
result = []
day_new = []
out_put = []

#加载数据
def load_data(xls_file):
data = xlrd.open_workbook(xls_file)
for index in data.sheets():
table = data.sheet_by_name(index.name)#通过名称获取
nrows = table.nrows  #获取当前列表的行数
for row in range(nrows):
if (row != 0):
day_high.append(table.row_values(row)[1]) #一天中的最高温度
day_low.append(table.row_values(row)[2])  #一天中的最低温度

#数据预处理
def data_preprocess(data0):
data = data0
#data.append(data[-1])
#print(data[-1])
sequence_length = 20
result = []
for index in range(len(data) - sequence_length):
result.append(data[index: index + sequence_length])  #得到长度为sequence_length 的向量,最后一个作为label
result = np.array(result)
#print(len(result))
#print("result:",result)
row = round(0.9 * result.shape[0])
train = result[:row, :]
#print("train:",train)
np.random.shuffle(train)
x_train = train[:, :-1]
#print(x_train)
y_train = train[:, -1]
x_test = result[row:, :-1]
y_test = result[row:, -1]
#print(x_test)
x_train = np.reshape(x_train, (x_train.shape[0], x_train.shape[1], 1))
x_test = np.reshape(x_test, (x_test.shape[0], x_test.shape[1], 1))
return [x_train, y_train, x_test, y_test]

#构建LSTM模型
def build_model(layers):  #layers [1,50,100,1]
model = Sequential()
#Stack LSTM
model.add(LSTM(input_dim=layers[0],output_dim=layers[1],return_sequences=True))
model.add(Dropout(0.2))
model.add(LSTM(layers[2],return_sequences=False))
model.add(Dropout(0.2))
model.add(Dense(output_dim=layers[3]))
model.add(Activation("linear"))
start = time.time()
model.compile(loss="mse", optimizer="rmsprop")
print("Compilation Time : ", time.time() - start)
return model

#直接预测
def predict_point_by_point(model, data):
predicted = model.predict(data)
print('predicted shape:',np.array(predicted).shape)  #(412L,1L)
predicted = np.reshape(predicted, (predicted.size,))
return predicted

#画图
def plot_results(predicted_data, true_data, filename):
fig = plt.figure(facecolor='white')
ax = fig.add_subplot(111)
ax.plot(true_data, label='True Data')
plt.plot(predicted_data, label='Prediction')
plt.legend()
plt.show()
#plt.savefig(filename+'.png')

#list解嵌套
def nested_list(list_raw,result):
for item in list_raw:
if isinstance(item, list):
nested_list(item,result)
else:
result.append(item)
return  result

#main
load_data("北京.xls")    #加载数据
model = build_model([1,50,100,1])  #构建模型
day_new = day_high
for i in range(31):
X_train, y_train, X_test, y_test = data_preprocess(day_new)
model.fit(X_train,y_train,batch_size=512,nb_epoch=150,validation_split=0.05)
point_by_point_predictions = predict_point_by_point(model, X_test)
#print(point_by_point_predictions)
result = nested_list(point_by_point_predictions,result)
predict_series.append(round(result[-1],0))
print(predict_series)
day_new.append(round(result[-1],0))
print(len(day_new))
#print(day_new)
print(predict_series)    #预测出的7月份连续31天的每日最高温
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,029评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,395评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,570评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,535评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,650评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,850评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,006评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,747评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,207评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,536评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,683评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,342评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,964评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,772评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,004评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,401评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,566评论 2 349

推荐阅读更多精彩内容