申请专栏作者
投稿发布
您的当前位置:主页 > 机器学习 > 正文

利用深度学习和机器学习预测股票市场(附代码

来源: 时间:2019-01-08
请点击下面的广告后浏览!

简介

可思数据sykv.com,sykv.cn

预测股市将如何变化历来是最困难的事情之一。这个预测行为中包含着如此之多的因素—包括物理或心理因素、理性或者不理性行为因素等等。所有这些因素结合在一起,使得股价波动剧烈,很难准确预测。

可思数据sykv.com,sykv.cn

使用机器学习可能改变游戏规则吗?机器学习技术使用最新的组织公告、季度收益等作为特征,有潜力挖掘出我们以前没有见过的模式和见解,并可用于准确无误的预测。 可思数据sykv.com,sykv.cn

 

内容来自可思数据sykv.com

 

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

在本文中,我们将研究上市公司股价的历史数据。我们将结合机器学习算法来预测这家公司的未来股价,从平均和线性回归这样的简单算法开始,然后转向像Auto ARIMA和LSTM这样的高级模型。 可思数据sykv.com

本文背后的核心思想是展示这些算法是如何实现的,因此我只会简单描述该技术并提供相关参考链接,以便在必要时对这些概念进行复习。如果您是时间序列领域的新手,我建议您先阅读以下文章: 可思数据sykv.com,sykv.cn

创建时间序列预测的初学者综合指南
时间序列建模的完整教程

可思数据-www.sykv.cn,sykv.com

目录 内容来自可思数据sykv.com

1、 问题理解 可思数据-人工智能资讯平台sykv.com

2、 移动平均 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

3、 线性回归

可思数据sykv.com

4、 K-近邻

可思数据-人工智能资讯平台sykv.com

5、 自动ARIMA 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

6、 先知(Prophet)

内容来自可思数据sykv.com

7、 长短时记忆网络(LSTM) 可思数据-www.sykv.cn,sykv.com

1、问题理解

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

我们将很快深入本文的实现部分,但首先重要的是确定我们要解决的问题。一般来说,股票市场分析分为两个部分——基本面分析和技术分析。

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

基本面分析是根据公司目前的经营环境和财务状况,对公司未来的盈利能力进行分析。

可思数据sykv.com,sykv.cn

技术分析包括阅读图表和使用统计数字来确定股票市场的趋势。 可思数据sykv.com,sykv.cn

您可能已经猜到,我们的重点将放在技术分析部分。我们将使用来自Quandl的数据集(您可以在这里找到各种股票的历史数据),这个项目中,我使用了“塔塔全球饮料”的数据。是时候开始了!

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

首先让我们加载数据集,定义问题的目标变量: 本文来自可思数据(sykv.com),转载请联系本站及注明出处

#import packages
import pandas as pd
import numpy as np 可思数据sykv.com

#to plot within notebook
import matplotlib.pyplot as plt
%matplotlib inline 内容来自可思数据sykv.com

#setting figure size
from matplotlib.pylab import rcParams
rcParams['figure.figsize'] = 20,10 可思数据-www.sykv.cn,sykv.com

#for normalizing data
from sklearn.preprocessing import MinMaxScaler
scaler = MinMaxScaler(feature_range=(0, 1))
#read the file
df = pd.read_csv('NSE-TATAGLOBAL(1).csv')

#print the head
df.head() 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

  本文来自可思数据(sykv.com),转载请联系本站及注明出处

 

可思数据sykv.com,sykv.cn

数据集中有多个变量——日期(date)、开盘价(open)、最高价(high)、最低价(low)、最后交易价(last)、收盘价(close)、总交易额(total_trade_quantity)和营业额(turnover)。 可思数据-www.sykv.cn,sykv.com

开盘价和收盘价代表股票在某一天交易的起始价和最终价。 本文来自可思数据(sykv.com),转载请联系本站及注明出处

最高价、最低价和最后交易价表示当天股票的最高价、最低价和最后交易价格。 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

交易总量是指当天买卖的股票数量,而营业额(Lacs)是指某一特定公司在某一特定日期的营业额。 可思数据-人工智能资讯平台sykv.com

要注意的另一点是,市场在周末和公共假期休市。注意上表缺失了一些日期值——2/10/2018、6/10/2018、7/10/2018。其中2号是国庆节,6号和7号是周末。 可思数据-人工智能资讯平台sykv.com

损益的计算通常由股票当日的收盘价决定,因此我们将收盘价作为目标变量。让我们画出目标变量来理解它在我们的数据集中的分布: 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

#setting index as date
df['Date'] = pd.to_datetime(df.Date,format='%Y-%m-%d')
df.index = df['Date']
#plot
plt.figure(figsize=(16,8))
plt.plot(df['Close'], label='Close Price history')

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

 

可思数据-人工智能资讯平台sykv.com

 

内容来自可思数据sykv.com

在接下来的部分中,我们将探索这些变量,并使用不同的技术来预测股票的每日收盘价。

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

2、移动平均

可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

简介

本文来自可思数据(sykv.com),转载请联系本站及注明出处

“平均数”是我们日常生活中最常用的统计量之一。例如,计算平均分数来确定整体表现,或者根据过去几天的平均温度来了解今天的温度——这些都是我们经常做的日常工作。因此,使用这个方法开始用数据集进行预测是个不错的选择。

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

我们利用一组先前观测值的平均值作为每天的预期收盘价。我们将使用移动平均法,而不是使用简单的平均值,移动平均法使用最近的一组数据计算预测值。换句话说,对于后续的每个新的时间,在考虑预测值时,将从集合中删除最早的观测值,并加入上一个观测值。下面是一个简单的图,它将帮助您更清楚地理解这一点。 本文来自可思数据(sykv.com),转载请联系本站及注明出处

  可思数据-人工智能资讯平台sykv.com

  可思数据sykv.com,sykv.cn

我们将在数据集上使用这种技术。第一步是创建一个只包含日期和收盘价列的数据框,然后将其拆分为训练集和验证集来验证我们的预测。 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

实现

内容来自可思数据sykv.com

#creating dataframe with date and the target variable
data = df.sort_index(ascending=True, axis=0)
new_data = pd.DataFrame(index=range(0,len(df)),columns=['Date', 'Close'])
for i in range(0,len(data)):
new_data['Date'][i] = data['Date'][i]
new_data['Close'][i] = data['Close'][i]

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

在将数据分割为训练和验证时,我们不能使用随机分割,因为这会破坏时间顺序。所以这里我将去年的数据作为验证集,将之前4年的数据作为训练集。

可思数据sykv.com,sykv.cn

#splitting into train and validation
train = new_data[:987]
valid = new_data[987:]
new_data.shape, train.shape, valid.shape
((1235, 2), (987, 2), (248, 2))
train['Date'].min(), train['Date'].max(), valid['Date'].min(), valid['Date'].max()
(Timestamp('2013-10-08 00:00:00'),
Timestamp('2017-10-06 00:00:00'),
Timestamp('2017-10-09 00:00:00'),
Timestamp('2018-10-08 00:00:00'))

本文来自可思数据(sykv.com),转载请联系本站及注明出处

下一步是为验证集创建预测值,并使用真实值来检查RMSE误差。

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

#make predictions
preds = []
for i in range(0,248):
a = train['Close'][len(train)-248+i:].sum() + sum(preds)
b = a/248
preds.append(b) 可思数据sykv.com

结果 可思数据sykv.com,sykv.cn

#calculate rmse
rms=np.sqrt(np.mean(np.power((np.array(valid['Close'])-preds),2)))
rms
104.51415465984348

内容来自可思数据sykv.com

仅仅检查RMSE并不能帮助我们评估模型预测效果的。让我们通过做图得到更直观的理解。下面是预测值和实际值的曲线图。

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

#plot
valid['Predictions'] = 0
valid['Predictions'] = preds
plt.plot(train['Close'])
plt.plot(valid[['Close', 'Predictions']])

可思数据-www.sykv.cn,sykv.com

  可思数据sykv.com

 

内容来自可思数据sykv.com

推论

可思数据sykv.com

RMSE值接近105,但是结果不是很理想(从图中可以看出)。预测值与训练集的观测值的范围相同(开始有上升趋势,然后缓慢下降)。

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

在下一节中,我们将使用两种常用的机器学习技术——线性回归和kNN,看看它们在我们的股票市场数据上表现如何。

可思数据-人工智能资讯平台sykv.com

3、线性回归 本文来自可思数据(sykv.com),转载请联系本站及注明出处

简介 可思数据sykv.com

在这些数据上可以实现的最基本的机器学习算法是线性回归。线性回归模型生成一个确定自变量和因变量之间关系的方程。

可思数据-人工智能资讯平台sykv.com

线性回归方程可以写成:

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

  可思数据-人工智能资讯平台sykv.com

 

可思数据-www.sykv.cn,sykv.com

在这里x1, x2, ....xn代表自变量,系数θ1,θ2,....θn代表权重。你可以参考下面的文章来更详细地学习线性回归: 可思数据sykv.com,sykv.cn

对于线性回归和Lasso回归的一个综合的初学者指南.

本文来自可思数据(sykv.com),转载请联系本站及注明出处

我们的问题中,没有太多的自变量,只有日期。让我们使用时间(date)列提取特征,如- day, month, year, mon/fri等,然后拟合线性回归模型。 可思数据sykv.com,sykv.cn

实现 可思数据sykv.com,sykv.cn

我们将首先按升序对数据集进行排序,然后创建一个单独的数据集,这样创建的任何新特性都不会影响原始数据。

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

#setting index as date values
df['Date'] = pd.to_datetime(df.Date,format='%Y-%m-%d')
df.index = df['Date']
#sorting
data = df.sort_index(ascending=True, axis=0)
#creating a separate dataset
new_data = pd.DataFrame(index=range(0,len(df)),columns=['Date', 'Close'])
for i in range(0,len(data)):
new_data['Date'][i] = data['Date'][i]
new_data['Close'][i] = data['Close'][i]
#create features
from fastai.structured import add_datepart
add_datepart(new_data, 'Date')
new_data.drop('Elapsed', axis=1, inplace=True) #elapsed will be the time stamp 可思数据-www.sykv.cn,sykv.com

这将创建以下特征: 可思数据sykv.com

‘Year’, ‘Month’, ‘Week’, ‘Day’, ‘Dayofweek’, ‘Dayofyear’, ‘Is_month_end’, ‘Is_month_start’, ‘Is_quarter_end’, ‘Is_quarter_start’, ‘Is_year_end’, and ‘Is_year_start’. 可思数据-www.sykv.cn,sykv.com

注意:我使用了来自fastai库的add_datepart。如果您没有安装它,您可以简单地使用命令pip install fastai。您也可以使用python中的简单for循环来创建这些特性。我在下面展示了一个例子。 可思数据sykv.com,sykv.cn

除此之外,我们还可以添加自己的一组特性,我们认为这些特性与预测相关。例如,我的假设是,本周的头几天和最后几天对股票收盘价的影响可能远远超过其他日子。因此,我创建了一个特性来识别给定的一天是星期一/星期五还是星期二/星期三/星期四。这可以用以下几行代码来完成: 可思数据-人工智能资讯平台sykv.com

new_data['mon_fri'] = 0
for i in range(0,len(new_data)):
if (new_data['Dayofweek'][i] == 0 or new_data['Dayofweek'][i] == 4):
new_data['mon_fri'][i] = 1 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

else:
new_data['mon_fri'][i] = 0

可思数据-人工智能资讯平台sykv.com

如果是星期日或星期五,列值将为1,否则为0。类似地,您可以创建多个特性。如果你对有助于预测股价的特征有一些想法,请在留言里分享。 可思数据sykv.com,sykv.cn

现在我们将把数据分成训练集和验证集来检查模型的性能。

本文来自可思数据(sykv.com),转载请联系本站及注明出处

#split into train and validation
train = new_data[:987]
valid = new_data[987:]
x_train = train.drop('Close', axis=1)
y_train = train['Close']
x_valid = valid.drop('Close', axis=1)
y_valid = valid['Close']
#implement linear regression
from sklearn.linear_model import LinearRegression
model = LinearRegression()
model.fit(x_train,y_train)

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

结果 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

#make predictions and find the rmse
preds = model.predict(x_valid)
rms=np.sqrt(np.mean(np.power((np.array(y_valid)-np.array(preds)),2)))
rms
121.16291596523156

可思数据sykv.com

RMSE值高于之前的方法,这清楚地表明线性回归的表现很差。让我们看看这个图,并理解为什么线性回归预测效果不是很好: 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

#plot
valid['Predictions'] = 0
valid['Predictions'] = preds
valid.index = new_data[987:].index
train.index = new_data[:987].index
plt.plot(train['Close'])
plt.plot(valid[['Close', 'Predictions']]) 可思数据sykv.com,sykv.cn

  可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

  本文来自可思数据(sykv.com),转载请联系本站及注明出处

推论 可思数据sykv.com,sykv.cn

线性回归是一种简单的技术,很容易解释,但也有一些明显的缺点。使用回归算法的一个问题是,模型过度拟合了日期和月份。模型将考虑一个月前相同日期或一年前相同日期/月的值,而不是从预测的角度考虑以前的值。

可思数据-人工智能资讯平台sykv.com

从上图可以看出,2016年1月和2017年1月,股价出现下跌。该模型预测2018年1月也将如此。线性回归技术可以很好地解决像大卖场销售这样的问题,在这些问题中,独立的特征对于确定目标值是有用的。

可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

4、k-近邻 可思数据-人工智能资讯平台sykv.com

简介 本文来自可思数据(sykv.com),转载请联系本站及注明出处

另一个有趣的ML算法是kNN (k近邻)。基于自变量,kNN可以发现新数据点与旧数据点之间的相似性。让我用一个简单的例子来解释这个问题。 可思数据sykv.com,sykv.cn

考虑11个人的身高和年龄。根据给定的特征(“年龄”和“身高”),下表可以用图形形式表示,如下图所示:

可思数据sykv.com

  可思数据sykv.com,sykv.cn

 

可思数据sykv.com,sykv.cn

为了确定ID #11的权重,kNN考虑该ID的最近邻居的权重。ID #11的权重被预测为其邻居的平均值。如果我们现在考虑三个邻居(k=3), ID#11的重量将是= (77+72+60)/3 = 69.66 kg。

可思数据-人工智能资讯平台sykv.com

 

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

  本文来自可思数据(sykv.com),转载请联系本站及注明出处

对于kNN的详细了解,可以参考以下文章:

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

k近邻介绍:简介 可思数据sykv.com

对k近邻回归算法的实际介绍

可思数据-人工智能资讯平台sykv.com

实现 内容来自可思数据sykv.com

#importing libraries
from sklearn import neighbors
from sklearn.model_selection import GridSearchCV
from sklearn.preprocessing import MinMaxScaler
scaler = MinMaxScaler(feature_range=(0, 1))

可思数据-www.sykv.cn,sykv.com

使用上一节中相同的训练和验证集:

可思数据-www.sykv.cn,sykv.com

#scaling data
x_train_scaled = scaler.fit_transform(x_train)
x_train = pd.DataFrame(x_train_scaled)
x_valid_scaled = scaler.fit_transform(x_valid)
x_valid = pd.DataFrame(x_valid_scaled)
#using gridsearch to find the best parameter
params = {'n_neighbors':[2,3,4,5,6,7,8,9]}
knn = neighbors.KNeighborsRegressor()
model = GridSearchCV(knn, params, cv=5)
#fit the model and make predictions
model.fit(x_train,y_train)
preds = model.predict(x_valid)

可思数据sykv.com,sykv.cn

结果 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

#rmse
rms=np.sqrt(np.mean(np.power((np.array(y_valid)-np.array(preds)),2)))
rms
115.17086550026721 可思数据sykv.com

RMSE值并没有太大的差异,但是一个预测值和实际值的曲线图应该提供一个更清晰的理解。

内容来自可思数据sykv.com

#plot
valid['Predictions'] = 0
valid['Predictions'] = preds
plt.plot(valid[['Close', 'Predictions']])
plt.plot(train['Close']) 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

 

可思数据sykv.com

 

可思数据sykv.com

推论

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

RMSE值与线性回归模型近似,图中呈现出相同的模式。与线性回归一样,kNN也发现了2018年1月的下降,因为这是过去几年的模式。我们可以有把握地说,回归算法在这个数据集上表现得并不好。 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

让我们来看一些时间序列预测技术,看看它们在面对股价预测挑战时的表现。 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

5、自动ARIMA 可思数据sykv.com

简介 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

ARIMA是一种非常流行的时间序列预测统计方法。ARIMA模型使用过去的值来预测未来的值。ARIMA中有三个重要参数:

可思数据sykv.com,sykv.cn

p(用来预测下一个值的过去值)
q(用来预测未来值的过去预测误差)
d(差分的顺序) 可思数据sykv.com,sykv.cn

ARIMA的参数优化需要大量时间。因此我们将使用自动 ARIMA,自动选择误差最小的(p,q,d)最佳组合。要了解更多关于自动ARIMA的工作原理,请参阅本文:

可思数据-www.sykv.cn,sykv.com

利用自动ARIMA建立高性能时间序列模型 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

实现

可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

from pyramid.arima import auto_arima
data = df.sort_index(ascending=True, axis=0)
train = data[:987]
valid = data[987:]
training = train['Close']
validation = valid['Close']
model = auto_arima(training, start_p=1, start_q=1,max_p=3, max_q=3, m=12,start_P=0, seasonal=True,d=1, D=1, trace=True,error_action='ignore',suppress_warnings=True)
model.fit(training)
forecast = model.predict(n_periods=248)
forecast = pd.DataFrame(forecast,index = valid.index,columns=['Prediction'])

内容来自可思数据sykv.com

结果

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

rms=np.sqrt(np.mean(np.power((np.array(valid['Close'])-np.array(forecast['Prediction'])),2)))
rms
44.954584993246954
#plot
plt.plot(train['Close'])
plt.plot(valid['Close'])
plt.plot(forecast['Prediction'])

本文来自可思数据(sykv.com),转载请联系本站及注明出处

 

本文来自可思数据(sykv.com),转载请联系本站及注明出处

  可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

推论 可思数据sykv.com,sykv.cn

正如我们前面看到的,自动ARIMA模型使用过去的数据来理解时间序列中的模式。利用这些值,该模型捕捉到该系列中的增长趋势。虽然使用这种技术的预测比以前实现的机器学习模型的预测要好得多,但是这些预测仍然与实际值相距甚远。 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

从图中可以明显看出,该模型在序列中捕捉到了一种趋势,但忽略了季节的影响。在下一节中,我们将使用一个同时考虑了序列的趋势和季节性的时间序列模型。该模型。

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

6、先知(Prophet) 可思数据-www.sykv.cn,sykv.com

简介

可思数据sykv.com,sykv.cn

有许多时间序列技术可以用在股票预测数据集上,但是大多数技术在拟合模型之前需要大量的数据预处理。Prophet(先知)由Facebook设计和开发,是一个时间序列预测库,不需要数据预处理,并且非常容易实现。先知的输入是一个带有两列的数据框:日期和目标(ds和y)。 可思数据-人工智能资讯平台sykv.com

先知试图在过去的数据中捕捉季节性,并且在数据集很大的时候依然表现良好。这里有一篇有趣的文章,用一个简单和直观的方式解释了先知算法:

本文来自可思数据(sykv.com),转载请联系本站及注明出处

使用Facebook的Prophet生成快速准确的时间序列预测 可思数据-人工智能资讯平台sykv.com

实现 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

#importing prophet
from fbprophet import Prophet
#creating dataframe
new_data = pd.DataFrame(index=range(0,len(df)),columns=['Date', 'Close'])
for i in range(0,len(data)):new_data['Date'][i] = data['Date'][i]

本文来自可思数据(sykv.com),转载请联系本站及注明出处

new_data['Close'][i] = dat
a['Close'][i]
new_data['Date'] = pd.to_datetime(new_data.Date,format='%Y-%m-%d')
new_data.index = new_data['Date']
#preparing data
new_data.rename(columns={'Close': 'y', 'Date': 'ds'}, inplace=True)
#train and validationtrain = new_data[:987]
valid = new_data[987:]
#fit the model
model = Prophet()
model.fit(train)
#predictions
close_prices = model.make_future_dataframe(periods=len(valid))
forecast = model.predict(close_prices) 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

结果

内容来自可思数据sykv.com

#rmse
forecast_valid = forecast['yhat'][987:]
rms=np.sqrt(np.mean(np.power((np.array(valid['y'])-np.array(forecast_valid)),2)))
rms
57.494461930575149
#plot
valid['Predictions'] = 0
valid['Predictions'] = forecast_valid.values
plt.plot(train['y'])
plt.plot(valid[['y', 'Predictions']])

本文来自可思数据(sykv.com),转载请联系本站及注明出处

  本文来自可思数据(sykv.com),转载请联系本站及注明出处

  可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

推论 可思数据sykv.com,sykv.cn

先知(像大多数时间序列预测技术一样)试图从过去的数据中捕捉趋势和季节性。该模型通常在时间序列数据集上表现良好,但在本例中没有达到预期效果。 内容来自可思数据sykv.com

事实证明,股票价格没有特定的趋势或季节性。价格的涨跌很大程度上取决于目前市场上的情况。因此,像ARIMA、SARIMA和Prophet这样的预测技术并不能很好地解决这个特殊的问题。 可思数据sykv.com,sykv.cn

让我们继续尝试另一种高级技术——长短时记忆网络(LSTM)。 可思数据sykv.com

7、长短期记忆网络(LSTM) 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

简介

可思数据-人工智能资讯平台sykv.com

LSTM 算法广泛应用于序列预测问题中,并被证明是一种非常有效的方法。它们之所表现如此出色,是因为LSTM能够存储重要的既往信息,并忽略不重要的信息。 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

LSTM有三个门:

可思数据sykv.com

输入门:输入门将信息添加到细胞状态
遗忘门:它移除模型不再需要的信息
输出门:LSTM的输出门选择作为输出的信息 可思数据-AI,sykv.com人工智能,深度学习,机器学习,神经网络

要更详细地了解LSTM及其体系结构,可以阅读下面的文章: 可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

长短期记忆网络简介 可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

现在,让我们将LSTM实现为一个黑盒,并检查它在特定数据上的性能。 内容来自可思数据sykv.com

实现 可思数据sykv.com,sykv.cn

#importing required libraries
from sklearn.preprocessing import MinMaxScaler
from keras.models import Sequential
from keras.layers import Dense, Dropout, LSTM
#creating dataframe
data = df.sort_index(ascending=True, axis=0)
new_data = pd.DataFrame(index=range(0,len(df)),columns=['Date', 'Close'])
for i in range(0,len(data)):
new_data['Date'][i] = data['Date'][i]
new_data['Close'][i] = data['Close'][i]
#setting index
new_data.index = new_data.Date
new_data.drop('Date', axis=1, inplace=True)
#creating train and test sets
dataset = new_data.values
train = dataset[0:987,:]
valid = dataset[987:,:]
#converting dataset into x_train and y_train
scaler = MinMaxScaler(feature_range=(0, 1))
scaled_data = scaler.fit_transform(dataset)
x_train, y_train = [], []
for i in range(60,len(train)):

本文来自可思数据(sykv.com),转载请联系本站及注明出处


x_train.append(scaled_data[i-60:i,0])
y_train.append(scaled_data[i,0])
x_train, y_train = np.array(x_train), np.array(y_train)
x_train = np.reshape(x_train, (x_train.shape[0],x_train.shape[1],1))
# create and fit the LSTM network
model = Sequential()
model.add(LSTM(units=50, return_sequences=True, input_shape=(x_train.shape[1],1)))
model.add(LSTM(units=50))
model.add(Dense(1))
model.compile(loss='mean_squared_error', optimizer='adam')
model.fit(x_train, y_train, epochs=1, batch_size=1, verbose=2)
#predicting 246 values, using past 60 from the train data
inputs = new_data[len(new_data) - len(valid) - 60:].values
inputs = inputs.reshape(-1,1)
inputs = scaler.transform(inputs)
X_test = []
for i in range(60,inputs.shape[0]):
X_test.append(inputs[i-60:i,0])
X_test = np.array(X_test)
X_test = np.reshape(X_test, (X_test.shape[0],X_test.shape[1],1))

可思数据sykv.com,sykv.cn


closing_price = model.predict(X_test)
closing_price = scaler.inverse_transform(closing_price)

本文来自可思数据(sykv.com),转载请联系本站及注明出处

结果

可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

rms=np.sqrt(np.mean(np.power((valid-closing_price),2)))
rms
11.772259608962642
#for plotting
train = new_data[:987]
valid = new_data[987:]
valid['Predictions'] = closing_price
plt.plot(train['Close'])
plt.plot(valid[['Close','Predictions']])

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据

  可思数据-数据挖掘,智慧医疗,机器视觉,机器人sykv.com

  可思数据sykv.com,sykv.cn

推论 可思数据-www.sykv.cn,sykv.com

哇!LSTM轻松地超越了我们目前看到的任何算法。LSTM模型可以对各种参数进行调优,如改变LSTM层数、增加dropout值或增加训练迭代轮数(epoch)数。但LSTM的预测是否足以确定股票价格将上涨还是下跌?当然不行! 可思数据sykv.com,sykv.cn

正如我在文章开头提到的,股价受到公司新闻和其他因素的影响,如公司的非货币化或合并/分拆。还有一些无形的因素往往是无法事先预测的。 可思数据-www.sykv.cn,sykv.com

写在最后

可思数据sykv.com,sykv.cn

我在写这些文章时意识到时间序列预测是一个非常有趣的领域。在社区中有观点认为这是一个复杂的领域,虽然有一定道理,我还是想说一旦你掌握了基本的技巧,就不难理解它了。

本文来自可思数据(sykv.com),转载请联系本站及注明出处

我对LSTM如何处理其他时间序列的问题很感兴趣,并鼓励您自己也尝试一下。如果你有任何问题,请在下面的留言部分与我联系。

内容来自可思数据sykv.com

原文链接:https://www.analyticsvidhya.com/blog/2018/10/predicting-stock-price-machine-learningnd-deep-learning-techniques-python/

可思数据-AI,sykv.com智能驾驶,人脸识别,区块链,大数据


转发量:

网友评论:

发表评论
请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
评价:
表情:
用户名: 验证码:点击我更换图片

关于我们   免责声明   广告合作   版权声明   联系方式   原创投稿   网站地图  

Copyright©2005-2019 Sykv.com 可思数据 版权所有    ICP备案:京ICP备14056871号

人工智能资讯   人工智能资讯   人工智能资讯   人工智能资讯

扫码入群
咨询反馈
扫码关注

微信公众号

返回顶部
关闭