4 - Hyperparameter Search.ipynb

{
 "cells": [
  {
   "cell_type": "markdown",
   "metadata": {},
   "source": [
    "## How to set up a Hyperparammeter Search\n",
    "\n",
    "* Import GridSearchCv from klearn.model_selection\n",
    "* Import Keras Classifier from keras.wrappers.scikit_learn\n",
    "* Prepare Training Data\n",
    "* Make a Function that takes parameters to create and return a keras model, including the compile\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 1,
   "metadata": {},
   "outputs": [
    {
     "name": "stderr",
     "output_type": "stream",
     "text": [
      "Using TensorFlow backend.\n"
     ]
    }
   ],
   "source": [
    "# imports\n",
    "import numpy             as np\n",
    "import matplotlib.pyplot as plt\n",
    "import pandas            as pd\n",
    "import math\n",
    "import keras\n",
    "from scipy.stats  import norm\n",
    "from keras.models import Sequential\n",
    "from keras.layers import Dense, LSTM, Dropout\n",
    "from keras        import backend as K\n",
    "from datetime     import datetime\n",
    "from keras.constraints import maxnorm\n",
    "from keras.optimizers      import RMSprop\n",
    "from sklearn.preprocessing import MinMaxScaler\n",
    "from sklearn.metrics       import mean_squared_error\n",
    "from matplotlib.pylab      import rcParams\n",
    "from sklearn.model_selection import GridSearchCV\n",
    "from keras.wrappers.scikit_learn import KerasRegressor\n",
    "%matplotlib inline\n",
    "rcParams['figure.figsize'] = 15, 6\n",
    "\n",
    "# number of inputs to be fed\n",
    "look_back = 288\n",
    "# number of outputs to be generated\n",
    "look_forward = 24\n",
    "\n",
    "# convert an array of values into a dataset matrix\n",
    "def create_dataset(dataset, look_back=1, look_forward=2):\n",
    "    dataX, dataY = [], []\n",
    "    np.array(dataY)\n",
    "    for i in range(len(dataset)-look_back-1):\n",
    "        a = dataset[i:(i+look_back),0]\n",
    "        if len(dataset[i + look_back:i+look_back+look_forward, 0]) == look_forward:\n",
    "            dataX.append(a)\n",
    "            dataY.append(dataset[i + look_back:i+look_back+look_forward, 0])\n",
    "    return np.array(dataX), np.array(dataY)\n",
    "\n",
    "def predict_with_uncertainty(model, dataset, n_iter=100):\n",
    "    # This function activates drop-out when doing predictions\n",
    "    f = K.function([model.layers[0].input, K.learning_phase()],\n",
    "                      [model.layers[-1].output])\n",
    "    all_pred = np.zeros((n_iter,) + (1,look_forward,))\n",
    "    for iter in range(n_iter):\n",
    "        all_pred[iter] = f([dataset, 1])\n",
    "    avg_pred = all_pred.mean(axis=0)\n",
    "    std = np.std(all_pred, axis=0)\n",
    "    return all_pred, avg_pred, std\n",
    "\n",
    "# given a model and data from the original dataset, it uses predict_with_uncertainty to \n",
    "def run_predictions (model, dataset):\n",
    "    # normalizes the dataset and prepares it to be fed to the model\n",
    "    dataset = np.array(dataset).transpose().reshape(-1, 1)\n",
    "    dataset = scaler.fit_transform(dataset).transpose()\n",
    "    data = (dataset.T)\n",
    "    data = data.reshape(1, 1, data.shape[0])\n",
    "    # feeds the model and data into a function that will activate the dro-out\n",
    "    all_pred, avg_pred, std = predict_with_uncertainty(model, data)\n",
    "    \n",
    "    # All the predictions\n",
    "    all_pred = scaler.inverse_transform(all_pred.reshape(all_pred.shape[0], all_pred.shape[-1]))\n",
    "    # The Average Prediction\n",
    "    avg_pred = scaler.inverse_transform(avg_pred)\n",
    "    # The Standard Deviation At Each T Of Prediction\n",
    "    std = scaler.inverse_transform(std)\n",
    "    \n",
    "    return all_pred, avg_pred, std"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "# The interval between each dataset (original data in 5 minute intervals)\n",
    "time_grouping = '5min'\n",
    "\n",
    "# load the dataset\n",
    "dataframe = pd.read_csv('ignored_assets/paxout_table.csv', engine='python', nrows=288*21)\n",
    "dataframe['time_bucket'] = pd.to_datetime(dataframe['time_bucket'])\n",
    "dataframe = dataframe.set_index('time_bucket')\n",
    "dataframe['total'] = dataframe.sum(axis=1)\n",
    "dataframe['day_hour'] = dataframe.index.round(time_grouping)\n",
    "\n",
    "# The data set with the sum of all the cars out at the \n",
    "dataframe = dataframe[['total','day_hour']].groupby('day_hour').sum()\n",
    "\n",
    "dataset_orig = dataframe.values\n",
    "dataset_orig = dataset_orig.astype('float32')\n",
    "\n",
    "# scale the dataset\n",
    "scaler = MinMaxScaler(feature_range=(0, 1))\n",
    "dataset = scaler.fit_transform(dataset_orig)\n",
    "\n",
    "# split into train and test sets\n",
    "train_size = 288*10\n",
    "test_size = len(dataset) - train_size\n",
    "test, train = dataset[0:test_size,:], dataset[test_size:len(dataset)-look_forward,:]\n",
    "\n",
    "# reshape into X=[t, t-1, t-2,..., t-look_back] and Y=[t+1, t+2,... t+look_forward]\n",
    "trainX, trainY = create_dataset(train, look_back, look_forward)\n",
    "testX, testY = create_dataset(test, look_back, look_forward)\n",
    "# reshape input to be [samples, time steps, features]\n",
    "trainX = np.reshape(trainX, (trainX.shape[0], 1, trainX.shape[1]))\n",
    "testX = np.reshape(testX, (testX.shape[0], 1, testX.shape[1]))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 7,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "(2545, 1, 288)\n",
      "(2545, 24)\n"
     ]
    }
   ],
   "source": [
    "print trainX.shape\n",
    "print trainY.shape"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  },
  {
   "cell_type": "markdown",
   "metadata": {
    "collapsed": true
   },
   "source": [
    "# Sift Through Batch_size and Epochs"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {
    "scrolled": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/20\n",
      "Epoch 2/20\n",
      "Epoch 3/20\n",
      "Epoch 4/20\n",
      "Epoch 5/20\n",
      "Epoch 6/20\n",
      "Epoch 7/20\n",
      "Epoch 8/20\n",
      "Epoch 9/20\n",
      "Epoch 10/20\n",
      "Epoch 11/20\n",
      "Epoch 12/20\n",
      "Epoch 13/20\n",
      "Epoch 14/20\n",
      "Epoch 15/20\n",
      "Epoch 16/20\n",
      "Epoch 17/20\n",
      "Epoch 18/20\n",
      "Epoch 19/20\n",
      "Epoch 20/20\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/50\n",
      "Epoch 2/50\n",
      "Epoch 3/50\n",
      "Epoch 4/50\n",
      "Epoch 5/50\n",
      "Epoch 6/50\n",
      "Epoch 7/50\n",
      "Epoch 8/50\n",
      "Epoch 9/50\n",
      "Epoch 10/50\n",
      "Epoch 11/50\n",
      "Epoch 12/50\n",
      "Epoch 13/50\n",
      "Epoch 14/50\n",
      "Epoch 15/50\n",
      "Epoch 16/50\n",
      "Epoch 17/50\n",
      "Epoch 18/50\n",
      "Epoch 19/50\n",
      "Epoch 20/50\n",
      "Epoch 21/50\n",
      "Epoch 22/50\n",
      "Epoch 23/50\n",
      "Epoch 24/50\n",
      "Epoch 25/50\n",
      "Epoch 26/50\n",
      "Epoch 27/50\n",
      "Epoch 28/50\n",
      "Epoch 29/50\n",
      "Epoch 30/50\n",
      "Epoch 31/50\n",
      "Epoch 32/50\n",
      "Epoch 33/50\n",
      "Epoch 34/50\n",
      "Epoch 35/50\n",
      "Epoch 36/50\n",
      "Epoch 37/50\n",
      "Epoch 38/50\n",
      "Epoch 39/50\n",
      "Epoch 40/50\n",
      "Epoch 41/50\n",
      "Epoch 42/50\n",
      "Epoch 43/50\n",
      "Epoch 44/50\n",
      "Epoch 45/50\n",
      "Epoch 46/50\n",
      "Epoch 47/50\n",
      "Epoch 48/50\n",
      "Epoch 49/50\n",
      "Epoch 50/50\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/10\n",
      "Epoch 2/10\n",
      "Epoch 3/10\n",
      "Epoch 4/10\n",
      "Epoch 5/10\n",
      "Epoch 6/10\n",
      "Epoch 7/10\n",
      "Epoch 8/10\n",
      "Epoch 9/10\n",
      "Epoch 10/10\n",
      "Best: 0.067063 using {'epochs': 10, 'batch_size': 60}\n",
      "0.051394 (0.009281) with: {'epochs': 10, 'batch_size': 20}\n",
      "0.053954 (0.006233) with: {'epochs': 20, 'batch_size': 20}\n",
      "0.048257 (0.011735) with: {'epochs': 50, 'batch_size': 20}\n",
      "0.045081 (0.015116) with: {'epochs': 60, 'batch_size': 20}\n",
      "0.050773 (0.009377) with: {'epochs': 10, 'batch_size': 40}\n",
      "0.062669 (0.011096) with: {'epochs': 20, 'batch_size': 40}\n",
      "0.045629 (0.012627) with: {'epochs': 50, 'batch_size': 40}\n",
      "0.049561 (0.012433) with: {'epochs': 60, 'batch_size': 40}\n",
      "0.067063 (0.017375) with: {'epochs': 10, 'batch_size': 60}\n",
      "0.051956 (0.000399) with: {'epochs': 20, 'batch_size': 60}\n",
      "0.051718 (0.015023) with: {'epochs': 50, 'batch_size': 60}\n",
      "0.050480 (0.016424) with: {'epochs': 60, 'batch_size': 60}\n"
     ]
    }
   ],
   "source": [
    "def top_heavy_loss (y_true, y_pred):\n",
    "    w = np.arange(1,0, -1./24) ** 2\n",
    "    w = (w / w.sum())[:,None]\n",
    "    W = K.variable(value = w)\n",
    "    return K.dot( K.abs(y_pred-y_true), W)\n",
    "\n",
    "seed = 11\n",
    "np.random.seed(seed)\n",
    "\n",
    "# creates a model but does not compile the model\n",
    "def create_model():\n",
    "    rate = 0.2\n",
    "    model = Sequential()\n",
    "    model.add(Dropout(rate, input_shape=(1, look_back)))\n",
    "    lstm = LSTM(256, recurrent_dropout=0.3)\n",
    "    model.add(lstm)\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128))\n",
    "    model.add(Dense(look_forward))\n",
    "    model.compile(loss=top_heavy_loss, optimizer=RMSprop(lr=0.0001, rho=0.9, epsilon=1e-08, decay=0.0), metrics=['accuracy'])\n",
    "    return model\n",
    "\n",
    "# creates the model\n",
    "model = KerasRegressor(build_fn=create_model, verbose=3)\n",
    "# Defines the parameters to be grid searched\n",
    "batch_size = [20, 40, 60]\n",
    "epochs = [10, 20, 50, 60]\n",
    "\n",
    "param_grid = dict(batch_size=batch_size, epochs=epochs)\n",
    "grid = GridSearchCV(estimator=model, param_grid=param_grid, n_jobs=1)\n",
    "grid_result = grid.fit(trainX, trainY)\n",
    "# summarize results\n",
    "print(\"Best: %f using %s\" % (grid_result.best_score_, grid_result.best_params_))\n",
    "means = grid_result.cv_results_['mean_test_score']\n",
    "stds = grid_result.cv_results_['std_test_score']\n",
    "params = grid_result.cv_results_['params']\n",
    "for mean, stdev, param in zip(means, stds, params):\n",
    "    print(\"%f (%f) with: %r\" % (mean, stdev, param))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true,
    "scrolled": true
   },
   "outputs": [],
   "source": [
    "\n",
    "# creates a model but does not compile the model\n",
    "def create_model(dropout_rate=0.0, weight_constraint=0):\n",
    "    init_mode = 'normal'\n",
    "    rate = 0.2\n",
    "    model = Sequential()\n",
    "    model.add(Dropout(rate, input_shape=(1, look_back)))\n",
    "    lstm = LSTM(256, kernel_initializer=init_mode, recurrent_dropout=0.3)\n",
    "    model.add(lstm)\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dense(look_forward))\n",
    "    model.compile(loss=top_heavy_loss, optimizer=RMSprop(lr=0.0001, rho=0.9, epsilon=1e-08, decay=0), metrics=['accuracy'])\n",
    "    return model\n",
    "\n",
    "# creates the model\n",
    "model = KerasClassifier(build_fn=create_model, epochs=60, batch_size=60, verbose=3)\n",
    "\n",
    "# Defines the parameters to be grid searched\n",
    "weight_constraint = [1, 2, 3, 4, 5]\n",
    "dropout_rate = [0.0, 0.1, 0.2, 0.25, 0.3, 0.35, 0.4, 0.45, 0.5, 0.6, 0.7]\n",
    "\n",
    "param_grid = dict(dropout_rate=dropout_rate, weight_constraint=weight_constraint)\n",
    "\n",
    "grid = GridSearchCV(estimator=model, param_grid=param_grid, n_jobs=1)\n",
    "grid_result = grid.fit(trainX, trainY)\n",
    "# summarize results\n",
    "print(\"Best: %f using %s\" % (grid_result.best_score_, grid_result.best_params_))\n",
    "means = grid_result.cv_results_['mean_test_score']\n",
    "stds = grid_result.cv_results_['std_test_score']\n",
    "params = grid_result.cv_results_['params']\n",
    "for mean, stdev, param in zip(means, stds, params):\n",
    "    print(\"%f (%f) with: %r\" % (mean, stdev, param))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "\n",
    "# creates a model but does not compile the model\n",
    "def create_model(init_mode='uniform'):\n",
    "    rate = 0.2\n",
    "    model = Sequential()\n",
    "    model.add(Dropout(rate, input_shape=(1, look_back)))\n",
    "    lstm = LSTM(256, kernel_initializer=init_mode, recurrent_dropout=0.3)\n",
    "    model.add(lstm)\n",
    "    \n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode))\n",
    "    model.add(Dropout(rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode))\n",
    "    model.add(Dense(look_forward))\n",
    "    model.compile(loss=top_heavy_loss, optimizer=RMSprop(lr=0.0001, rho=0.9, epsilon=1e-08, decay=0), metrics=['accuracy'])\n",
    "    return model\n",
    "\n",
    "# creates the model\n",
    "model = KerasClassifier(build_fn=create_model, epochs=60, batch_size=60, verbose=3)\n",
    "\n",
    "# Defines the parameters to be grid searched\n",
    "init_mode = ['lecun_uniform', 'normal', 'glorot_normal', 'glorot_uniform', 'he_uniform']\n",
    "\n",
    "param_grid = dict(init_mode=init_mode)\n",
    "\n",
    "grid = GridSearchCV(estimator=model, param_grid=param_grid, n_jobs=1)\n",
    "grid_result = grid.fit(trainX, trainY)\n",
    "# summarize results\n",
    "print(\"Best: %f using %s\" % (grid_result.best_score_, grid_result.best_params_))\n",
    "\n",
    "means  = grid_result.cv_results_['mean_test_score']\n",
    "stds   = grid_result.cv_results_['std_test_score']\n",
    "params = grid_result.cv_results_['params']\n",
    "\n",
    "\n",
    "for mean, stdev, param in zip(means, stds, params):\n",
    "    print(\"%f (%f) with: %r\" % (mean, stdev, param))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "'''\n",
    "Best: 0.390570 using {'init_mode': 'glorot_normal'}\n",
    "0.302554 (0.029239) with: {'init_mode': 'lecun_uniform'}\n",
    "0.326523 (0.061835) with: {'init_mode': 'normal'}\n",
    "0.390570 (0.093092) with: {'init_mode': 'glorot_normal'}\n",
    "0.307269 (0.051499) with: {'init_mode': 'glorot_uniform'}\n",
    "0.335560 (0.055283) with: {'init_mode': 'he_uniform'}\n",
    "\n",
    "Best: 0.503733 using {'init_mode': 'normal'}\n",
    "0.416896 (0.060112) with: {'init_mode': 'lecun_uniform'}\n",
    "0.503733 (0.059045) with: {'init_mode': 'normal'}\n",
    "0.420825 (0.020303) with: {'init_mode': 'glorot_normal'}\n",
    "0.415717 (0.141750) with: {'init_mode': 'glorot_uniform'}\n",
    "0.427898 (0.149020) with: {'init_mode': 'he_uniform'}\n",
    "\n",
    "Best: 0.441650 using {'init_mode': 'glorot_uniform'}\n",
    "0.388605 (0.013350) with: {'init_mode': 'lecun_uniform'}\n",
    "0.329273 (0.055460) with: {'init_mode': 'normal'}\n",
    "0.317092 (0.021865) with: {'init_mode': 'glorot_normal'}\n",
    "0.441650 (0.044662) with: {'init_mode': 'glorot_uniform'}\n",
    "0.374853 (0.084774) with: {'init_mode': 'he_uniform'}\n",
    "\n",
    "Best: 0.458939 using {'init_mode': 'normal'}\n",
    "0.361493 (0.062972) with: {'init_mode': 'lecun_uniform'}\n",
    "0.458939 (0.147261) with: {'init_mode': 'normal'}\n",
    "0.401179 (0.086889) with: {'init_mode': 'glorot_normal'}\n",
    "0.396071 (0.083101) with: {'init_mode': 'glorot_uniform'}\n",
    "0.372495 (0.114335) with: {'init_mode': 'he_uniform'}\n",
    "'''\n"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n",
      "Epoch 1/1\n"
     ]
    }
   ],
   "source": [
    "\n",
    "# creates a model but does not compile the model\n",
    "def create_model(init_mode='uniform', \n",
    "                 learning_rate=0.0001, \n",
    "                 decay=0,\n",
    "                 weight_constraint=1, \n",
    "                 recurrent_dropout=0.0, \n",
    "                 dropout_rate=0.0):\n",
    "    model = Sequential()\n",
    "    model.add(Dropout(dropout_rate, input_shape=(1, look_back)))\n",
    "    lstm = LSTM(256, kernel_initializer=init_mode, recurrent_dropout=recurrent_dropout)\n",
    "    model.add(lstm)\n",
    "    model.add(Dropout(dropout_rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(dropout_rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(dropout_rate))    \n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dense(look_forward))\n",
    "    model.compile(loss=top_heavy_loss, optimizer=RMSprop(lr=learning_rate, rho=0.9, epsilon=1e-08, decay=decay), metrics=['accuracy'])\n",
    "    return model\n",
    "\n",
    "# creates the model\n",
    "model = KerasClassifier(build_fn=create_model, epochs=60, batch_size=60, verbose=3)\n",
    "\n",
    "# Defines the parameters to be grid searched\n",
    "batch_size = [1, 10, 20, 30, 40, 50, 60, 70, 80]\n",
    "epochs = [1, 10, 20, 30, 40, 50, 60, 70, 80, 90, 100]\n",
    "\n",
    "init_mode = ['uniform', 'lecun_uniform', 'normal', 'glorot_normal', 'glorot_uniform', 'he_normal', 'he_uniform']\n",
    "learning_rate = [0.001, 0.0005, 0.0003, 0.0002, 0.00015, 0.0001, 0.00005]\n",
    "decay = [0.0, 0.00001, 0.00005, 0.0001, 0.0005, 0.001, 0.005]\n",
    "weight_constraint = [1, 2, 3, 4, 5]\n",
    "recurrent_dropout  = [0.05, 0.1, 0.15, 0.2, 0.25, 0.3, 0.35, 0.4, 0.45]\n",
    "dropout_rate  = [0.05, 0.1, 0.15, 0.2, 0.25, 0.3, 0.35, 0.4, 0.45, 0.5]\n",
    "\n",
    "param_grid = dict(batch_size        = batch_size, \n",
    "                  epochs            = epochs, \n",
    "                  init_mode         = init_mode,\n",
    "                  learning_rate     = learning_rate,\n",
    "                  decay             = decay,  \n",
    "                  weight_constraint = weight_constraint,\n",
    "                  recurrent_dropout = recurrent_dropout,\n",
    "                  dropout_rate      = dropout_rate)\n",
    "\n",
    "grid = GridSearchCV(estimator=model, param_grid=param_grid, n_jobs=-1)\n",
    "grid_result = grid.fit(trainX, trainY)\n",
    "# summarize results\n",
    "print(\"Best: %f using %s\" % (grid_result.best_score_, grid_result.best_params_))\n",
    "means = grid_result.cv_results_['mean_test_score']\n",
    "stds = grid_result.cv_results_['std_test_score']\n",
    "params = grid_result.cv_results_['params']\n",
    "for mean, stdev, param in zip(means, stds, params):\n",
    "    print(\"%f (%f) with: %r\" % (mean, stdev, param))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "metadata": {
    "scrolled": true
   },
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 14/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 18/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 19/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 25/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 26/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 28/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 33/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 34/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 36/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 37/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 38/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 45/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 46/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 52/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 3/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 5/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 9/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 1/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 2/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 3/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 4/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 5/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 6/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 20/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 8/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 10/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 24/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 12/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 13/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 14/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 15/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 16/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 17/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 18/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 19/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 20/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 44/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 23/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 24/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 37/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 25/60\n",
      "Epoch 48/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 26/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 27/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 28/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 29/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 32/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 33/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 49/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 34/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 35/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 36/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 37/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 38/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 39/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 40/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 42/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 44/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 60/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 58/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 59/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 60/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 1/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 2/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 3/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 4/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 5/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 6/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 7/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 8/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 9/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 10/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 11/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 12/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 13/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 14/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 15/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 16/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 17/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 18/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 20/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 21/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 22/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 23/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 24/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 25/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 26/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 27/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 28/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 29/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 30/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 31/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 32/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 33/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 34/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 35/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 36/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 37/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 38/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 39/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 1/60\n",
      "Epoch 51/60\n",
      "Epoch 1/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 54/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 55/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 56/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 57/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 58/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 59/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 60/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 7/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 9/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 17/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 18/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 1/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 2/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 3/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 4/60\n",
      "Epoch 28/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 5/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 6/60\n",
      "Epoch 37/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 7/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 8/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 9/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 43/60\n",
      "Epoch 33/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 10/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 11/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 35/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 12/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 13/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 37/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 14/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 15/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 16/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 17/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 18/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 42/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 19/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 20/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 45/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 21/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 22/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 23/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 24/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 25/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 26/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 27/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 28/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 29/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 30/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 31/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 32/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 33/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 34/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 35/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 45/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 46/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 47/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 48/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 49/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 50/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 51/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 52/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 53/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 54/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 55/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 56/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 57/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 58/60\n",
      "Epoch 11/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 59/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 60/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 18/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 19/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 21/60\n",
      "Epoch 1/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 2/60\n",
      "Epoch 34/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 3/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 4/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 5/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 6/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 7/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 8/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 9/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 10/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 11/60\n",
      "Epoch 36/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 12/60\n",
      "Epoch 37/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 13/60\n",
      "Epoch 38/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 14/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 39/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 15/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 16/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 17/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 42/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 18/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 19/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 20/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 21/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 22/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 47/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 23/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 24/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 25/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 26/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 27/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 28/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 29/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 30/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 31/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 32/60\n",
      "Epoch 57/60\n",
      "Epoch 33/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 34/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 35/60\n",
      "Epoch 60/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 1/60\n",
      "Epoch 42/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 43/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 44/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 45/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 46/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 47/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 48/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 49/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 50/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 51/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 52/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 53/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 54/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 55/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 56/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 57/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 58/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 59/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 60/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 1/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 2/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 3/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 4/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 5/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 6/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 7/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 8/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 9/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 10/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 11/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 12/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 13/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 14/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 15/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 16/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 17/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 18/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 19/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 20/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 21/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 22/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 23/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 24/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 25/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 26/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 27/60\n",
      "Epoch 59/60\n",
      "Epoch 28/60\n",
      "Epoch 60/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 1/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 1/60\n",
      "Epoch 38/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 39/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 40/60\n",
      "Epoch 1/60\n",
      "Epoch 41/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 42/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 43/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 44/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 45/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 46/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 47/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 48/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 49/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 50/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 51/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 52/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 53/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 54/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 55/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 56/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 57/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 58/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 59/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 60/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 20/60\n",
      "Epoch 27/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 35/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 1/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 34/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 2/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 3/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 4/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 5/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 6/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 7/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 46/60\n",
      "Epoch 8/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 9/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 10/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 11/60\n",
      "Epoch 53/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 12/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 13/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 14/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 15/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 16/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 17/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 18/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 19/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 20/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 21/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 22/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 23/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 24/60\n",
      "Epoch 60/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 1/60\n",
      "Epoch 32/60\n",
      "Epoch 1/60\n",
      "Epoch 33/60\n",
      "Epoch 1/60\n",
      "Epoch 34/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 1/60\n",
      "Epoch 37/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 38/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 39/60\n",
      "Epoch 4/60\n",
      "Epoch 40/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 41/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 42/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 43/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 44/60\n",
      "Epoch 1/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 45/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 46/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 47/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 48/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 49/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 50/60\n",
      "Epoch 15/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 51/60\n",
      "Epoch 4/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 52/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 53/60\n",
      "Epoch 4/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 54/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 17/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 20/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 55/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 6/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 9/60\n",
      "Epoch 57/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 58/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 23/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 59/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 20/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 60/60\n",
      "Epoch 25/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 22/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 2/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 28/60\n",
      "Epoch 14/60\n",
      "Epoch 24/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 25/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 29/60\n",
      "Epoch 14/60\n",
      "Epoch 25/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 15/60\n",
      "Epoch 4/60\n",
      "Epoch 25/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 27/60\n",
      "Epoch 16/60\n",
      "Epoch 26/60\n",
      "Epoch 5/60\n",
      "Epoch 26/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 16/60\n",
      "Epoch 31/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 28/60\n",
      "Epoch 17/60\n",
      "Epoch 27/60\n",
      "Epoch 6/60\n",
      "Epoch 27/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 18/60\n",
      "Epoch 32/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 29/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 28/60\n",
      "Epoch 7/60\n",
      "Epoch 28/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 29/60\n",
      "Epoch 18/60\n",
      "Epoch 33/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 30/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 30/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 34/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 31/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 10/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 32/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 36/60\n",
      "Epoch 21/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 32/60\n",
      "Epoch 11/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 12/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 34/60\n",
      "Epoch 26/60\n",
      "Epoch 38/60\n",
      "Epoch 26/60\n",
      "Epoch 35/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 13/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 36/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 14/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 40/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 1/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 16/60\n",
      "Epoch 28/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 17/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 31/60\n",
      "Epoch 43/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 40/60\n",
      "Epoch 18/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 40/60\n",
      "Epoch 31/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 45/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 20/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 31/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 43/60\n",
      "Epoch 21/60\n",
      "Epoch 2/60\n",
      "Epoch 32/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 22/60\n",
      "Epoch 3/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 35/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 45/60\n",
      "Epoch 4/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 24/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 5/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 25/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 6/60\n",
      "Epoch 47/60\n",
      "Epoch 38/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 36/60\n",
      "Epoch 48/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 26/60\n",
      "Epoch 47/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 7/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 39/60\n",
      "Epoch 52/60\n",
      "Epoch 37/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 37/60\n",
      "Epoch 27/60\n",
      "Epoch 42/60\n",
      "Epoch 48/60\n",
      "Epoch 8/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 50/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 28/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 9/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 50/60\n",
      "Epoch 41/60\n",
      "Epoch 50/60\n",
      "Epoch 39/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 29/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 10/60\n",
      "Epoch 50/60\n",
      "Epoch 41/60\n",
      "Epoch 51/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 51/60\n",
      "Epoch 40/60\n",
      "Epoch 55/60\n",
      "Epoch 43/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 30/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 11/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 42/60\n",
      "Epoch 56/60\n",
      "Epoch 41/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 47/60\n",
      "Epoch 31/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 12/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 54/60\n",
      "Epoch 42/60\n",
      "Epoch 32/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 13/60\n",
      "Epoch 58/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 55/60\n",
      "Epoch 43/60\n",
      "Epoch 33/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 14/60\n",
      "Epoch 46/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 34/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 15/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 16/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 52/60\n",
      "Epoch 36/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 17/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 37/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 18/60\n",
      "Epoch 49/60\n",
      "Epoch 58/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 38/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 19/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 59/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 39/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 20/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 21/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 41/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 23/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 43/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 24/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 44/60\n",
      "Epoch 58/60\n",
      "Epoch 25/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 26/60\n",
      "Epoch 45/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 27/60\n",
      "Epoch 46/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 28/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 29/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 49/60\n",
      "Epoch 30/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 51/60\n",
      "Epoch 32/60\n",
      "Epoch 52/60\n",
      "Epoch 33/60\n",
      "Epoch 53/60\n",
      "Epoch 34/60\n",
      "Epoch 54/60\n",
      "Epoch 35/60\n",
      "Epoch 55/60\n",
      "Epoch 36/60\n",
      "Epoch 56/60\n",
      "Epoch 37/60\n",
      "Epoch 57/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 39/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 59/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 41/60\n",
      "Epoch 1/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 1/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 48/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 49/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 50/60\n",
      "Epoch 5/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 51/60\n",
      "Epoch 6/60\n",
      "Epoch 1/60\n",
      "Epoch 6/60\n",
      "Epoch 52/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 54/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 56/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 57/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 58/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 7/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 59/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 60/60\n",
      "Epoch 15/60\n",
      "Epoch 9/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 17/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 3/60\n",
      "Epoch 18/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 1/60\n",
      "Epoch 19/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 4/60\n",
      "Epoch 21/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 18/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 22/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 5/60\n",
      "Epoch 19/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 23/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 5/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 24/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 21/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 25/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 25/60\n",
      "Epoch 18/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 22/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 26/60\n",
      "Epoch 11/60\n",
      "Epoch 26/60\n",
      "Epoch 19/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 27/60\n",
      "Epoch 12/60\n",
      "Epoch 20/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 21/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 25/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 29/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 26/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 30/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 30/60\n",
      "Epoch 12/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 31/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 24/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 32/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 29/60\n",
      "Epoch 15/60\n",
      "Epoch 33/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 33/60\n",
      "Epoch 1/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 34/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 18/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 12/60\n",
      "Epoch 36/60\n",
      "Epoch 18/60\n",
      "Epoch 37/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 37/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 35/60\n",
      "Epoch 23/60\n",
      "Epoch 39/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 38/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 32/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 40/60\n",
      "Epoch 1/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 36/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 39/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 33/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 2/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 37/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 40/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 34/60\n",
      "Epoch 24/60\n",
      "Epoch 38/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 3/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 41/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 43/60\n",
      "Epoch 24/60\n",
      "Epoch 39/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 4/60\n",
      "Epoch 18/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 42/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 44/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 5/60\n",
      "Epoch 19/60\n",
      "Epoch 43/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 45/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 6/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 44/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 7/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 45/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 8/60\n",
      "Epoch 22/60\n",
      "Epoch 46/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 2/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 23/60\n",
      "Epoch 9/60\n",
      "Epoch 47/60\n",
      "Epoch 3/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 24/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 10/60\n",
      "Epoch 4/60\n",
      "Epoch 48/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 42/60\n",
      "Epoch 25/60\n",
      "Epoch 50/60\n",
      "Epoch 11/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 5/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 43/60\n",
      "Epoch 26/60\n",
      "Epoch 51/60\n",
      "Epoch 12/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 6/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 7/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 45/60\n",
      "Epoch 28/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 14/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 8/60\n",
      "Epoch 34/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 29/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 15/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 9/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 30/60\n",
      "Epoch 40/60\n",
      "Epoch 16/60\n",
      "Epoch 35/60\n",
      "Epoch 10/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 56/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 31/60\n",
      "Epoch 55/60\n",
      "Epoch 36/60\n",
      "Epoch 17/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 11/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 57/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 42/60\n",
      "Epoch 32/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 33/60\n",
      "Epoch 13/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 19/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 14/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 20/60\n",
      "Epoch 43/60\n",
      "Epoch 52/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 15/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 53/60\n",
      "Epoch 41/60\n",
      "Epoch 60/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 57/60\n",
      "Epoch 47/60\n",
      "Epoch 16/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 54/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 23/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 17/60\n",
      "Epoch 58/60\n",
      "Epoch 43/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 44/60\n",
      "Epoch 59/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 56/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 25/60\n",
      "Epoch 45/60\n",
      "Epoch 19/60\n",
      "Epoch 49/60\n",
      "Epoch 60/60\n",
      "Epoch 47/60\n",
      "Epoch 57/60\n",
      "Epoch 48/60\n",
      "Epoch 40/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 26/60\n",
      "Epoch 45/60\n",
      "Epoch 20/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 27/60\n",
      "Epoch 49/60\n",
      "Epoch 21/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 28/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 22/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 60/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 29/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 23/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 30/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 24/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 31/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 25/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 32/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 26/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 33/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 27/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 34/60\n",
      "Epoch 55/60\n",
      "Epoch 28/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 37/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 31/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 32/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 33/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 35/60\n",
      "Epoch 57/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 58/60\n",
      "Epoch 36/60\n",
      "Epoch 1/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 59/60\n",
      "Epoch 1/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 39/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 41/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 48/60\n",
      "Epoch 42/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 2/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 3/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 1/60\n",
      "Epoch 52/60\n",
      "Epoch 4/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 5/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 6/60\n",
      "Epoch 48/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 55/60\n",
      "Epoch 7/60\n",
      "Epoch 49/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 50/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 58/60\n",
      "Epoch 1/60\n",
      "Epoch 6/60\n",
      "Epoch 52/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 12/60\n",
      "Epoch 55/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 57/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 58/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 59/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 17/60\n",
      "Epoch 1/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 60/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 21/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 18/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 19/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 20/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 24/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 19/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 2/60\n",
      "Epoch 22/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 21/60\n",
      "Epoch 8/60\n",
      "Epoch 27/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 9/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 24/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 16/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 27/60\n",
      "Epoch 15/60\n",
      "Epoch 9/60\n",
      "Epoch 1/60\n",
      "Epoch 17/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 19/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 18/60\n",
      "Epoch 27/60\n",
      "Epoch 14/60\n",
      "Epoch 33/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 34/60\n",
      "Epoch 12/60\n",
      "Epoch 1/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 28/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 30/60\n",
      "Epoch 12/60\n",
      "Epoch 20/60\n",
      "Epoch 35/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 13/60\n",
      "Epoch 36/60\n",
      "Epoch 13/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 32/60\n",
      "Epoch 21/60\n",
      "Epoch 37/60\n",
      "Epoch 31/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 16/60\n",
      "Epoch 38/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 2/60\n",
      "Epoch 15/60\n",
      "Epoch 33/60\n",
      "Epoch 16/60\n",
      "Epoch 23/60\n",
      "Epoch 39/60\n",
      "Epoch 17/60\n",
      "Epoch 34/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 3/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 35/60\n",
      "Epoch 18/60\n",
      "Epoch 40/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 35/60\n",
      "Epoch 4/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 36/60\n",
      "Epoch 20/60\n",
      "Epoch 41/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 28/60\n",
      "Epoch 36/60\n",
      "Epoch 18/60\n",
      "Epoch 5/60\n",
      "Epoch 27/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 37/60\n",
      "Epoch 2/60\n",
      "Epoch 26/60\n",
      "Epoch 42/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 37/60\n",
      "Epoch 29/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 6/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 3/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 38/60\n",
      "Epoch 20/60\n",
      "Epoch 30/60\n",
      "Epoch 20/60\n",
      "Epoch 7/60\n",
      "Epoch 29/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 4/60\n",
      "Epoch 26/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 39/60\n",
      "Epoch 21/60\n",
      "Epoch 31/60\n",
      "Epoch 21/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 30/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 5/60\n",
      "Epoch 27/60\n",
      "Epoch 40/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 31/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 10/60\n",
      "Epoch 24/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 47/60\n",
      "Epoch 24/60\n",
      "Epoch 33/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 43/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 43/60\n",
      "Epoch 35/60\n",
      "Epoch 25/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 48/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 44/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 44/60\n",
      "Epoch 36/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 49/60\n",
      "Epoch 35/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 45/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 45/60\n",
      "Epoch 37/60\n",
      "Epoch 11/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 50/60\n",
      "Epoch 14/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 46/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 46/60\n",
      "Epoch 38/60\n",
      "Epoch 28/60\n",
      "Epoch 12/60\n",
      "Epoch 2/60\n",
      "Epoch 15/60\n",
      "Epoch 37/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 32/60\n",
      "Epoch 3/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 52/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 37/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 30/60\n",
      "Epoch 40/60\n",
      "Epoch 33/60\n",
      "Epoch 4/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 53/60\n",
      "Epoch 31/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 31/60\n",
      "Epoch 5/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 54/60\n",
      "Epoch 32/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 37/60\n",
      "Epoch 16/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 32/60\n",
      "Epoch 6/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 55/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 51/60\n",
      "Epoch 17/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 52/60\n",
      "Epoch 7/60\n",
      "Epoch 20/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 43/60\n",
      "Epoch 35/60\n",
      "Epoch 56/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 52/60\n",
      "Epoch 18/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 53/60\n",
      "Epoch 41/60\n",
      "Epoch 8/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 34/60\n",
      "Epoch 57/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 21/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 19/60\n",
      "Epoch 54/60\n",
      "Epoch 42/60\n",
      "Epoch 9/60\n",
      "Epoch 35/60\n",
      "Epoch 45/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 22/60\n",
      "Epoch 58/60\n",
      "Epoch 36/60\n",
      "Epoch 54/60\n",
      "Epoch 20/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 55/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 46/60\n",
      "Epoch 10/60\n",
      "Epoch 23/60\n",
      "Epoch 59/60\n",
      "Epoch 37/60\n",
      "Epoch 55/60\n",
      "Epoch 42/60\n",
      "Epoch 21/60\n",
      "Epoch 46/60\n",
      "Epoch 39/60\n",
      "Epoch 56/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 37/60\n",
      "Epoch 11/60\n",
      "Epoch 24/60\n",
      "Epoch 43/60\n",
      "Epoch 60/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 56/60\n",
      "Epoch 22/60\n",
      "Epoch 47/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 57/60\n",
      "Epoch 45/60\n",
      "Epoch 38/60\n",
      "Epoch 12/60\n",
      "Epoch 25/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 57/60\n",
      "Epoch 23/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 58/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 13/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 39/60\n",
      "Epoch 49/60\n",
      "Epoch 26/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 24/60\n",
      "Epoch 49/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 40/60\n",
      "Epoch 59/60\n",
      "Epoch 14/60\n",
      "Epoch 27/60\n",
      "Epoch 41/60\n",
      "Epoch 59/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 25/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 15/60\n",
      "Epoch 60/60\n",
      "Epoch 28/60\n",
      "Epoch 42/60\n",
      "Epoch 26/60\n",
      "Epoch 47/60\n",
      "Epoch 60/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 52/60\n",
      "Epoch 16/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 29/60\n",
      "Epoch 43/60\n",
      "Epoch 27/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 17/60\n",
      "Epoch 53/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 29/60\n",
      "Epoch 54/60\n",
      "Epoch 18/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 53/60\n",
      "Epoch 31/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 30/60\n",
      "Epoch 19/60\n",
      "Epoch 46/60\n",
      "Epoch 52/60\n",
      "Epoch 32/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 33/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 21/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 33/60\n",
      "Epoch 22/60\n",
      "Epoch 35/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 59/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 55/60\n",
      "Epoch 23/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 60/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 38/60\n",
      "Epoch 25/60\n",
      "Epoch 36/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 26/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 27/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 40/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 39/60\n",
      "Epoch 55/60\n",
      "Epoch 41/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 28/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 29/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 43/60\n",
      "Epoch 57/60\n",
      "Epoch 41/60\n",
      "Epoch 30/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 58/60\n",
      "Epoch 44/60\n",
      "Epoch 31/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 43/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 45/60\n",
      "Epoch 32/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 44/60\n",
      "Epoch 33/60\n",
      "Epoch 46/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 34/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 36/60\n",
      "Epoch 49/60\n",
      "Epoch 37/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 38/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 39/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 2/60\n",
      "Epoch 51/60\n",
      "Epoch 40/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 3/60\n",
      "Epoch 54/60\n",
      "Epoch 41/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 4/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 56/60\n",
      "Epoch 5/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 6/60\n",
      "Epoch 57/60\n",
      "Epoch 45/60\n",
      "Epoch 56/60\n",
      "Epoch 7/60\n",
      "Epoch 58/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 8/60\n",
      "Epoch 59/60\n",
      "Epoch 1/60\n",
      "Epoch 47/60\n",
      "Epoch 9/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 10/60\n",
      "Epoch 59/60\n",
      "Epoch 49/60\n",
      "Epoch 11/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 12/60\n",
      "Epoch 51/60\n",
      "Epoch 13/60\n",
      "Epoch 52/60\n",
      "Epoch 14/60\n",
      "Epoch 53/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 15/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 16/60\n",
      "Epoch 55/60\n",
      "Epoch 2/60\n",
      "Epoch 17/60\n",
      "Epoch 56/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 18/60\n",
      "Epoch 57/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 58/60\n",
      "Epoch 19/60\n",
      "Epoch 5/60\n",
      "Epoch 59/60\n",
      "Epoch 20/60\n",
      "Epoch 6/60\n",
      "Epoch 21/60\n",
      "Epoch 60/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 22/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 23/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 24/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 25/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 26/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 27/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 28/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 30/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 31/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 17/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 32/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 19/60\n",
      "Epoch 33/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 20/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 34/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 35/60\n",
      "Epoch 21/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 8/60\n",
      "Epoch 36/60\n",
      "Epoch 10/60\n",
      "Epoch 22/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 9/60\n",
      "Epoch 37/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 38/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 8/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 17/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 1/60\n",
      "Epoch 39/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 9/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 40/60\n",
      "Epoch 14/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 10/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 11/60\n",
      "Epoch 41/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 22/60\n",
      "Epoch 14/60\n",
      "Epoch 42/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 29/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 43/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 30/60\n",
      "Epoch 44/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 1/60\n",
      "Epoch 15/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 45/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 32/60\n",
      "Epoch 20/60\n",
      "Epoch 46/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 33/60\n",
      "Epoch 47/60\n",
      "Epoch 2/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 48/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 3/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 49/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 4/60\n",
      "Epoch 20/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 50/60\n",
      "Epoch 36/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 5/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 51/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 6/60\n",
      "Epoch 27/60\n",
      "Epoch 3/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 52/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 38/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 4/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 7/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 53/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 39/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 5/60\n",
      "Epoch 33/60\n",
      "Epoch 8/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 54/60\n",
      "Epoch 26/60\n",
      "Epoch 40/60\n",
      "Epoch 24/60\n",
      "Epoch 30/60\n",
      "Epoch 6/60\n",
      "Epoch 25/60\n",
      "Epoch 9/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 55/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 41/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 10/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 56/60\n",
      "Epoch 31/60\n",
      "Epoch 42/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 8/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 11/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 57/60\n",
      "Epoch 43/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 9/60\n",
      "Epoch 36/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 12/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 58/60\n",
      "Epoch 44/60\n",
      "Epoch 10/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 13/60\n",
      "Epoch 38/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 45/60\n",
      "Epoch 59/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 14/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 60/60\n",
      "Epoch 46/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 12/60\n",
      "Epoch 32/60\n",
      "Epoch 39/60\n",
      "Epoch 15/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 47/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 32/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 48/60\n",
      "Epoch 41/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 14/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 17/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 49/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 15/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 18/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 50/60\n",
      "Epoch 43/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 16/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 19/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 17/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 43/60\n",
      "Epoch 20/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 18/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 21/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 19/60\n",
      "Epoch 46/60\n",
      "Epoch 37/60\n",
      "Epoch 53/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 22/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 54/60\n",
      "Epoch 38/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 55/60\n",
      "Epoch 43/60\n",
      "Epoch 21/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 40/60\n",
      "Epoch 24/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 48/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 56/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 25/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 23/60\n",
      "Epoch 50/60\n",
      "Epoch 43/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 26/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 24/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 27/60\n",
      "Epoch 46/60\n",
      "Epoch 58/60\n",
      "Epoch 42/60\n",
      "Epoch 50/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 25/60\n",
      "Epoch 48/60\n",
      "Epoch 59/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 52/60\n",
      "Epoch 28/60\n",
      "Epoch 51/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 26/60\n",
      "Epoch 49/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n",
      "Epoch 29/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 27/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 28/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 31/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 29/60\n",
      "Epoch 56/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 47/60\n",
      "Epoch 55/60\n",
      "Epoch 32/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 30/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 33/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 31/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 34/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 32/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 35/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 33/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 36/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 34/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 37/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 35/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 38/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 36/60\n",
      "Epoch 59/60\n",
      "Epoch 39/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 37/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 38/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 39/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 44/60\n",
      "Epoch 60/60\n",
      "Epoch 42/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 2/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 3/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 4/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 5/60\n",
      "Epoch 53/60\n",
      "Epoch 6/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 7/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 8/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 9/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 58/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 59/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 12/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 15/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 1/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 19/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 20/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 21/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 22/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 24/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 15/60\n",
      "Epoch 26/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 27/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 15/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 28/60\n",
      "Epoch 3/60\n",
      "Epoch 17/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 16/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 29/60\n",
      "Epoch 18/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 17/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 30/60\n",
      "Epoch 6/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 19/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 31/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 19/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 32/60\n",
      "Epoch 20/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 33/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 23/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 18/60\n",
      "Epoch 8/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 7/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 24/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 36/60\n",
      "Epoch 19/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 25/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 37/60\n",
      "Epoch 10/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 26/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 1/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 38/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 28/60\n",
      "Epoch 10/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 27/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 39/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 40/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 13/60\n",
      "Epoch 30/60\n",
      "Epoch 12/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 25/60\n",
      "Epoch 13/60\n",
      "Epoch 1/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 31/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 42/60\n",
      "Epoch 18/60\n",
      "Epoch 30/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 32/60\n",
      "Epoch 15/60\n",
      "Epoch 25/60\n",
      "Epoch 43/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 16/60\n",
      "Epoch 33/60\n",
      "Epoch 16/60\n",
      "Epoch 26/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 44/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 32/60\n",
      "Epoch 16/60\n",
      "Epoch 28/60\n",
      "Epoch 17/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 45/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 29/60\n",
      "Epoch 18/60\n",
      "Epoch 35/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 2/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 46/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 29/60\n",
      "Epoch 3/60\n",
      "Epoch 47/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 29/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 22/60\n",
      "Epoch 37/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 4/60\n",
      "Epoch 30/60\n",
      "Epoch 20/60\n",
      "Epoch 48/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 2/60\n",
      "Epoch 32/60\n",
      "Epoch 5/60\n",
      "Epoch 31/60\n",
      "Epoch 21/60\n",
      "Epoch 49/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 39/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 3/60\n",
      "Epoch 33/60\n",
      "Epoch 6/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 50/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 26/60\n",
      "Epoch 40/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 34/60\n",
      "Epoch 51/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 41/60\n",
      "Epoch 26/60\n",
      "Epoch 5/60\n",
      "Epoch 24/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 52/60\n",
      "Epoch 34/60\n",
      "Epoch 8/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 36/60\n",
      "Epoch 6/60\n",
      "Epoch 25/60\n",
      "Epoch 9/60\n",
      "Epoch 35/60\n",
      "Epoch 53/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 28/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 54/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 55/60\n",
      "Epoch 37/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 30/60\n",
      "Epoch 39/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 56/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 31/60\n",
      "Epoch 40/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 10/60\n",
      "Epoch 57/60\n",
      "Epoch 13/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 33/60\n",
      "Epoch 45/60\n",
      "Epoch 32/60\n",
      "Epoch 41/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 11/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 58/60\n",
      "Epoch 14/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 46/60\n",
      "Epoch 34/60\n",
      "Epoch 48/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 42/60\n",
      "Epoch 33/60\n",
      "Epoch 12/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 59/60\n",
      "Epoch 36/60\n",
      "Epoch 15/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 43/60\n",
      "Epoch 13/60\n",
      "Epoch 60/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 16/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 44/60\n",
      "Epoch 35/60\n",
      "Epoch 14/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 37/60\n",
      "Epoch 17/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 45/60\n",
      "Epoch 15/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 39/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 18/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 52/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 16/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 51/60\n",
      "Epoch 36/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 19/60\n",
      "Epoch 45/60\n",
      "Epoch 39/60\n",
      "Epoch 53/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 47/60\n",
      "Epoch 17/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 20/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 54/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 48/60\n",
      "Epoch 18/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 21/60\n",
      "Epoch 47/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 55/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 39/60\n",
      "Epoch 22/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 43/60\n",
      "Epoch 56/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 20/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 40/60\n",
      "Epoch 23/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 49/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 57/60\n",
      "Epoch 21/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 41/60\n",
      "Epoch 24/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 56/60\n",
      "Epoch 43/60\n",
      "Epoch 58/60\n",
      "Epoch 44/60\n",
      "Epoch 50/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 22/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 25/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 23/60\n",
      "Epoch 45/60\n",
      "Epoch 26/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 59/60\n",
      "Epoch 44/60\n",
      "Epoch 28/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 25/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 28/60\n",
      "Epoch 58/60\n",
      "Epoch 47/60\n",
      "Epoch 31/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 29/60\n",
      "Epoch 48/60\n",
      "Epoch 32/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 49/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 30/60\n",
      "Epoch 59/60\n",
      "Epoch 33/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 60/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 34/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 33/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 36/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 37/60\n",
      "Epoch 54/60\n",
      "Epoch 34/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 2/60\n",
      "Epoch 48/60\n",
      "Epoch 1/60\n",
      "Epoch 52/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 49/60\n",
      "Epoch 4/60\n",
      "Epoch 53/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 5/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 6/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 7/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 8/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 9/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 11/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 58/60\n",
      "Epoch 12/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 59/60\n",
      "Epoch 2/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 60/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 14/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 15/60\n",
      "Epoch 1/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 17/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 18/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 20/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 21/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 22/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 23/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 24/60\n",
      "Epoch 15/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 25/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 18/60\n",
      "Epoch 27/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 28/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 20/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 29/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 30/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 9/60\n",
      "Epoch 21/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 31/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 32/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 33/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 14/60\n",
      "Epoch 23/60\n",
      "Epoch 34/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 25/60\n",
      "Epoch 13/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 35/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 19/60\n",
      "Epoch 36/60\n",
      "Epoch 22/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 1/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 26/60\n",
      "Epoch 1/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 28/60\n",
      "Epoch 21/60\n",
      "Epoch 29/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 19/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 18/60\n",
      "Epoch 39/60\n",
      "Epoch 18/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 20/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 40/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 31/60\n",
      "Epoch 21/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 25/60\n",
      "Epoch 33/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 42/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 43/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 44/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 3/60\n",
      "Epoch 34/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 37/60\n",
      "Epoch 3/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 47/60\n",
      "Epoch 37/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 5/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 5/60\n",
      "Epoch 31/60\n",
      "Epoch 28/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 48/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 6/60\n",
      "Epoch 28/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 6/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 29/60\n",
      "Epoch 49/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 7/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 7/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 30/60\n",
      "Epoch 50/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 40/60\n",
      "Epoch 8/60\n",
      "Epoch 36/60\n",
      "Epoch 8/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 51/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 37/60\n",
      "Epoch 30/60\n",
      "Epoch 52/60\n",
      "Epoch 32/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 41/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 53/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 34/60\n",
      "Epoch 42/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 54/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 12/60\n",
      "Epoch 43/60\n",
      "Epoch 35/60\n",
      "Epoch 12/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 44/60\n",
      "Epoch 56/60\n",
      "Epoch 45/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 48/60\n",
      "Epoch 37/60\n",
      "Epoch 45/60\n",
      "Epoch 14/60\n",
      "Epoch 57/60\n",
      "Epoch 14/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 58/60\n",
      "Epoch 38/60\n",
      "Epoch 15/60\n",
      "Epoch 49/60\n",
      "Epoch 15/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 16/60\n",
      "Epoch 50/60\n",
      "Epoch 59/60\n",
      "Epoch 39/60\n",
      "Epoch 16/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 60/60\n",
      "Epoch 40/60\n",
      "Epoch 17/60\n",
      "Epoch 39/60\n",
      "Epoch 17/60\n",
      "Epoch 51/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 49/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 41/60\n",
      "Epoch 18/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 52/60\n",
      "Epoch 18/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 50/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 50/60\n",
      "Epoch 19/60\n",
      "Epoch 52/60\n",
      "Epoch 42/60\n",
      "Epoch 53/60\n",
      "Epoch 41/60\n",
      "Epoch 19/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 52/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 52/60\n",
      "Epoch 21/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 21/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 22/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 53/60\n",
      "Epoch 45/60\n",
      "Epoch 56/60\n",
      "Epoch 48/60\n",
      "Epoch 22/60\n",
      "Epoch 43/60\n",
      "Epoch 54/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 23/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 57/60\n",
      "Epoch 49/60\n",
      "Epoch 23/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 24/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 24/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 45/60\n",
      "Epoch 53/60\n",
      "Epoch 25/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 48/60\n",
      "Epoch 25/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 26/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 26/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 27/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 58/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 60/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 27/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 28/60\n",
      "Epoch 50/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 29/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 28/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 52/60\n",
      "Epoch 30/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 29/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 31/60\n",
      "Epoch 53/60\n",
      "Epoch 30/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 32/60\n",
      "Epoch 52/60\n",
      "Epoch 31/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 33/60\n",
      "Epoch 58/60\n",
      "Epoch 34/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 34/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 35/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 35/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 36/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 56/60\n",
      "Epoch 3/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 4/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 5/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 59/60\n",
      "Epoch 1/60\n",
      "Epoch 58/60\n",
      "Epoch 6/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 15/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 19/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 20/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 21/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 22/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 17/60\n",
      "Epoch 23/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 2/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 3/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 25/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 26/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 10/60\n",
      "Epoch 21/60\n",
      "Epoch 5/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 28/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 29/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 13/60\n",
      "Epoch 22/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 1/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 15/60\n",
      "Epoch 30/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 10/60\n",
      "Epoch 22/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 1/60\n",
      "Epoch 23/60\n",
      "Epoch 12/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 13/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 19/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 18/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 36/60\n",
      "Epoch 27/60\n",
      "Epoch 19/60\n",
      "Epoch 29/60\n",
      "Epoch 15/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 17/60\n",
      "Epoch 2/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 18/60\n",
      "Epoch 3/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 19/60\n",
      "Epoch 4/60\n",
      "Epoch 26/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 5/60\n",
      "Epoch 34/60\n",
      "Epoch 24/60\n",
      "Epoch 33/60\n",
      "Epoch 41/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 2/60\n",
      "Epoch 33/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 6/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 42/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 3/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 7/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 36/60\n",
      "Epoch 43/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 4/60\n",
      "Epoch 39/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 8/60\n",
      "Epoch 35/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 29/60\n",
      "Epoch 40/60\n",
      "Epoch 5/60\n",
      "Epoch 33/60\n",
      "Epoch 24/60\n",
      "Epoch 9/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 45/60\n",
      "Epoch 38/60\n",
      "Epoch 30/60\n",
      "Epoch 6/60\n",
      "Epoch 41/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 10/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 29/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 31/60\n",
      "Epoch 7/60\n",
      "Epoch 26/60\n",
      "Epoch 35/60\n",
      "Epoch 11/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 8/60\n",
      "Epoch 43/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 12/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 9/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 32/60\n",
      "Epoch 39/60\n",
      "Epoch 13/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 10/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 14/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 50/60\n",
      "Epoch 34/60\n",
      "Epoch 11/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 15/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 31/60\n",
      "Epoch 51/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 12/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 16/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 32/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 43/60\n",
      "Epoch 13/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 17/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 33/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 14/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 47/60\n",
      "Epoch 18/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 34/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 15/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 19/60\n",
      "Epoch 48/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 35/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 16/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 20/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 36/60\n",
      "Epoch 56/60\n",
      "Epoch 17/60\n",
      "Epoch 48/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 40/60\n",
      "Epoch 21/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 53/60\n",
      "Epoch 37/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 42/60\n",
      "Epoch 18/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 22/60\n",
      "Epoch 49/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 38/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 43/60\n",
      "Epoch 19/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 23/60\n",
      "Epoch 52/60\n",
      "Epoch 50/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 20/60\n",
      "Epoch 48/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 24/60\n",
      "Epoch 43/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 56/60\n",
      "Epoch 21/60\n",
      "Epoch 49/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 25/60\n",
      "Epoch 53/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 57/60\n",
      "Epoch 22/60\n",
      "Epoch 41/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 26/60\n",
      "Epoch 55/60\n",
      "Epoch 45/60\n",
      "Epoch 53/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 23/60\n",
      "Epoch 51/60\n",
      "Epoch 42/60\n",
      "Epoch 54/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 27/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 24/60\n",
      "Epoch 52/60\n",
      "Epoch 43/60\n",
      "Epoch 59/60\n",
      "Epoch 48/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 28/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 44/60\n",
      "Epoch 53/60\n",
      "Epoch 25/60\n",
      "Epoch 60/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 58/60\n",
      "Epoch 29/60\n",
      "Epoch 45/60\n",
      "Epoch 55/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 26/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 30/60\n",
      "Epoch 58/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 52/60\n",
      "Epoch 27/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 31/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 28/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 48/60\n",
      "Epoch 59/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 32/60\n",
      "Epoch 60/60\n",
      "Epoch 29/60\n",
      "Epoch 51/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 49/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 33/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 30/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 60/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 35/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 32/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 36/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 33/60\n",
      "Epoch 53/60\n",
      "Epoch 37/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 57/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 55/60\n",
      "Epoch 60/60\n",
      "Epoch 40/60\n",
      "Epoch 58/60\n",
      "Epoch 36/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 42/60\n",
      "Epoch 58/60\n",
      "Epoch 38/60\n",
      "Epoch 59/60\n",
      "Epoch 39/60\n",
      "Epoch 43/60\n",
      "Epoch 60/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 45/60\n",
      "Epoch 1/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 55/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 2/60\n",
      "Epoch 57/60\n",
      "Epoch 3/60\n",
      "Epoch 58/60\n",
      "Epoch 4/60\n",
      "Epoch 59/60\n",
      "Epoch 5/60\n",
      "Epoch 1/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 60/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 9/60\n",
      "Epoch 1/60\n",
      "Epoch 10/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 9/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 7/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 22/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 23/60\n",
      "Epoch 15/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 24/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 25/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 26/60\n",
      "Epoch 17/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 28/60\n",
      "Epoch 19/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 2/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 17/60\n",
      "Epoch 3/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 3/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 23/60\n",
      "Epoch 18/60\n",
      "Epoch 4/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 30/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 4/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 5/60\n",
      "Epoch 22/60\n",
      "Epoch 31/60\n",
      "Epoch 23/60\n",
      "Epoch 5/60\n",
      "Epoch 25/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 26/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 6/60\n",
      "Epoch 32/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 1/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 27/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 27/60\n",
      "Epoch 7/60\n",
      "Epoch 33/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 22/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 8/60\n",
      "Epoch 26/60\n",
      "Epoch 8/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 9/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 28/60\n",
      "Epoch 10/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 36/60\n",
      "Epoch 25/60\n",
      "Epoch 10/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 11/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n",
      "Epoch 26/60\n",
      "Epoch 11/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 12/60\n",
      "Epoch 32/60\n",
      "Epoch 26/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 12/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 31/60\n",
      "Epoch 13/60\n",
      "Epoch 30/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 40/60\n",
      "Epoch 28/60\n",
      "Epoch 14/60\n",
      "Epoch 31/60\n",
      "Epoch 1/60\n",
      "Epoch 34/60\n",
      "Epoch 14/60\n",
      "Epoch 28/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 15/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 15/60\n",
      "Epoch 35/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 42/60\n",
      "Epoch 34/60\n",
      "Epoch 33/60\n",
      "Epoch 16/60\n",
      "Epoch 2/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 16/60\n",
      "Epoch 36/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 35/60\n",
      "Epoch 43/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 17/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 17/60\n",
      "Epoch 3/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 44/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 18/60\n",
      "Epoch 38/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 18/60\n",
      "Epoch 4/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 36/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 19/60\n",
      "Epoch 45/60\n",
      "Epoch 33/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 19/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 5/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 20/60\n",
      "Epoch 46/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 20/60\n",
      "Epoch 35/60\n",
      "Epoch 6/60\n",
      "Epoch 34/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 47/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 21/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 21/60\n",
      "Epoch 7/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 22/60\n",
      "Epoch 48/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 22/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 23/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 23/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 39/60\n",
      "Epoch 4/60\n",
      "Epoch 39/60\n",
      "Epoch 10/60\n",
      "Epoch 43/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 11/60\n",
      "Epoch 5/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 26/60\n",
      "Epoch 44/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 26/60\n",
      "Epoch 12/60\n",
      "Epoch 41/60\n",
      "Epoch 6/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 27/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 7/60\n",
      "Epoch 27/60\n",
      "Epoch 13/60\n",
      "Epoch 46/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 28/60\n",
      "Epoch 8/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 14/60\n",
      "Epoch 43/60\n",
      "Epoch 43/60\n",
      "Epoch 28/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 41/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 9/60\n",
      "Epoch 47/60\n",
      "Epoch 15/60\n",
      "Epoch 43/60\n",
      "Epoch 29/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 29/60\n",
      "Epoch 48/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 10/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 16/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 30/60\n",
      "Epoch 45/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 43/60\n",
      "Epoch 44/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 11/60\n",
      "Epoch 17/60\n",
      "Epoch 31/60\n",
      "Epoch 45/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 12/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 32/60\n",
      "Epoch 18/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 32/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 59/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 13/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 33/60\n",
      "Epoch 19/60\n",
      "Epoch 52/60\n",
      "Epoch 33/60\n",
      "Epoch 47/60\n",
      "Epoch 60/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 14/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 34/60\n",
      "Epoch 20/60\n",
      "Epoch 53/60\n",
      "Epoch 34/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 35/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 35/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 36/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 16/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 22/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 50/60\n",
      "Epoch 36/60\n",
      "Epoch 55/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 17/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 23/60\n",
      "Epoch 51/60\n",
      "Epoch 37/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 37/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 52/60\n",
      "Epoch 38/60\n",
      "Epoch 56/60\n",
      "Epoch 52/60\n",
      "Epoch 38/60\n",
      "Epoch 51/60\n",
      "Epoch 25/60\n",
      "Epoch 57/60\n",
      "Epoch 59/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 19/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 39/60\n",
      "Epoch 57/60\n",
      "Epoch 26/60\n",
      "Epoch 52/60\n",
      "Epoch 39/60\n",
      "Epoch 53/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 20/60\n",
      "Epoch 58/60\n",
      "Epoch 40/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 27/60\n",
      "Epoch 58/60\n",
      "Epoch 53/60\n",
      "Epoch 40/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 21/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 41/60\n",
      "Epoch 56/60\n",
      "Epoch 54/60\n",
      "Epoch 41/60\n",
      "Epoch 28/60\n",
      "Epoch 59/60\n",
      "Epoch 22/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 42/60\n",
      "Epoch 57/60\n",
      "Epoch 29/60\n",
      "Epoch 42/60\n",
      "Epoch 55/60\n",
      "Epoch 23/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 43/60\n",
      "Epoch 30/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 24/60\n",
      "Epoch 43/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 31/60\n",
      "Epoch 60/60\n",
      "Epoch 44/60\n",
      "Epoch 57/60\n",
      "Epoch 25/60\n",
      "Epoch 58/60\n",
      "Epoch 44/60\n",
      "Epoch 59/60\n",
      "Epoch 32/60\n",
      "Epoch 58/60\n",
      "Epoch 26/60\n",
      "Epoch 59/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 33/60\n",
      "Epoch 59/60\n",
      "Epoch 27/60\n",
      "Epoch 60/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 60/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 35/60\n",
      "Epoch 48/60\n",
      "Epoch 29/60\n",
      "Epoch 48/60\n",
      "Epoch 36/60\n",
      "Epoch 30/60\n",
      "Epoch 49/60\n",
      "Epoch 37/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 50/60\n",
      "Epoch 51/60\n",
      "Epoch 32/60\n",
      "Epoch 51/60\n",
      "Epoch 39/60\n",
      "Epoch 52/60\n",
      "Epoch 33/60\n",
      "Epoch 52/60\n",
      "Epoch 40/60\n",
      "Epoch 53/60\n",
      "Epoch 34/60\n",
      "Epoch 53/60\n",
      "Epoch 41/60\n",
      "Epoch 54/60\n",
      "Epoch 54/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 55/60\n",
      "Epoch 36/60\n",
      "Epoch 55/60\n",
      "Epoch 43/60\n",
      "Epoch 56/60\n",
      "Epoch 37/60\n",
      "Epoch 56/60\n",
      "Epoch 44/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 38/60\n",
      "Epoch 45/60\n",
      "Epoch 58/60\n",
      "Epoch 46/60\n",
      "Epoch 58/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 59/60\n",
      "Epoch 40/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 60/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 42/60\n",
      "Epoch 50/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 45/60\n",
      "Epoch 53/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 47/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 49/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 1/60\n",
      "Epoch 58/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 59/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 13/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 13/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 2/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 20/60\n",
      "Epoch 3/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 4/60\n",
      "Epoch 20/60\n",
      "Epoch 21/60\n",
      "Epoch 3/60\n",
      "Epoch 22/60\n",
      "Epoch 15/60\n",
      "Epoch 16/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 5/60\n",
      "Epoch 21/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 4/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 25/60\n",
      "Epoch 21/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 23/60\n",
      "Epoch 5/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 7/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 18/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 6/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 8/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 7/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 9/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 8/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 10/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 9/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 11/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 23/60\n",
      "Epoch 24/60\n",
      "Epoch 12/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 11/60\n",
      "Epoch 31/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 13/60\n",
      "Epoch 24/60\n",
      "Epoch 27/60\n",
      "Epoch 32/60\n",
      "Epoch 12/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 29/60\n",
      "Epoch 26/60\n",
      "Epoch 14/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 13/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 15/60\n",
      "Epoch 14/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 30/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 16/60\n",
      "Epoch 31/60\n",
      "Epoch 15/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 33/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 1/60\n",
      "Epoch 17/60\n",
      "Epoch 31/60\n",
      "Epoch 32/60\n",
      "Epoch 16/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 30/60\n",
      "Epoch 33/60\n",
      "Epoch 18/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 17/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 34/60\n",
      "Epoch 19/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 18/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 2/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 37/60\n",
      "Epoch 19/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 3/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 21/60\n",
      "Epoch 32/60\n",
      "Epoch 36/60\n",
      "Epoch 20/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 4/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 21/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 41/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 39/60\n",
      "Epoch 5/60\n",
      "Epoch 39/60\n",
      "Epoch 35/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 23/60\n",
      "Epoch 40/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 40/60\n",
      "Epoch 40/60\n",
      "Epoch 6/60\n",
      "Epoch 39/60\n",
      "Epoch 40/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 24/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 23/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 7/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 25/60\n",
      "Epoch 42/60\n",
      "Epoch 24/60\n",
      "Epoch 44/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 40/60\n",
      "Epoch 8/60\n",
      "Epoch 42/60\n",
      "Epoch 42/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 26/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 9/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 2/60\n",
      "Epoch 40/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 26/60\n",
      "Epoch 40/60\n",
      "Epoch 38/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 27/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 10/60\n",
      "Epoch 41/60\n",
      "Epoch 45/60\n",
      "Epoch 3/60\n",
      "Epoch 44/60\n",
      "Epoch 47/60\n",
      "Epoch 44/60\n",
      "Epoch 27/60\n",
      "Epoch 47/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 28/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 11/60\n",
      "Epoch 42/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 4/60\n",
      "Epoch 45/60\n",
      "Epoch 28/60\n",
      "Epoch 42/60\n",
      "Epoch 48/60\n",
      "Epoch 40/60\n",
      "Epoch 29/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 46/60\n",
      "Epoch 29/60\n",
      "Epoch 46/60\n",
      "Epoch 43/60\n",
      "Epoch 41/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 30/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 13/60\n",
      "Epoch 6/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 30/60\n",
      "Epoch 44/60\n",
      "Epoch 42/60\n",
      "Epoch 31/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 7/60\n",
      "Epoch 48/60\n",
      "Epoch 14/60\n",
      "Epoch 48/60\n",
      "Epoch 31/60\n",
      "Epoch 45/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 49/60\n",
      "Epoch 47/60\n",
      "Epoch 32/60\n",
      "Epoch 43/60\n",
      "Epoch 49/60\n",
      "Epoch 8/60\n",
      "Epoch 49/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 48/60\n",
      "Epoch 15/60\n",
      "Epoch 32/60\n",
      "Epoch 46/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 48/60\n",
      "Epoch 33/60\n",
      "Epoch 9/60\n",
      "Epoch 50/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 16/60\n",
      "Epoch 33/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 10/60\n",
      "Epoch 34/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 17/60\n",
      "Epoch 34/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 11/60\n",
      "Epoch 35/60\n",
      "Epoch 50/60\n",
      "Epoch 52/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 18/60\n",
      "Epoch 51/60\n",
      "Epoch 35/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 12/60\n",
      "Epoch 36/60\n",
      "Epoch 53/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 53/60\n",
      "Epoch 53/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 19/60\n",
      "Epoch 36/60\n",
      "Epoch 50/60\n",
      "Epoch 13/60\n",
      "Epoch 55/60\n",
      "Epoch 56/60\n",
      "Epoch 37/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 51/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 37/60\n",
      "Epoch 51/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 56/60\n",
      "Epoch 57/60\n",
      "Epoch 38/60\n",
      "Epoch 55/60\n",
      "Epoch 55/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 52/60\n",
      "Epoch 38/60\n",
      "Epoch 21/60\n",
      "Epoch 15/60\n",
      "Epoch 57/60\n",
      "Epoch 39/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 54/60\n",
      "Epoch 53/60\n",
      "Epoch 56/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 22/60\n",
      "Epoch 16/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 40/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 40/60\n",
      "Epoch 54/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 52/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 41/60\n",
      "Epoch 55/60\n",
      "Epoch 24/60\n",
      "Epoch 58/60\n",
      "Epoch 18/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 53/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 25/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 19/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 26/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 59/60\n",
      "Epoch 20/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 27/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 21/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 45/60\n",
      "Epoch 28/60\n",
      "Epoch 22/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 29/60\n",
      "Epoch 60/60\n",
      "Epoch 46/60\n",
      "Epoch 23/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 30/60\n",
      "Epoch 24/60\n",
      "Epoch 47/60\n",
      "Epoch 48/60\n",
      "Epoch 59/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 48/60\n",
      "Epoch 49/60\n",
      "Epoch 26/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 60/60\n",
      "Epoch 32/60\n",
      "Epoch 50/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 51/60\n",
      "Epoch 28/60\n",
      "Epoch 51/60\n",
      "Epoch 34/60\n",
      "Epoch 52/60\n",
      "Epoch 29/60\n",
      "Epoch 35/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 53/60\n",
      "Epoch 54/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 32/60\n",
      "Epoch 55/60\n",
      "Epoch 38/60\n",
      "Epoch 56/60\n",
      "Epoch 33/60\n",
      "Epoch 56/60\n",
      "Epoch 39/60\n",
      "Epoch 57/60\n",
      "Epoch 34/60\n",
      "Epoch 40/60\n",
      "Epoch 57/60\n",
      "Epoch 58/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 37/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 43/60\n",
      "Epoch 38/60\n",
      "Epoch 60/60\n",
      "Epoch 44/60\n",
      "Epoch 39/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 46/60\n",
      "Epoch 41/60\n",
      "Epoch 1/60\n",
      "Epoch 47/60\n",
      "Epoch 42/60\n",
      "Epoch 1/60\n",
      "Epoch 43/60\n",
      "Epoch 1/60\n",
      "Epoch 48/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 44/60\n",
      "Epoch 1/60\n",
      "Epoch 49/60\n",
      "Epoch 45/60\n",
      "Epoch 50/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 47/60\n",
      "Epoch 1/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 48/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 2/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 3/60\n",
      "Epoch 51/60\n",
      "Epoch 56/60\n",
      "Epoch 4/60\n",
      "Epoch 52/60\n",
      "Epoch 2/60\n",
      "Epoch 57/60\n",
      "Epoch 5/60\n",
      "Epoch 53/60\n",
      "Epoch 3/60\n",
      "Epoch 58/60\n",
      "Epoch 6/60\n",
      "Epoch 54/60\n",
      "Epoch 4/60\n",
      "Epoch 59/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 55/60\n",
      "Epoch 5/60\n",
      "Epoch 1/60\n",
      "Epoch 60/60\n",
      "Epoch 8/60\n",
      "Epoch 56/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 57/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 58/60\n",
      "Epoch 1/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 59/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 60/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 7/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 13/60\n",
      "Epoch 16/60\n",
      "Epoch 3/60\n",
      "Epoch 11/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 9/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 14/60\n",
      "Epoch 17/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 16/60\n",
      "Epoch 2/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 1/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 20/60\n",
      "Epoch 3/60\n",
      "Epoch 9/60\n",
      "Epoch 10/60\n",
      "Epoch 7/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 13/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 10/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 5/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 12/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 12/60\n",
      "Epoch 15/60\n",
      "Epoch 20/60\n",
      "Epoch 14/60\n",
      "Epoch 23/60\n",
      "Epoch 3/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 13/60\n",
      "Epoch 18/60\n",
      "Epoch 10/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 16/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 21/60\n",
      "Epoch 24/60\n",
      "Epoch 14/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 4/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 8/60\n",
      "Epoch 14/60\n",
      "Epoch 15/60\n",
      "Epoch 25/60\n",
      "Epoch 12/60\n",
      "Epoch 5/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 5/60\n",
      "Epoch 18/60\n",
      "Epoch 15/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 9/60\n",
      "Epoch 17/60\n",
      "Epoch 16/60\n",
      "Epoch 26/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 19/60\n",
      "Epoch 16/60\n",
      "Epoch 10/60\n",
      "Epoch 6/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 18/60\n",
      "Epoch 27/60\n",
      "Epoch 17/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 14/60\n",
      "Epoch 19/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 17/60\n",
      "Epoch 11/60\n",
      "Epoch 7/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 19/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 15/60\n",
      "Epoch 18/60\n",
      "Epoch 8/60\n",
      "Epoch 12/60\n",
      "Epoch 20/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 20/60\n",
      "Epoch 8/60\n",
      "Epoch 27/60\n",
      "Epoch 29/60\n",
      "Epoch 2/60\n",
      "Epoch 24/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 21/60\n",
      "Epoch 16/60\n",
      "Epoch 22/60\n",
      "Epoch 21/60\n",
      "Epoch 9/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 28/60\n",
      "Epoch 30/60\n",
      "Epoch 22/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 3/60\n",
      "Epoch 20/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 10/60\n",
      "Epoch 23/60\n",
      "Epoch 29/60\n",
      "Epoch 21/60\n",
      "Epoch 10/60\n",
      "Epoch 14/60\n",
      "Epoch 18/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 23/60\n",
      "Epoch 4/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 21/60\n",
      "Epoch 11/60\n",
      "Epoch 24/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 15/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 1/60\n",
      "Epoch 24/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 20/60\n",
      "Epoch 25/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 12/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 6/60\n",
      "Epoch 25/60\n",
      "Epoch 26/60\n",
      "Epoch 13/60\n",
      "Epoch 32/60\n",
      "Epoch 21/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 24/60\n",
      "Epoch 13/60\n",
      "Epoch 34/60\n",
      "Epoch 29/60\n",
      "Epoch 24/60\n",
      "Epoch 26/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 14/60\n",
      "Epoch 7/60\n",
      "Epoch 33/60\n",
      "Epoch 26/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 14/60\n",
      "Epoch 35/60\n",
      "Epoch 25/60\n",
      "Epoch 25/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 8/60\n",
      "Epoch 28/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 15/60\n",
      "Epoch 19/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 36/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 28/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 27/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 29/60\n",
      "Epoch 1/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 17/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 33/60\n",
      "Epoch 28/60\n",
      "Epoch 38/60\n",
      "Epoch 11/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 18/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 29/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 12/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 19/60\n",
      "Epoch 31/60\n",
      "Epoch 31/60\n",
      "Epoch 23/60\n",
      "Epoch 28/60\n",
      "Epoch 19/60\n",
      "Epoch 30/60\n",
      "Epoch 30/60\n",
      "Epoch 13/60\n",
      "Epoch 32/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 20/60\n",
      "Epoch 39/60\n",
      "Epoch 24/60\n",
      "Epoch 32/60\n",
      "Epoch 29/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 20/60\n",
      "Epoch 31/60\n",
      "Epoch 14/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 25/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 21/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 2/60\n",
      "Epoch 15/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 35/60\n",
      "Epoch 42/60\n",
      "Epoch 26/60\n",
      "Epoch 41/60\n",
      "Epoch 31/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 34/60\n",
      "Epoch 3/60\n",
      "Epoch 33/60\n",
      "Epoch 16/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 27/60\n",
      "Epoch 33/60\n",
      "Epoch 38/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 17/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 4/60\n",
      "Epoch 34/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 33/60\n",
      "Epoch 36/60\n",
      "Epoch 35/60\n",
      "Epoch 36/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 37/60\n",
      "Epoch 5/60\n",
      "Epoch 25/60\n",
      "Epoch 35/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 29/60\n",
      "Epoch 40/60\n",
      "Epoch 34/60\n",
      "Epoch 37/60\n",
      "Epoch 37/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 25/60\n",
      "Epoch 6/60\n",
      "Epoch 19/60\n",
      "Epoch 26/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 45/60\n",
      "Epoch 41/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 39/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 38/60\n",
      "Epoch 39/60\n",
      "Epoch 26/60\n",
      "Epoch 27/60\n",
      "Epoch 7/60\n",
      "Epoch 20/60\n",
      "Epoch 2/60\n",
      "Epoch 47/60\n",
      "Epoch 37/60\n",
      "Epoch 31/60\n",
      "Epoch 46/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 39/60\n",
      "Epoch 8/60\n",
      "Epoch 40/60\n",
      "Epoch 28/60\n",
      "Epoch 21/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 3/60\n",
      "Epoch 48/60\n",
      "Epoch 32/60\n",
      "Epoch 43/60\n",
      "Epoch 47/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 4/60\n",
      "Epoch 22/60\n",
      "Epoch 39/60\n",
      "Epoch 28/60\n",
      "Epoch 49/60\n",
      "Epoch 33/60\n",
      "Epoch 48/60\n",
      "Epoch 44/60\n",
      "Epoch 38/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 40/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 30/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 29/60\n",
      "Epoch 40/60\n",
      "Epoch 23/60\n",
      "Epoch 49/60\n",
      "Epoch 50/60\n",
      "Epoch 34/60\n",
      "Epoch 45/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 41/60\n",
      "Epoch 42/60\n",
      "Epoch 43/60\n",
      "Epoch 31/60\n",
      "Epoch 11/60\n",
      "Epoch 6/60\n",
      "Epoch 41/60\n",
      "Epoch 30/60\n",
      "Epoch 35/60\n",
      "Epoch 24/60\n",
      "Epoch 50/60\n",
      "Epoch 46/60\n",
      "Epoch 51/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 42/60\n",
      "Epoch 44/60\n",
      "Epoch 43/60\n",
      "Epoch 32/60\n",
      "Epoch 12/60\n",
      "Epoch 44/60\n",
      "Epoch 7/60\n",
      "Epoch 42/60\n",
      "Epoch 47/60\n",
      "Epoch 25/60\n",
      "Epoch 31/60\n",
      "Epoch 51/60\n",
      "Epoch 52/60\n",
      "Epoch 36/60\n",
      "Epoch 44/60\n",
      "Epoch 41/60\n",
      "Epoch 43/60\n",
      "Epoch 45/60\n",
      "Epoch 44/60\n",
      "Epoch 33/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 45/60\n",
      "Epoch 43/60\n",
      "Epoch 48/60\n",
      "Epoch 32/60\n",
      "Epoch 37/60\n",
      "Epoch 52/60\n",
      "Epoch 26/60\n",
      "Epoch 53/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 46/60\n",
      "Epoch 44/60\n",
      "Epoch 45/60\n",
      "Epoch 34/60\n",
      "Epoch 46/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 44/60\n",
      "Epoch 33/60\n",
      "Epoch 53/60\n",
      "Epoch 49/60\n",
      "Epoch 38/60\n",
      "Epoch 27/60\n",
      "Epoch 47/60\n",
      "Epoch 43/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 46/60\n",
      "Epoch 45/60\n",
      "Epoch 35/60\n",
      "Epoch 47/60\n",
      "Epoch 45/60\n",
      "Epoch 10/60\n",
      "Epoch 15/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 39/60\n",
      "Epoch 34/60\n",
      "Epoch 28/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 36/60\n",
      "Epoch 16/60\n",
      "Epoch 48/60\n",
      "Epoch 11/60\n",
      "Epoch 51/60\n",
      "Epoch 35/60\n",
      "Epoch 40/60\n",
      "Epoch 55/60\n",
      "Epoch 29/60\n",
      "Epoch 45/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 37/60\n",
      "Epoch 17/60\n",
      "Epoch 12/60\n",
      "Epoch 49/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 56/60\n",
      "Epoch 30/60\n",
      "Epoch 36/60\n",
      "Epoch 46/60\n",
      "Epoch 49/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 48/60\n",
      "Epoch 38/60\n",
      "Epoch 18/60\n",
      "Epoch 49/60\n",
      "Epoch 48/60\n",
      "Epoch 50/60\n",
      "Epoch 53/60\n",
      "Epoch 13/60\n",
      "Epoch 57/60\n",
      "Epoch 42/60\n",
      "Epoch 31/60\n",
      "Epoch 50/60\n",
      "Epoch 47/60\n",
      "Epoch 37/60\n",
      "Epoch 51/60\n",
      "Epoch 39/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 19/60\n",
      "Epoch 49/60\n",
      "Epoch 54/60\n",
      "Epoch 51/60\n",
      "Epoch 49/60\n",
      "Epoch 14/60\n",
      "Epoch 58/60\n",
      "Epoch 32/60\n",
      "Epoch 48/60\n",
      "Epoch 43/60\n",
      "Epoch 51/60\n",
      "Epoch 38/60\n",
      "Epoch 52/60\n",
      "Epoch 20/60\n",
      "Epoch 51/60\n",
      "Epoch 50/60\n",
      "Epoch 40/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 50/60\n",
      "Epoch 15/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 49/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 44/60\n",
      "Epoch 52/60\n",
      "Epoch 53/60\n",
      "Epoch 21/60\n",
      "Epoch 52/60\n",
      "Epoch 41/60\n",
      "Epoch 56/60\n",
      "Epoch 51/60\n",
      "Epoch 51/60\n",
      "Epoch 53/60\n",
      "Epoch 16/60\n",
      "Epoch 60/60\n",
      "Epoch 60/60\n",
      "Epoch 34/60\n",
      "Epoch 53/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 22/60\n",
      "Epoch 42/60\n",
      "Epoch 53/60\n",
      "Epoch 57/60\n",
      "Epoch 54/60\n",
      "Epoch 52/60\n",
      "Epoch 52/60\n",
      "Epoch 17/60\n",
      "Epoch 46/60\n",
      "Epoch 54/60\n",
      "Epoch 35/60\n",
      "Epoch 41/60\n",
      "Epoch 23/60\n",
      "Epoch 51/60\n",
      "Epoch 55/60\n",
      "Epoch 54/60\n",
      "Epoch 43/60\n",
      "Epoch 53/60\n",
      "Epoch 58/60\n",
      "Epoch 55/60\n",
      "Epoch 18/60\n",
      "Epoch 53/60\n",
      "Epoch 47/60\n",
      "Epoch 36/60\n",
      "Epoch 55/60\n",
      "Epoch 24/60\n",
      "Epoch 42/60\n",
      "Epoch 52/60\n",
      "Epoch 56/60\n",
      "Epoch 44/60\n",
      "Epoch 56/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 54/60\n",
      "Epoch 19/60\n",
      "Epoch 54/60\n",
      "Epoch 48/60\n",
      "Epoch 37/60\n",
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 43/60\n",
      "Epoch 25/60\n",
      "Epoch 57/60\n",
      "Epoch 57/60\n",
      "Epoch 56/60\n",
      "Epoch 45/60\n",
      "Epoch 60/60\n",
      "Epoch 55/60\n",
      "Epoch 20/60\n",
      "Epoch 49/60\n",
      "Epoch 55/60\n",
      "Epoch 38/60\n",
      "Epoch 57/60\n",
      "Epoch 44/60\n",
      "Epoch 54/60\n",
      "Epoch 26/60\n",
      "Epoch 58/60\n",
      "Epoch 58/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 56/60\n",
      "Epoch 58/60\n",
      "Epoch 21/60\n",
      "Epoch 50/60\n",
      "Epoch 45/60\n",
      "Epoch 27/60\n",
      "Epoch 56/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 55/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 59/60\n",
      "Epoch 47/60\n",
      "Epoch 28/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 51/60\n",
      "Epoch 22/60\n",
      "Epoch 57/60\n",
      "Epoch 40/60\n",
      "Epoch 56/60\n",
      "Epoch 60/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 48/60\n",
      "Epoch 60/60\n",
      "Epoch 29/60\n",
      "Epoch 52/60\n",
      "Epoch 58/60\n",
      "Epoch 23/60\n",
      "Epoch 47/60\n",
      "Epoch 57/60\n",
      "Epoch 41/60\n",
      "Epoch 58/60\n",
      "Epoch 60/60\n",
      "Epoch 49/60\n",
      "Epoch 30/60\n",
      "Epoch 53/60\n",
      "Epoch 24/60\n",
      "Epoch 59/60\n",
      "Epoch 58/60\n",
      "Epoch 48/60\n",
      "Epoch 42/60\n",
      "Epoch 59/60\n",
      "Epoch 31/60\n",
      "Epoch 50/60\n",
      "Epoch 54/60\n",
      "Epoch 59/60\n",
      "Epoch 60/60\n",
      "Epoch 49/60\n",
      "Epoch 25/60\n",
      "Epoch 43/60\n",
      "Epoch 60/60\n",
      "Epoch 32/60\n",
      "Epoch 51/60\n",
      "Epoch 60/60\n",
      "Epoch 50/60\n",
      "Epoch 55/60\n",
      "Epoch 26/60\n",
      "Epoch 44/60\n",
      "Epoch 33/60\n",
      "Epoch 52/60\n",
      "Epoch 51/60\n",
      "Epoch 27/60\n"
     ]
    },
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "Epoch 56/60\n",
      "Epoch 53/60\n",
      "Epoch 34/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 28/60\n",
      "Epoch 54/60\n",
      "Epoch 57/60\n",
      "Epoch 46/60\n",
      "Epoch 35/60\n",
      "Epoch 53/60\n",
      "Epoch 29/60\n",
      "Epoch 55/60\n",
      "Epoch 58/60\n",
      "Epoch 30/60\n",
      "Epoch 47/60\n",
      "Epoch 36/60\n",
      "Epoch 54/60\n",
      "Epoch 56/60\n",
      "Epoch 59/60\n",
      "Epoch 31/60\n",
      "Epoch 37/60\n",
      "Epoch 48/60\n",
      "Epoch 57/60\n",
      "Epoch 55/60\n",
      "Epoch 32/60\n",
      "Epoch 60/60\n",
      "Epoch 38/60\n",
      "Epoch 58/60\n",
      "Epoch 49/60\n",
      "Epoch 56/60\n",
      "Epoch 33/60\n",
      "Epoch 39/60\n",
      "Epoch 59/60\n",
      "Epoch 50/60\n",
      "Epoch 57/60\n",
      "Epoch 34/60\n",
      "Epoch 60/60\n",
      "Epoch 40/60\n",
      "Epoch 51/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 35/60\n",
      "Epoch 52/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 36/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 37/60\n",
      "Epoch 54/60\n",
      "Epoch 44/60\n",
      "Epoch 55/60\n",
      "Epoch 38/60\n",
      "Epoch 45/60\n",
      "Epoch 56/60\n",
      "Epoch 39/60\n",
      "Epoch 46/60\n",
      "Epoch 57/60\n",
      "Epoch 40/60\n",
      "Epoch 47/60\n",
      "Epoch 58/60\n",
      "Epoch 41/60\n",
      "Epoch 48/60\n",
      "Epoch 59/60\n",
      "Epoch 42/60\n",
      "Epoch 1/60\n",
      "Epoch 49/60\n",
      "Epoch 60/60\n",
      "Epoch 43/60\n",
      "Epoch 50/60\n",
      "Epoch 44/60\n",
      "Epoch 51/60\n",
      "Epoch 45/60\n",
      "Epoch 52/60\n",
      "Epoch 46/60\n",
      "Epoch 53/60\n",
      "Epoch 1/60\n",
      "Epoch 47/60\n",
      "Epoch 54/60\n",
      "Epoch 55/60\n",
      "Epoch 48/60\n",
      "Epoch 56/60\n",
      "Epoch 49/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 50/60\n",
      "Epoch 58/60\n",
      "Epoch 51/60\n",
      "Epoch 59/60\n",
      "Epoch 52/60\n",
      "Epoch 1/60\n",
      "Epoch 53/60\n",
      "Epoch 60/60\n",
      "Epoch 54/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 55/60\n",
      "Epoch 1/60\n",
      "Epoch 56/60\n",
      "Epoch 1/60\n",
      "Epoch 1/60\n",
      "Epoch 57/60\n",
      "Epoch 2/60\n",
      "Epoch 2/60\n",
      "Epoch 58/60\n",
      "Epoch 3/60\n",
      "Epoch 3/60\n",
      "Epoch 59/60\n",
      "Epoch 4/60\n",
      "Epoch 4/60\n",
      "Epoch 60/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 6/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 1/60\n",
      "Epoch 7/60\n",
      "Epoch 4/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 1/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 6/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 3/60\n",
      "Epoch 5/60\n",
      "Epoch 12/60\n",
      "Epoch 8/60\n",
      "Epoch 2/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 2/60\n",
      "Epoch 3/60\n",
      "Epoch 4/60\n",
      "Epoch 7/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 5/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 3/60\n",
      "Epoch 2/60\n",
      "Epoch 8/60\n",
      "Epoch 15/60\n",
      "Epoch 12/60\n",
      "Epoch 6/60\n",
      "Epoch 4/60\n",
      "Epoch 16/60\n",
      "Epoch 3/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 5/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 6/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 1/60\n",
      "Epoch 6/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 2/60\n",
      "Epoch 1/60\n",
      "Epoch 18/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 6/60\n",
      "Epoch 3/60\n",
      "Epoch 15/60\n",
      "Epoch 10/60\n",
      "Epoch 8/60\n",
      "Epoch 8/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 19/60\n",
      "Epoch 8/60\n",
      "Epoch 7/60\n",
      "Epoch 2/60\n",
      "Epoch 9/60\n",
      "Epoch 4/60\n",
      "Epoch 16/60\n",
      "Epoch 11/60\n",
      "Epoch 9/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 11/60\n",
      "Epoch 13/60\n",
      "Epoch 9/60\n",
      "Epoch 3/60\n",
      "Epoch 8/60\n",
      "Epoch 5/60\n",
      "Epoch 10/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 14/60\n",
      "Epoch 10/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 4/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 11/60\n",
      "Epoch 15/60\n",
      "Epoch 22/60\n",
      "Epoch 3/60\n",
      "Epoch 10/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 14/60\n",
      "Epoch 12/60\n",
      "Epoch 12/60\n",
      "Epoch 7/60\n",
      "Epoch 12/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 19/60\n",
      "Epoch 4/60\n",
      "Epoch 11/60\n",
      "Epoch 23/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 13/60\n",
      "Epoch 8/60\n",
      "Epoch 13/60\n",
      "Epoch 24/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 24/60\n",
      "Epoch 5/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 17/60\n",
      "Epoch 14/60\n",
      "Epoch 7/60\n",
      "Epoch 14/60\n",
      "Epoch 9/60\n",
      "Epoch 14/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 18/60\n",
      "Epoch 25/60\n",
      "Epoch 17/60\n",
      "Epoch 25/60\n",
      "Epoch 6/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 15/60\n",
      "Epoch 8/60\n",
      "Epoch 10/60\n",
      "Epoch 22/60\n",
      "Epoch 18/60\n",
      "Epoch 19/60\n",
      "Epoch 26/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 14/60\n",
      "Epoch 26/60\n",
      "Epoch 16/60\n",
      "Epoch 16/60\n",
      "Epoch 9/60\n",
      "Epoch 7/60\n",
      "Epoch 11/60\n",
      "Epoch 19/60\n",
      "Epoch 20/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 17/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 15/60\n",
      "Epoch 27/60\n",
      "Epoch 8/60\n",
      "Epoch 17/60\n",
      "Epoch 20/60\n",
      "Epoch 12/60\n",
      "Epoch 10/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 28/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 28/60\n",
      "Epoch 9/60\n",
      "Epoch 2/60\n",
      "Epoch 21/60\n",
      "Epoch 18/60\n",
      "Epoch 13/60\n",
      "Epoch 2/60\n",
      "Epoch 11/60\n",
      "Epoch 25/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 19/60\n",
      "Epoch 21/60\n",
      "Epoch 17/60\n",
      "Epoch 19/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 19/60\n",
      "Epoch 10/60\n",
      "Epoch 3/60\n",
      "Epoch 12/60\n",
      "Epoch 14/60\n",
      "Epoch 3/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 20/60\n",
      "Epoch 18/60\n",
      "Epoch 22/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 20/60\n",
      "Epoch 20/60\n",
      "Epoch 11/60\n",
      "Epoch 4/60\n",
      "Epoch 13/60\n",
      "Epoch 15/60\n",
      "Epoch 4/60\n",
      "Epoch 27/60\n",
      "Epoch 21/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 23/60\n",
      "Epoch 19/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 21/60\n",
      "Epoch 5/60\n",
      "Epoch 14/60\n",
      "Epoch 16/60\n",
      "Epoch 5/60\n",
      "Epoch 22/60\n",
      "Epoch 25/60\n",
      "Epoch 28/60\n",
      "Epoch 32/60\n",
      "Epoch 20/60\n",
      "Epoch 24/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 22/60\n",
      "Epoch 22/60\n",
      "Epoch 13/60\n",
      "Epoch 17/60\n",
      "Epoch 6/60\n",
      "Epoch 23/60\n",
      "Epoch 15/60\n",
      "Epoch 6/60\n",
      "Epoch 26/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 21/60\n",
      "Epoch 26/60\n",
      "Epoch 25/60\n",
      "Epoch 23/60\n",
      "Epoch 33/60\n",
      "Epoch 23/60\n",
      "Epoch 14/60\n",
      "Epoch 24/60\n",
      "Epoch 18/60\n",
      "Epoch 16/60\n",
      "Epoch 7/60\n",
      "Epoch 7/60\n",
      "Epoch 30/60\n",
      "Epoch 27/60\n",
      "Epoch 34/60\n",
      "Epoch 22/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 24/60\n",
      "Epoch 24/60\n",
      "Epoch 34/60\n",
      "Epoch 15/60\n",
      "Epoch 25/60\n",
      "Epoch 19/60\n",
      "Epoch 17/60\n",
      "Epoch 8/60\n",
      "Epoch 1/60\n",
      "Epoch 8/60\n",
      "Epoch 31/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 23/60\n",
      "Epoch 35/60\n",
      "Epoch 28/60\n",
      "Epoch 25/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 16/60\n",
      "Epoch 18/60\n",
      "Epoch 26/60\n",
      "Epoch 20/60\n",
      "Epoch 9/60\n",
      "Epoch 9/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 32/60\n",
      "Epoch 24/60\n",
      "Epoch 36/60\n",
      "Epoch 29/60\n",
      "Epoch 19/60\n",
      "Epoch 27/60\n",
      "Epoch 26/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 10/60\n",
      "Epoch 17/60\n",
      "Epoch 10/60\n",
      "Epoch 21/60\n",
      "Epoch 37/60\n",
      "Epoch 30/60\n",
      "Epoch 25/60\n",
      "Epoch 33/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 29/60\n",
      "Epoch 27/60\n",
      "Epoch 27/60\n",
      "Epoch 20/60\n",
      "Epoch 28/60\n",
      "Epoch 18/60\n",
      "Epoch 11/60\n",
      "Epoch 11/60\n",
      "Epoch 22/60\n",
      "Epoch 38/60\n",
      "Epoch 34/60\n",
      "Epoch 31/60\n",
      "Epoch 26/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 29/60\n",
      "Epoch 28/60\n",
      "Epoch 21/60\n",
      "Epoch 12/60\n",
      "Epoch 28/60\n",
      "Epoch 19/60\n",
      "Epoch 12/60\n",
      "Epoch 39/60\n",
      "Epoch 23/60\n",
      "Epoch 27/60\n",
      "Epoch 35/60\n",
      "Epoch 32/60\n",
      "Epoch 39/60\n",
      "Epoch 32/60\n",
      "Epoch 31/60\n",
      "Epoch 30/60\n",
      "Epoch 13/60\n",
      "Epoch 29/60\n",
      "Epoch 22/60\n",
      "Epoch 29/60\n",
      "Epoch 20/60\n",
      "Epoch 13/60\n",
      "Epoch 40/60\n",
      "Epoch 24/60\n",
      "Epoch 28/60\n",
      "Epoch 36/60\n",
      "Epoch 33/60\n",
      "Epoch 40/60\n",
      "Epoch 31/60\n",
      "Epoch 33/60\n",
      "Epoch 32/60\n",
      "Epoch 14/60\n",
      "Epoch 30/60\n",
      "Epoch 23/60\n",
      "Epoch 30/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 14/60\n",
      "Epoch 25/60\n",
      "Epoch 37/60\n",
      "Epoch 29/60\n",
      "Epoch 41/60\n",
      "Epoch 34/60\n",
      "Epoch 34/60\n",
      "Epoch 32/60\n",
      "Epoch 33/60\n",
      "Epoch 15/60\n",
      "Epoch 31/60\n",
      "Epoch 24/60\n",
      "Epoch 31/60\n",
      "Epoch 22/60\n",
      "Epoch 15/60\n",
      "Epoch 42/60\n",
      "Epoch 26/60\n",
      "Epoch 30/60\n",
      "Epoch 38/60\n",
      "Epoch 16/60\n",
      "Epoch 42/60\n",
      "Epoch 35/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 34/60\n",
      "Epoch 25/60\n",
      "Epoch 32/60\n",
      "Epoch 32/60\n",
      "Epoch 23/60\n",
      "Epoch 16/60\n",
      "Epoch 27/60\n",
      "Epoch 43/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 43/60\n",
      "Epoch 36/60\n",
      "Epoch 36/60\n",
      "Epoch 17/60\n",
      "Epoch 34/60\n",
      "Epoch 26/60\n",
      "Epoch 33/60\n",
      "Epoch 35/60\n",
      "Epoch 33/60\n",
      "Epoch 24/60\n",
      "Epoch 17/60\n",
      "Epoch 28/60\n",
      "Epoch 37/60\n",
      "Epoch 32/60\n",
      "Epoch 44/60\n",
      "Epoch 44/60\n",
      "Epoch 18/60\n",
      "Epoch 40/60\n",
      "Epoch 37/60\n",
      "Epoch 35/60\n",
      "Epoch 34/60\n",
      "Epoch 36/60\n",
      "Epoch 34/60\n",
      "Epoch 27/60\n",
      "Epoch 25/60\n",
      "Epoch 2/60\n",
      "Epoch 18/60\n",
      "Epoch 29/60\n",
      "Epoch 33/60\n",
      "Epoch 45/60\n",
      "Epoch 38/60\n",
      "Epoch 45/60\n",
      "Epoch 19/60\n",
      "Epoch 36/60\n",
      "Epoch 41/60\n",
      "Epoch 38/60\n",
      "Epoch 35/60\n",
      "Epoch 37/60\n",
      "Epoch 28/60\n",
      "Epoch 26/60\n",
      "Epoch 35/60\n",
      "Epoch 19/60\n",
      "Epoch 3/60\n",
      "Epoch 34/60\n",
      "Epoch 30/60\n",
      "Epoch 46/60\n",
      "Epoch 46/60\n",
      "Epoch 39/60\n",
      "Epoch 37/60\n",
      "Epoch 42/60\n",
      "Epoch 39/60\n",
      "Epoch 20/60\n",
      "Epoch 36/60\n",
      "Epoch 38/60\n",
      "Epoch 29/60\n",
      "Epoch 36/60\n",
      "Epoch 27/60\n",
      "Epoch 20/60\n",
      "Epoch 4/60\n",
      "Epoch 40/60\n",
      "Epoch 35/60\n",
      "Epoch 47/60\n",
      "Epoch 47/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 43/60\n",
      "Epoch 40/60\n",
      "Epoch 21/60\n",
      "Epoch 37/60\n",
      "Epoch 39/60\n",
      "Epoch 30/60\n",
      "Epoch 37/60\n",
      "Epoch 28/60\n",
      "Epoch 5/60\n",
      "Epoch 21/60\n",
      "Epoch 41/60\n",
      "Epoch 36/60\n",
      "Epoch 48/60\n",
      "Epoch 48/60\n",
      "Epoch 32/60\n",
      "Epoch 41/60\n",
      "Epoch 44/60\n",
      "Epoch 22/60\n",
      "Epoch 39/60\n",
      "Epoch 31/60\n",
      "Epoch 38/60\n",
      "Epoch 40/60\n",
      "Epoch 6/60\n",
      "Epoch 29/60\n",
      "Epoch 42/60\n",
      "Epoch 22/60\n",
      "Epoch 38/60\n",
      "Epoch 37/60\n",
      "Epoch 49/60\n",
      "Epoch 33/60\n",
      "Epoch 49/60\n",
      "Epoch 23/60\n",
      "Epoch 42/60\n",
      "Epoch 45/60\n",
      "Epoch 40/60\n"
     ]
    },
    {
     "ename": "KeyboardInterrupt",
     "evalue": "",
     "output_type": "error",
     "traceback": [
      "\u001b[0;31m---------------------------------------------------------------------------\u001b[0m",
      "\u001b[0;31mKeyboardInterrupt\u001b[0m                         Traceback (most recent call last)",
      "\u001b[0;32m<ipython-input-5-dc5d709bb2df>\u001b[0m in \u001b[0;36m<module>\u001b[0;34m()\u001b[0m\n\u001b[1;32m     46\u001b[0m \u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m     47\u001b[0m \u001b[0mgrid\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mGridSearchCV\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mestimator\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0mmodel\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mparam_grid\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0mparam_grid\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mn_jobs\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0;34m-\u001b[0m\u001b[0;36m1\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0;32m---> 48\u001b[0;31m \u001b[0mgrid_result\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mgrid\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mfit\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mtrainX\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mtrainY\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m     49\u001b[0m \u001b[0;31m# summarize results\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m     50\u001b[0m \u001b[0;32mprint\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0;34m\"Best: %f using %s\"\u001b[0m \u001b[0;34m%\u001b[0m \u001b[0;34m(\u001b[0m\u001b[0mgrid_result\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mbest_score_\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mgrid_result\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mbest_params_\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;32m/home/rdit/development/ts-predict/venv/local/lib/python2.7/site-packages/sklearn/model_selection/_search.pyc\u001b[0m in \u001b[0;36mfit\u001b[0;34m(self, X, y, groups)\u001b[0m\n\u001b[1;32m    943\u001b[0m             \u001b[0mtrain\u001b[0m\u001b[0;34m/\u001b[0m\u001b[0mtest\u001b[0m \u001b[0mset\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    944\u001b[0m         \"\"\"\n\u001b[0;32m--> 945\u001b[0;31m         \u001b[0;32mreturn\u001b[0m \u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0m_fit\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mX\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0my\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mgroups\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mParameterGrid\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mparam_grid\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m    946\u001b[0m \u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    947\u001b[0m \u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;32m/home/rdit/development/ts-predict/venv/local/lib/python2.7/site-packages/sklearn/model_selection/_search.pyc\u001b[0m in \u001b[0;36m_fit\u001b[0;34m(self, X, y, groups, parameter_iterable)\u001b[0m\n\u001b[1;32m    562\u001b[0m                                   \u001b[0mreturn_times\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0mTrue\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0mreturn_parameters\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0mTrue\u001b[0m\u001b[0;34m,\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    563\u001b[0m                                   error_score=self.error_score)\n\u001b[0;32m--> 564\u001b[0;31m           \u001b[0;32mfor\u001b[0m \u001b[0mparameters\u001b[0m \u001b[0;32min\u001b[0m \u001b[0mparameter_iterable\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m    565\u001b[0m           for train, test in cv_iter)\n\u001b[1;32m    566\u001b[0m \u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;32m/home/rdit/development/ts-predict/venv/local/lib/python2.7/site-packages/sklearn/externals/joblib/parallel.pyc\u001b[0m in \u001b[0;36m__call__\u001b[0;34m(self, iterable)\u001b[0m\n\u001b[1;32m    766\u001b[0m                 \u001b[0;31m# consumption.\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    767\u001b[0m                 \u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0m_iterating\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mFalse\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0;32m--> 768\u001b[0;31m             \u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mretrieve\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m    769\u001b[0m             \u001b[0;31m# Make sure that we get a last message telling us we are done\u001b[0m\u001b[0;34m\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    770\u001b[0m             \u001b[0melapsed_time\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mtime\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mtime\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0;34m)\u001b[0m \u001b[0;34m-\u001b[0m \u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0m_start_time\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;32m/home/rdit/development/ts-predict/venv/local/lib/python2.7/site-packages/sklearn/externals/joblib/parallel.pyc\u001b[0m in \u001b[0;36mretrieve\u001b[0;34m(self)\u001b[0m\n\u001b[1;32m    717\u001b[0m                     \u001b[0mensure_ready\u001b[0m \u001b[0;34m=\u001b[0m \u001b[0mself\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0m_managed_backend\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    718\u001b[0m                     \u001b[0mbackend\u001b[0m\u001b[0;34m.\u001b[0m\u001b[0mabort_everything\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mensure_ready\u001b[0m\u001b[0;34m=\u001b[0m\u001b[0mensure_ready\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0;32m--> 719\u001b[0;31m                 \u001b[0;32mraise\u001b[0m \u001b[0mexception\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n\u001b[0m\u001b[1;32m    720\u001b[0m \u001b[0;34m\u001b[0m\u001b[0m\n\u001b[1;32m    721\u001b[0m     \u001b[0;32mdef\u001b[0m \u001b[0m__call__\u001b[0m\u001b[0;34m(\u001b[0m\u001b[0mself\u001b[0m\u001b[0;34m,\u001b[0m \u001b[0miterable\u001b[0m\u001b[0;34m)\u001b[0m\u001b[0;34m:\u001b[0m\u001b[0;34m\u001b[0m\u001b[0m\n",
      "\u001b[0;31mKeyboardInterrupt\u001b[0m: "
     ]
    }
   ],
   "source": [
    "\n",
    "# creates a model but does not compile the model\n",
    "def create_model(weight_constraint=1, \n",
    "                 recurrent_dropout=0.0, \n",
    "                 dropout_rate=0.0):\n",
    "    init_mode = 'normal'\n",
    "    learning_rate = 0.0001 \n",
    "    decay = 0\n",
    "    \n",
    "    model = Sequential()\n",
    "    model.add(Dropout(dropout_rate, input_shape=(1, look_back)))\n",
    "    lstm = LSTM(256, kernel_initializer=init_mode, recurrent_dropout=recurrent_dropout)\n",
    "    model.add(lstm)\n",
    "    model.add(Dropout(dropout_rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(dropout_rate))\n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dropout(dropout_rate))    \n",
    "    model.add(Dense(128, kernel_initializer=init_mode, kernel_constraint=maxnorm(weight_constraint) ))\n",
    "    model.add(Dense(look_forward))\n",
    "    model.compile(loss=top_heavy_loss, optimizer=RMSprop(lr=learning_rate, rho=0.9, epsilon=1e-08, decay=decay), metrics=['accuracy'])\n",
    "    return model\n",
    "\n",
    "# creates the model\n",
    "model = KerasClassifier(build_fn=create_model, epochs=60, batch_size=60, verbose=3)\n",
    "\n",
    "# Defines the parameters to be grid searched\n",
    "batch_size = [1, 10, 20, 30, 40, 50, 60, 70, 80]\n",
    "epochs = [1, 10, 20, 30, 40, 50, 60, 70, 80, 90, 100]\n",
    "init_mode = ['uniform', 'lecun_uniform', 'normal', 'glorot_normal', 'glorot_uniform', 'he_normal', 'he_uniform']\n",
    "learning_rate = [0.001, 0.0005, 0.0003, 0.0002, 0.00015, 0.0001, 0.00005]\n",
    "decay = [0.0, 0.00001, 0.00005, 0.0001, 0.0005, 0.001, 0.005]\n",
    "weight_constraint = [1, 2, 3, 4, 5]\n",
    "recurrent_dropout  = [0.05, 0.1, 0.15, 0.2, 0.25, 0.3, 0.35, 0.4, 0.45]\n",
    "dropout_rate  = [0.05, 0.1, 0.15, 0.2, 0.25, 0.3, 0.35, 0.4, 0.45, 0.5]\n",
    "\n",
    "def fun ():\n",
    "    param_grid = dict(#batch_size        = batch_size, \n",
    "                      #epochs            = epochs, \n",
    "                      #init_mode         = init_mode,\n",
    "                      #learning_rate     = learning_rate,\n",
    "                      #decay             = decay,  \n",
    "                      weight_constraint = weight_constraint,\n",
    "                      recurrent_dropout = recurrent_dropout,\n",
    "                      dropout_rate      = dropout_rate)\n",
    "\n",
    "    grid = GridSearchCV(estimator=model, param_grid=param_grid, n_jobs=-1)\n",
    "    grid_result = grid.fit(trainX, trainY)\n",
    "    # summarize results\n",
    "    print(\"Best: %f using %s\" % (grid_result.best_score_, grid_result.best_params_))\n",
    "    means = grid_result.cv_results_['mean_test_score']\n",
    "    stds = grid_result.cv_results_['std_test_score']\n",
    "    params = grid_result.cv_results_['params']\n",
    "    for mean, stdev, param in zip(means, stds, params):\n",
    "        print(\"%f (%f) with: %r\" % (mean, stdev, param))"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": null,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": []
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 2",
   "language": "python",
   "name": "python2"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 2
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython2",
   "version": "2.7.12"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 2
}