Original link: https://blog.csdn.net/weixin_40571937/article/details/103518331
Reference source: https://blog.csdn.net/mr_corder/article/details/82492981
I The concept of reinforcement learning (reinforcement learning):
Machine learning algorithms can be roughly divided into the following three types:
Supervised learning (e.g. regression, classification)
Dimension reduction (such as unsupervised clustering)
Reinforcement learning
So what is reinforcement learning?
Reinforcement learning (RL), also known as reinforcement learning, is one of the main methods in the field of machine learning and intelligent control in recent years.
Definition: Reinforcement learning is learning what to do ----how to map situations to actions ---- so as to maximize a numerical reward signal
In other words, reinforcement learning focuses on how agents (that is, agents) take a series of behaviors in the environment to obtain the maximum cumulative return.
The learning mechanism of reinforcement learning shows that it constantly interacts with the environment (which can be regarded as the game between the decision-making system [the system taking action] and the environment). Obtaining the optimal strategy by trial and error learning is the key technology to make the decision-making ability continuously obtain benefits.
Reinforcement learning interacts with the environment through trial and error mechanism, and learns the optimal strategy by maximizing the accumulation of reward (R). The simplest understanding is to constantly try in the process of training, punish if it is wrong and reward if it is right, so as to obtain the best decision-making in various state environments, such as the process of cycling and melon planting.
Through reinforcement learning, an agent should know what behavior to take in what state. RL is the learning of mapping from environment state to action, which is called strategy.
Q-learning
The problem to be solved is: as shown in the figure above, there are five rooms marked 0-4 respectively. Outside the room, it can be regarded as a large room marked 5. Now the intelligent program Agent is randomly thrown into any one of the five rooms 0-4. The goal is to let it find the way to leave the room (i.e. reach room 5)
Reward 100 points for actions that can be moved directly to room 5, i.e. red lines from Figure 1.2, 4 to 5, 1 to 5, and 5 to 5.
The action of moving in several other movable rooms will be rewarded with 0 point.
As shown below:
Suppose the current location of Agent is in room 2, and the position where the Agent is located is "status", that is, the current status of Agent is 2. The current Agent can only move to room 3. When it moves to room 3, the status will change to 3, and the reward is 0 points.
The movement of Agent according to the arrow is a "behavior".
The rewards obtained according to status and behavior can form the following matrix. R represents the current reward.
The Q-matrix indicates that the Agent will score itself after doing some behavior in various states, that is, to digitize the experience. Since the Agent has not acted yet, it is all 0 here.
In the Q-Learning algorithm, the formula for calculating the experience score is as follows:
Q(state, action) = Q(state, action) + α(R(state, action) + Gamma * Max[Q(next state, all actions)] - Q(state, action))
When α When the value of is 1, the formula is as follows:
Q(state, action) = R(state, action) + Gamma * Max[Q(next state, all actions)]
State: indicates the current state of the Agent.
action: indicates the behavior of the Agent in the current state.
next state: indicates the new state reached by the Agent after executing the action behavior in the state.
Q(state, action): refers to the experience learned by the Agent after executing the action behavior in the state, that is, the experience score.
R(state, action): indicates the instant reward score obtained by the Agent after performing the action action in the state. (note that it is an immediate reward, not experience)
Max [Q (next state, all actions)]: indicates the experience score of the most valuable behavior in the Agent's self experience in the next state.
Gamma: γ， Indicates the discount rate, that is, the importance of future experience in executing action s for the current state.
Agents learn through experience. The Agent will explore from one state to another until it reaches the target state. We call each such exploration an episode.
Each scenario is the process of Agent from the initial state to the target state. Every time the Agent reaches the target state, the program will enter the next scene.
Initialize the Q matrix and set the initial value to 0.
Set parameters γ And score matrix R.
Loop through the scene (episode):
(1) Randomly initialize a state s.
(2) If the target state is not reached, cycle through the following steps:
(3) In the current state s, randomly select a behavior a.
(4) Execute action a to get the next state s'.
Use the formula Q(state, action) = R(state, action) + Gamma * Max[Q(next state, all actions)] to calculate Q(state, action).
Update the current status s to s'.
Set the current state s to 1, γ = 0.8 and score matrix R, and initialize Q matrix:
Since you can walk to room 3 and room 5 in room 1, now choose one randomly and choose room 5.
Now calculate the experience score Q(1, 5) obtained by the Agent when walking from room 1 to room 5 according to the formula:
1. When the Agent moves from room 1 to room 5, it gets a reward score of 100 (i.e. R(1, 5) = 100).
2. After the Agent moves to room 5, it can perform three actions: move to room 1 (0 points), move to room 4 (0 points) and move to room 5 (0 points). Note that the empirical score is calculated here, that is, the Q matrix, not the R matrix!
So, Q(1, 5) = 100 + 0.8 * Max[Q(5, 1), Q(5, 4), Q(5, 5)] = 100 + 0.8 * Max{0, 0, 0} = 100
(target state 5 has been reached, so enter the next scene episode)
Enter the next episode in the next iteration:
Choose an initial state randomly, and set s = 3 here. Since room 3 can go to room 1, room 2 and room 4, now choose one randomly and choose room 1.
The steps are the same as above: Q(3, 1) = 0 + 0.8 * Max[Q(1, 3), Q(1, 5)] = 0 + 0.8 * Max{0, 100} = 0 + 0.8 * 100 = 80
Namely:
The code is as follows:
#include "stdio.h"
#include "stdlib.h"
#include "time.h"
//Number of actions
#define ACTIONS 6
//Number of explorations
#define episode 1000
//Target status, i.e. move to room 5.
#define target_state 5
//γ， The value of the discount rate is between 0 and 1.
#define gamma 0.8
int max(int* p, int m)
{
int i, max = *p;
for (i = 1; i < m; i++)
{
if (*(p + i) > max)
max = *(p + i);
}
return max;
}
int main()
{
// Empirical matrix.
int q[6][6] = { 0 };
int r[6][6] = {
{ -1, -1, -1, -1, 0, -1 },
{ -1, -1, -1, 0, -1, 100.0 },
{ -1, -1, -1, 0, -1, -1 },
{ -1, 0, 0, -1, 0, -1 },
{ 0, -1, -1, 0, -1, 100.0 },
{ -1, 0, -1, -1, 0, 100.0 }
};
int start_room;
int current_state;
int current_action;
int current_action_point;
int next_state;
int step;
int next_state_max_q;
// Number of searches.
for (int i = 0; i < episode; i++)
{
srand(time(NULL));
// The state of the initial location of the Agent.
start_room = rand() % 5;
// Current status.
current_state = start_room;
while (current_state != target_state)
{
//Randomly select the next executable action in the current state.
current_action = rand() % 6;
// Score after performing the action.
current_action_point = r[current_state][current_action];
if (current_action_point < 0)
{
q[current_state][current_action] = current_action_point;
}
else
{
// Get the next status.
next_state = current_action;
// Get the experience score of the most valuable action in the next state, in self experience, that is, the Q matrix.
next_state_max_q = max(&q[next_state][0], 6);
// Total experience score of current action = score of current action+ γ X the maximum experience score of the next state after performing the action
// That is: accumulated experience = immediate reward after action execution + next status X discount rate according to the most valuable choice in the existing learning experience
q[current_state][current_action] = current_action_point + gamma * next_state_max_q;
current_state = next_state;
}
}
printf("Q The update process of value table is as follows:\n");
for (int i = 0; i < 6; i++)
{
for (int j = 0; j < 6; j++)
{
printf("%d,", q[i][j]);
}
printf("\n");
}
}
printf("\n Final Q The value table is:\n");
for (int i = 0; i < 6; i++)
{
for (int j = 0; j < 6; j++)
{
printf("%d,", q[i][j]);
}
printf("\n");
}
start_room = rand() % 5;
current_state = start_room;
step = 0;
// Here is the test. Select the action according to the trained Q value.
while (current_state != target_state)
{
// This is equivalent to NP in python Argmax() function, that is, when NP When f(x) in argmax (f(x)) takes the maximum value, the value of X is output.
// Implemented with two for loops.
int m = -100;
for (int i = 0; i < 6; ++i)
{
if (m < q[current_state][i])
{//Find maximum value
m = q[current_state][i];
}
}
for (int j = 0; j < 6; j++)
{
if (m == q[current_state][j])
next_state = j;
}
printf("\n Agent from %d Room moved to %d Room No\n", current_state, next_state);
current_state = next_state;
step += 1;
}
printf("\n Agent stay %d Room number is moving %d Step to the target room\n", start_room, step);
system("pause");
return 0;
}
The operation effect is shown in the figure:
GitHub link:
https://github.com/97JOHN/Reinforcement_Learning_Train.git
reference material:
[1] R.Sutton et al. Reinforcement learning: An introduction , 1998
[2] T.Mitchell. Machine learning, 2003
[3] Andrew Ng.CS229: Machine learning Lecture notes
[4] Deep learning, optimization and identification, 2017
Reference source:
https://morvanzhou.github.io/
http://mnemstudio.org/path-finding-q-learning-tutorial.htm
http://www.cnblogs.com/dragonir/p/6224313.html
http://www.cnblogs.com/jinxulin/tag/%E5%A2%9E%E5%BC%BA%E5%AD%A6%E4%B9%A0/
https://blog.csdn.net/mr_corder/article/details/82492981
This article also explains the process of Q-Learning clearly with a very simple explanation
The operation effect of the latter part is as follows:
Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of the value table is: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The table values are: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of the value table is: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of the value table is: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, 0,0,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The table values are: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Q The update process of value table is as follows: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Final Q The value table is: -1,-1,-1,-1,80,-1, -1,-1,-1,64,-1,100, -1,-1,-1,64,-1,-1, -1,80,51,-1,80,-1, 64,-1,-1,64,-1,100, 0,0,0,0,0,0, Agent Moved from room 1 to room 5 Agent Start moving one step in room 1 and reach the target room Please press any key to continue. . .