Ensure ttValue != VALUE_NONE in singular extension search
[stockfish] / src / search.cpp
1 /*
2   Stockfish, a UCI chess playing engine derived from Glaurung 2.1
3   Copyright (C) 2004-2008 Tord Romstad (Glaurung author)
4   Copyright (C) 2008-2014 Marco Costalba, Joona Kiiski, Tord Romstad
5
6   Stockfish is free software: you can redistribute it and/or modify
7   it under the terms of the GNU General Public License as published by
8   the Free Software Foundation, either version 3 of the License, or
9   (at your option) any later version.
10
11   Stockfish is distributed in the hope that it will be useful,
12   but WITHOUT ANY WARRANTY; without even the implied warranty of
13   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14   GNU General Public License for more details.
15
16   You should have received a copy of the GNU General Public License
17   along with this program.  If not, see <http://www.gnu.org/licenses/>.
18 */
19
20 #include <algorithm>
21 #include <cassert>
22 #include <cfloat>
23 #include <cmath>
24 #include <cstring>
25 #include <iostream>
26 #include <sstream>
27
28 #include "evaluate.h"
29 #include "movegen.h"
30 #include "movepick.h"
31 #include "notation.h"
32 #include "rkiss.h"
33 #include "search.h"
34 #include "timeman.h"
35 #include "thread.h"
36 #include "tt.h"
37 #include "ucioption.h"
38
39 namespace Search {
40
41   volatile SignalsType Signals;
42   LimitsType Limits;
43   std::vector<RootMove> RootMoves;
44   Position RootPos;
45   Time::point SearchTime;
46   StateStackPtr SetupStates;
47 }
48
49 using std::string;
50 using Eval::evaluate;
51 using namespace Search;
52
53 namespace {
54
55   // Set to true to force running with one thread. Used for debugging
56   const bool FakeSplit = false;
57
58   // Different node types, used as template parameter
59   enum NodeType { Root, PV, NonPV };
60
61   // Dynamic razoring margin based on depth
62   inline Value razor_margin(Depth d) { return Value(512 + 16 * d); }
63
64   // Futility lookup tables (initialized at startup) and their access functions
65   int FutilityMoveCounts[2][32]; // [improving][depth]
66
67   inline Value futility_margin(Depth d) {
68     return Value(100 * d);
69   }
70
71   // Reduction lookup tables (initialized at startup) and their access function
72   int8_t Reductions[2][2][64][64]; // [pv][improving][depth][moveNumber]
73
74   template <bool PvNode> inline Depth reduction(bool i, Depth d, int mn) {
75
76     return (Depth) Reductions[PvNode][i][std::min(int(d) / ONE_PLY, 63)][std::min(mn, 63)];
77   }
78
79   size_t MultiPV, PVIdx;
80   TimeManager TimeMgr;
81   double BestMoveChanges;
82   Value DrawValue[COLOR_NB];
83   HistoryStats History;
84   GainsStats Gains;
85   MovesStats Countermoves, Followupmoves;
86
87   template <NodeType NT, bool SpNode>
88   Value search(Position& pos, Stack* ss, Value alpha, Value beta, Depth depth, bool cutNode);
89
90   template <NodeType NT, bool InCheck>
91   Value qsearch(Position& pos, Stack* ss, Value alpha, Value beta, Depth depth);
92
93   void id_loop(Position& pos);
94   Value value_to_tt(Value v, int ply);
95   Value value_from_tt(Value v, int ply);
96   void update_stats(const Position& pos, Stack* ss, Move move, Depth depth, Move* quiets, int quietsCnt);
97   string uci_pv(const Position& pos, int depth, Value alpha, Value beta);
98
99   struct Skill {
100     Skill(int l) : level(l), best(MOVE_NONE) {}
101    ~Skill() {
102       if (enabled()) // Swap best PV line with the sub-optimal one
103           std::swap(RootMoves[0], *std::find(RootMoves.begin(),
104                     RootMoves.end(), best ? best : pick_move()));
105     }
106
107     bool enabled() const { return level < 20; }
108     bool time_to_pick(int depth) const { return depth == 1 + level; }
109     Move pick_move();
110
111     int level;
112     Move best;
113   };
114
115 } // namespace
116
117
118 /// Search::init() is called during startup to initialize various lookup tables
119
120 void Search::init() {
121
122   int d;  // depth (ONE_PLY == 2)
123   int hd; // half depth (ONE_PLY == 1)
124   int mc; // moveCount
125
126   // Init reductions array
127   for (hd = 1; hd < 64; ++hd) for (mc = 1; mc < 64; ++mc)
128   {
129       double    pvRed = 0.00 + log(double(hd)) * log(double(mc)) / 3.00;
130       double nonPVRed = 0.33 + log(double(hd)) * log(double(mc)) / 2.25;
131       Reductions[1][1][hd][mc] = int8_t(   pvRed >= 1.0 ?    pvRed * int(ONE_PLY) : 0);
132       Reductions[0][1][hd][mc] = int8_t(nonPVRed >= 1.0 ? nonPVRed * int(ONE_PLY) : 0);
133
134       Reductions[1][0][hd][mc] = Reductions[1][1][hd][mc];
135       Reductions[0][0][hd][mc] = Reductions[0][1][hd][mc];
136
137       if (Reductions[0][0][hd][mc] > 2 * ONE_PLY)
138           Reductions[0][0][hd][mc] += ONE_PLY;
139
140       else if (Reductions[0][0][hd][mc] > 1 * ONE_PLY)
141           Reductions[0][0][hd][mc] += ONE_PLY / 2;
142   }
143
144   // Init futility move count array
145   for (d = 0; d < 32; ++d)
146   {
147       FutilityMoveCounts[0][d] = int(2.4 + 0.222 * pow(d + 0.00, 1.8));
148       FutilityMoveCounts[1][d] = int(3.0 + 0.300 * pow(d + 0.98, 1.8));
149   }
150 }
151
152
153 /// Search::perft() is our utility to verify move generation. All the leaf nodes
154 /// up to the given depth are generated and counted and the sum returned.
155
156 static uint64_t perft(Position& pos, Depth depth) {
157
158   StateInfo st;
159   uint64_t cnt = 0;
160   CheckInfo ci(pos);
161   const bool leaf = depth == 2 * ONE_PLY;
162
163   for (MoveList<LEGAL> it(pos); *it; ++it)
164   {
165       pos.do_move(*it, st, ci, pos.gives_check(*it, ci));
166       cnt += leaf ? MoveList<LEGAL>(pos).size() : ::perft(pos, depth - ONE_PLY);
167       pos.undo_move(*it);
168   }
169   return cnt;
170 }
171
172 uint64_t Search::perft(Position& pos, Depth depth) {
173   return depth > ONE_PLY ? ::perft(pos, depth) : MoveList<LEGAL>(pos).size();
174 }
175
176 /// Search::think() is the external interface to Stockfish's search, and is
177 /// called by the main thread when the program receives the UCI 'go' command. It
178 /// searches from RootPos and at the end prints the "bestmove" to output.
179
180 void Search::think() {
181
182   TimeMgr.init(Limits, RootPos.game_ply(), RootPos.side_to_move());
183
184   int cf = Options["Contempt Factor"] * PawnValueEg / 100; // From centipawns
185   DrawValue[ RootPos.side_to_move()] = VALUE_DRAW - Value(cf);
186   DrawValue[~RootPos.side_to_move()] = VALUE_DRAW + Value(cf);
187
188   if (RootMoves.empty())
189   {
190       RootMoves.push_back(MOVE_NONE);
191       sync_cout << "info depth 0 score "
192                 << score_to_uci(RootPos.checkers() ? -VALUE_MATE : VALUE_DRAW)
193                 << sync_endl;
194
195       goto finalize;
196   }
197
198   if (Options["Write Search Log"])
199   {
200       Log log(Options["Search Log Filename"]);
201       log << "\nSearching: "  << RootPos.fen()
202           << "\ninfinite: "   << Limits.infinite
203           << " ponder: "      << Limits.ponder
204           << " time: "        << Limits.time[RootPos.side_to_move()]
205           << " increment: "   << Limits.inc[RootPos.side_to_move()]
206           << " moves to go: " << Limits.movestogo
207           << "\n" << std::endl;
208   }
209
210   // Reset the threads, still sleeping: will wake up at split time
211   for (size_t i = 0; i < Threads.size(); ++i)
212       Threads[i]->maxPly = 0;
213
214   Threads.timer->run = true;
215   Threads.timer->notify_one(); // Wake up the recurring timer
216
217   id_loop(RootPos); // Let's start searching !
218
219   Threads.timer->run = false; // Stop the timer
220
221   if (Options["Write Search Log"])
222   {
223       Time::point elapsed = Time::now() - SearchTime + 1;
224
225       Log log(Options["Search Log Filename"]);
226       log << "Nodes: "          << RootPos.nodes_searched()
227           << "\nNodes/second: " << RootPos.nodes_searched() * 1000 / elapsed
228           << "\nBest move: "    << move_to_san(RootPos, RootMoves[0].pv[0]);
229
230       StateInfo st;
231       RootPos.do_move(RootMoves[0].pv[0], st);
232       log << "\nPonder move: " << move_to_san(RootPos, RootMoves[0].pv[1]) << std::endl;
233       RootPos.undo_move(RootMoves[0].pv[0]);
234   }
235
236 finalize:
237
238   // When search is stopped this info is not printed
239   sync_cout << "info nodes " << RootPos.nodes_searched()
240             << " time " << Time::now() - SearchTime + 1 << sync_endl;
241
242   // When we reach the maximum depth, we can arrive here without a raise of
243   // Signals.stop. However, if we are pondering or in an infinite search,
244   // the UCI protocol states that we shouldn't print the best move before the
245   // GUI sends a "stop" or "ponderhit" command. We therefore simply wait here
246   // until the GUI sends one of those commands (which also raises Signals.stop).
247   if (!Signals.stop && (Limits.ponder || Limits.infinite))
248   {
249       Signals.stopOnPonderhit = true;
250       RootPos.this_thread()->wait_for(Signals.stop);
251   }
252
253   // Best move could be MOVE_NONE when searching on a stalemate position
254   sync_cout << "bestmove " << move_to_uci(RootMoves[0].pv[0], RootPos.is_chess960())
255             << " ponder "  << move_to_uci(RootMoves[0].pv[1], RootPos.is_chess960())
256             << sync_endl;
257 }
258
259
260 namespace {
261
262   // id_loop() is the main iterative deepening loop. It calls search() repeatedly
263   // with increasing depth until the allocated thinking time has been consumed,
264   // user stops the search, or the maximum search depth is reached.
265
266   void id_loop(Position& pos) {
267
268     Stack stack[MAX_PLY_PLUS_6], *ss = stack+2; // To allow referencing (ss-2)
269     int depth;
270     Value bestValue, alpha, beta, delta;
271
272     std::memset(ss-2, 0, 5 * sizeof(Stack));
273
274     depth = 0;
275     BestMoveChanges = 0;
276     bestValue = delta = alpha = -VALUE_INFINITE;
277     beta = VALUE_INFINITE;
278
279     TT.new_search();
280     History.clear();
281     Gains.clear();
282     Countermoves.clear();
283     Followupmoves.clear();
284
285     MultiPV = Options["MultiPV"];
286     Skill skill(Options["Skill Level"]);
287
288     // Do we have to play with skill handicap? In this case enable MultiPV search
289     // that we will use behind the scenes to retrieve a set of possible moves.
290     if (skill.enabled() && MultiPV < 4)
291         MultiPV = 4;
292
293     MultiPV = std::min(MultiPV, RootMoves.size());
294
295     // Iterative deepening loop until requested to stop or target depth reached
296     while (++depth <= MAX_PLY && !Signals.stop && (!Limits.depth || depth <= Limits.depth))
297     {
298         // Age out PV variability metric
299         BestMoveChanges *= 0.5;
300
301         // Save the last iteration's scores before first PV line is searched and
302         // all the move scores except the (new) PV are set to -VALUE_INFINITE.
303         for (size_t i = 0; i < RootMoves.size(); ++i)
304             RootMoves[i].prevScore = RootMoves[i].score;
305
306         // MultiPV loop. We perform a full root search for each PV line
307         for (PVIdx = 0; PVIdx < MultiPV && !Signals.stop; ++PVIdx)
308         {
309             // Reset aspiration window starting size
310             if (depth >= 5)
311             {
312                 delta = Value(16);
313                 alpha = std::max(RootMoves[PVIdx].prevScore - delta,-VALUE_INFINITE);
314                 beta  = std::min(RootMoves[PVIdx].prevScore + delta, VALUE_INFINITE);
315             }
316
317             // Start with a small aspiration window and, in the case of a fail
318             // high/low, re-search with a bigger window until we're not failing
319             // high/low anymore.
320             while (true)
321             {
322                 bestValue = search<Root, false>(pos, ss, alpha, beta, depth * ONE_PLY, false);
323
324                 // Bring the best move to the front. It is critical that sorting
325                 // is done with a stable algorithm because all the values but the
326                 // first and eventually the new best one are set to -VALUE_INFINITE
327                 // and we want to keep the same order for all the moves except the
328                 // new PV that goes to the front. Note that in case of MultiPV
329                 // search the already searched PV lines are preserved.
330                 std::stable_sort(RootMoves.begin() + PVIdx, RootMoves.end());
331
332                 // Write PV back to transposition table in case the relevant
333                 // entries have been overwritten during the search.
334                 for (size_t i = 0; i <= PVIdx; ++i)
335                     RootMoves[i].insert_pv_in_tt(pos);
336
337                 // If search has been stopped break immediately. Sorting and
338                 // writing PV back to TT is safe because RootMoves is still
339                 // valid, although it refers to previous iteration.
340                 if (Signals.stop)
341                     break;
342
343                 // When failing high/low give some update (without cluttering
344                 // the UI) before a re-search.
345                 if (  (bestValue <= alpha || bestValue >= beta)
346                     && Time::now() - SearchTime > 3000)
347                     sync_cout << uci_pv(pos, depth, alpha, beta) << sync_endl;
348
349                 // In case of failing low/high increase aspiration window and
350                 // re-search, otherwise exit the loop.
351                 if (bestValue <= alpha)
352                 {
353                     alpha = std::max(bestValue - delta, -VALUE_INFINITE);
354
355                     Signals.failedLowAtRoot = true;
356                     Signals.stopOnPonderhit = false;
357                 }
358                 else if (bestValue >= beta)
359                     beta = std::min(bestValue + delta, VALUE_INFINITE);
360
361                 else
362                     break;
363
364                 delta += delta / 2;
365
366                 assert(alpha >= -VALUE_INFINITE && beta <= VALUE_INFINITE);
367             }
368
369             // Sort the PV lines searched so far and update the GUI
370             std::stable_sort(RootMoves.begin(), RootMoves.begin() + PVIdx + 1);
371
372             if (PVIdx + 1 == MultiPV || Time::now() - SearchTime > 3000)
373                 sync_cout << uci_pv(pos, depth, alpha, beta) << sync_endl;
374         }
375
376         // If skill levels are enabled and time is up, pick a sub-optimal best move
377         if (skill.enabled() && skill.time_to_pick(depth))
378             skill.pick_move();
379
380         if (Options["Write Search Log"])
381         {
382             RootMove& rm = RootMoves[0];
383             if (skill.best != MOVE_NONE)
384                 rm = *std::find(RootMoves.begin(), RootMoves.end(), skill.best);
385
386             Log log(Options["Search Log Filename"]);
387             log << pretty_pv(pos, depth, rm.score, Time::now() - SearchTime, &rm.pv[0])
388                 << std::endl;
389         }
390
391         // Have we found a "mate in x"?
392         if (   Limits.mate
393             && bestValue >= VALUE_MATE_IN_MAX_PLY
394             && VALUE_MATE - bestValue <= 2 * Limits.mate)
395             Signals.stop = true;
396
397         // Do we have time for the next iteration? Can we stop searching now?
398         if (Limits.use_time_management() && !Signals.stop && !Signals.stopOnPonderhit)
399         {
400             // Take some extra time if the best move has changed
401             if (depth > 4 && depth < 50 &&  MultiPV == 1)
402                 TimeMgr.pv_instability(BestMoveChanges);
403
404             // Stop the search if only one legal move is available or all
405             // of the available time has been used.
406             if (   RootMoves.size() == 1
407                 || Time::now() - SearchTime > TimeMgr.available_time())
408             {
409                 // If we are allowed to ponder do not stop the search now but
410                 // keep pondering until the GUI sends "ponderhit" or "stop".
411                 if (Limits.ponder)
412                     Signals.stopOnPonderhit = true;
413                 else
414                     Signals.stop = true;
415             }
416         }
417     }
418   }
419
420
421   // search<>() is the main search function for both PV and non-PV nodes and for
422   // normal and SplitPoint nodes. When called just after a split point the search
423   // is simpler because we have already probed the hash table, done a null move
424   // search, and searched the first move before splitting, so we don't have to
425   // repeat all this work again. We also don't need to store anything to the hash
426   // table here: This is taken care of after we return from the split point.
427
428   template <NodeType NT, bool SpNode>
429   Value search(Position& pos, Stack* ss, Value alpha, Value beta, Depth depth, bool cutNode) {
430
431     const bool RootNode = NT == Root;
432     const bool PvNode   = NT == PV || NT == Root;
433
434     assert(-VALUE_INFINITE <= alpha && alpha < beta && beta <= VALUE_INFINITE);
435     assert(PvNode || (alpha == beta - 1));
436     assert(depth > DEPTH_ZERO);
437
438     Move quietsSearched[64];
439     StateInfo st;
440     const TTEntry *tte;
441     SplitPoint* splitPoint;
442     Key posKey;
443     Move ttMove, move, excludedMove, bestMove;
444     Depth ext, newDepth, predictedDepth;
445     Value bestValue, value, ttValue, eval, nullValue, futilityValue;
446     bool inCheck, givesCheck, pvMove, singularExtensionNode, improving;
447     bool captureOrPromotion, dangerous, doFullDepthSearch;
448     int moveCount, quietCount;
449
450     // Step 1. Initialize node
451     Thread* thisThread = pos.this_thread();
452     inCheck = pos.checkers();
453
454     if (SpNode)
455     {
456         splitPoint = ss->splitPoint;
457         bestMove   = splitPoint->bestMove;
458         bestValue  = splitPoint->bestValue;
459         tte = NULL;
460         ttMove = excludedMove = MOVE_NONE;
461         ttValue = VALUE_NONE;
462
463         assert(splitPoint->bestValue > -VALUE_INFINITE && splitPoint->moveCount > 0);
464
465         goto moves_loop;
466     }
467
468     moveCount = quietCount = 0;
469     bestValue = -VALUE_INFINITE;
470     ss->currentMove = ss->ttMove = (ss+1)->excludedMove = bestMove = MOVE_NONE;
471     ss->ply = (ss-1)->ply + 1;
472     (ss+1)->skipNullMove = false; (ss+1)->reduction = DEPTH_ZERO;
473     (ss+2)->killers[0] = (ss+2)->killers[1] = MOVE_NONE;
474
475     // Used to send selDepth info to GUI
476     if (PvNode && thisThread->maxPly < ss->ply)
477         thisThread->maxPly = ss->ply;
478
479     if (!RootNode)
480     {
481         // Step 2. Check for aborted search and immediate draw
482         if (Signals.stop || pos.is_draw() || ss->ply > MAX_PLY)
483             return ss->ply > MAX_PLY && !inCheck ? evaluate(pos) : DrawValue[pos.side_to_move()];
484
485         // Step 3. Mate distance pruning. Even if we mate at the next move our score
486         // would be at best mate_in(ss->ply+1), but if alpha is already bigger because
487         // a shorter mate was found upward in the tree then there is no need to search
488         // because we will never beat the current alpha. Same logic but with reversed
489         // signs applies also in the opposite condition of being mated instead of giving
490         // mate. In this case return a fail-high score.
491         alpha = std::max(mated_in(ss->ply), alpha);
492         beta = std::min(mate_in(ss->ply+1), beta);
493         if (alpha >= beta)
494             return alpha;
495     }
496
497     // Step 4. Transposition table lookup
498     // We don't want the score of a partial search to overwrite a previous full search
499     // TT value, so we use a different position key in case of an excluded move.
500     excludedMove = ss->excludedMove;
501     posKey = excludedMove ? pos.exclusion_key() : pos.key();
502     tte = TT.probe(posKey);
503     ss->ttMove = ttMove = RootNode ? RootMoves[PVIdx].pv[0] : tte ? tte->move() : MOVE_NONE;
504     ttValue = tte ? value_from_tt(tte->value(), ss->ply) : VALUE_NONE;
505
506     // At PV nodes we check for exact scores, whilst at non-PV nodes we check for
507     // a fail high/low. The biggest advantage to probing at PV nodes is to have a
508     // smooth experience in analysis mode. We don't probe at Root nodes otherwise
509     // we should also update RootMoveList to avoid bogus output.
510     if (   !RootNode
511         && tte
512         && tte->depth() >= depth
513         && ttValue != VALUE_NONE // Only in case of TT access race
514         && (           PvNode ?  tte->bound() == BOUND_EXACT
515             : ttValue >= beta ? (tte->bound() &  BOUND_LOWER)
516                               : (tte->bound() &  BOUND_UPPER)))
517     {
518         ss->currentMove = ttMove; // Can be MOVE_NONE
519
520         // If ttMove is quiet, update killers, history, counter move and followup move on TT hit
521         if (ttValue >= beta && ttMove && !pos.capture_or_promotion(ttMove) && !inCheck)
522             update_stats(pos, ss, ttMove, depth, NULL, 0);
523
524         return ttValue;
525     }
526
527     // Step 5. Evaluate the position statically and update parent's gain statistics
528     if (inCheck)
529     {
530         ss->staticEval = eval = VALUE_NONE;
531         goto moves_loop;
532     }
533
534     else if (tte)
535     {
536         // Never assume anything on values stored in TT
537         if ((ss->staticEval = eval = tte->eval_value()) == VALUE_NONE)
538             eval = ss->staticEval = evaluate(pos);
539
540         // Can ttValue be used as a better position evaluation?
541         if (ttValue != VALUE_NONE)
542             if (tte->bound() & (ttValue > eval ? BOUND_LOWER : BOUND_UPPER))
543                 eval = ttValue;
544     }
545     else
546     {
547         eval = ss->staticEval =
548         (ss-1)->currentMove != MOVE_NULL ? evaluate(pos) : -(ss-1)->staticEval + 2 * Eval::Tempo;
549
550         TT.store(posKey, VALUE_NONE, BOUND_NONE, DEPTH_NONE, MOVE_NONE, ss->staticEval);
551     }
552
553     if (   !pos.captured_piece_type()
554         &&  ss->staticEval != VALUE_NONE
555         && (ss-1)->staticEval != VALUE_NONE
556         && (move = (ss-1)->currentMove) != MOVE_NULL
557         &&  move != MOVE_NONE
558         &&  type_of(move) == NORMAL)
559     {
560         Square to = to_sq(move);
561         Gains.update(pos.piece_on(to), to, -(ss-1)->staticEval - ss->staticEval);
562     }
563
564     // Step 6. Razoring (skipped when in check)
565     if (   !PvNode
566         &&  depth < 4 * ONE_PLY
567         &&  eval + razor_margin(depth) <= alpha
568         &&  ttMove == MOVE_NONE
569         && !pos.pawn_on_7th(pos.side_to_move()))
570     {
571         if (   depth <= ONE_PLY
572             && eval + razor_margin(3 * ONE_PLY) <= alpha)
573             return qsearch<NonPV, false>(pos, ss, alpha, beta, DEPTH_ZERO);
574
575         Value ralpha = alpha - razor_margin(depth);
576         Value v = qsearch<NonPV, false>(pos, ss, ralpha, ralpha+1, DEPTH_ZERO);
577         if (v <= ralpha)
578             return v;
579     }
580
581     // Step 7. Futility pruning: child node (skipped when in check)
582     if (   !PvNode
583         && !ss->skipNullMove
584         &&  depth < 7 * ONE_PLY
585         &&  eval - futility_margin(depth) >= beta
586         &&  abs(beta) < VALUE_MATE_IN_MAX_PLY
587         &&  abs(eval) < VALUE_KNOWN_WIN
588         &&  pos.non_pawn_material(pos.side_to_move()))
589         return eval - futility_margin(depth);
590
591     // Step 8. Null move search with verification search (is omitted in PV nodes)
592     if (   !PvNode
593         && !ss->skipNullMove
594         &&  depth >= 2 * ONE_PLY
595         &&  eval >= beta
596         &&  pos.non_pawn_material(pos.side_to_move()))
597     {
598         ss->currentMove = MOVE_NULL;
599
600         assert(eval - beta >= 0);
601
602         // Null move dynamic reduction based on depth and value
603         Depth R =  3 * ONE_PLY
604                  + depth / 4
605                  + (abs(beta) < VALUE_KNOWN_WIN ? int(eval - beta) / PawnValueMg * ONE_PLY
606                                                 : DEPTH_ZERO);
607
608         pos.do_null_move(st);
609         (ss+1)->skipNullMove = true;
610         nullValue = depth-R < ONE_PLY ? -qsearch<NonPV, false>(pos, ss+1, -beta, -beta+1, DEPTH_ZERO)
611                                       : - search<NonPV, false>(pos, ss+1, -beta, -beta+1, depth-R, !cutNode);
612         (ss+1)->skipNullMove = false;
613         pos.undo_null_move();
614
615         if (nullValue >= beta)
616         {
617             // Do not return unproven mate scores
618             if (nullValue >= VALUE_MATE_IN_MAX_PLY)
619                 nullValue = beta;
620
621             if (depth < 12 * ONE_PLY && abs(beta) < VALUE_KNOWN_WIN)
622                 return nullValue;
623
624             // Do verification search at high depths
625             ss->skipNullMove = true;
626             Value v = depth-R < ONE_PLY ? qsearch<NonPV, false>(pos, ss, beta-1, beta, DEPTH_ZERO)
627                                         :  search<NonPV, false>(pos, ss, beta-1, beta, depth-R, false);
628             ss->skipNullMove = false;
629
630             if (v >= beta)
631                 return nullValue;
632         }
633     }
634
635     // Step 9. ProbCut (skipped when in check)
636     // If we have a very good capture (i.e. SEE > seeValues[captured_piece_type])
637     // and a reduced search returns a value much above beta, we can (almost) safely
638     // prune the previous move.
639     if (   !PvNode
640         &&  depth >= 5 * ONE_PLY
641         && !ss->skipNullMove
642         &&  abs(beta) < VALUE_MATE_IN_MAX_PLY)
643     {
644         Value rbeta = std::min(beta + 200, VALUE_INFINITE);
645         Depth rdepth = depth - 4 * ONE_PLY;
646
647         assert(rdepth >= ONE_PLY);
648         assert((ss-1)->currentMove != MOVE_NONE);
649         assert((ss-1)->currentMove != MOVE_NULL);
650
651         MovePicker mp(pos, ttMove, History, pos.captured_piece_type());
652         CheckInfo ci(pos);
653
654         while ((move = mp.next_move<false>()) != MOVE_NONE)
655             if (pos.legal(move, ci.pinned))
656             {
657                 ss->currentMove = move;
658                 pos.do_move(move, st, ci, pos.gives_check(move, ci));
659                 value = -search<NonPV, false>(pos, ss+1, -rbeta, -rbeta+1, rdepth, !cutNode);
660                 pos.undo_move(move);
661                 if (value >= rbeta)
662                     return value;
663             }
664     }
665
666     // Step 10. Internal iterative deepening (skipped when in check)
667     if (    depth >= (PvNode ? 5 * ONE_PLY : 8 * ONE_PLY)
668         && !ttMove
669         && (PvNode || ss->staticEval + 256 >= beta))
670     {
671         Depth d = depth - 2 * ONE_PLY - (PvNode ? DEPTH_ZERO : depth / 4);
672
673         ss->skipNullMove = true;
674         search<PvNode ? PV : NonPV, false>(pos, ss, alpha, beta, d, true);
675         ss->skipNullMove = false;
676
677         tte = TT.probe(posKey);
678         ttMove = tte ? tte->move() : MOVE_NONE;
679     }
680
681 moves_loop: // When in check and at SpNode search starts from here
682
683     Square prevMoveSq = to_sq((ss-1)->currentMove);
684     Move countermoves[] = { Countermoves[pos.piece_on(prevMoveSq)][prevMoveSq].first,
685                             Countermoves[pos.piece_on(prevMoveSq)][prevMoveSq].second };
686
687     Square prevOwnMoveSq = to_sq((ss-2)->currentMove);
688     Move followupmoves[] = { Followupmoves[pos.piece_on(prevOwnMoveSq)][prevOwnMoveSq].first,
689                              Followupmoves[pos.piece_on(prevOwnMoveSq)][prevOwnMoveSq].second };
690
691     MovePicker mp(pos, ttMove, depth, History, countermoves, followupmoves, ss);
692     CheckInfo ci(pos);
693     value = bestValue; // Workaround a bogus 'uninitialized' warning under gcc
694     improving =   ss->staticEval >= (ss-2)->staticEval
695                || ss->staticEval == VALUE_NONE
696                ||(ss-2)->staticEval == VALUE_NONE;
697
698     singularExtensionNode =   !RootNode
699                            && !SpNode
700                            &&  depth >= 8 * ONE_PLY
701                            &&  abs(beta) < VALUE_KNOWN_WIN
702                            &&  ttMove != MOVE_NONE
703                            &&  ttValue != VALUE_NONE
704                            && !excludedMove // Recursive singular search is not allowed
705                            && (tte->bound() & BOUND_LOWER)
706                            &&  tte->depth() >= depth - 3 * ONE_PLY;
707
708     // Step 11. Loop through moves
709     // Loop through all pseudo-legal moves until no moves remain or a beta cutoff occurs
710     while ((move = mp.next_move<SpNode>()) != MOVE_NONE)
711     {
712       assert(is_ok(move));
713
714       if (move == excludedMove)
715           continue;
716
717       // At root obey the "searchmoves" option and skip moves not listed in Root
718       // Move List. As a consequence any illegal move is also skipped. In MultiPV
719       // mode we also skip PV moves which have been already searched.
720       if (RootNode && !std::count(RootMoves.begin() + PVIdx, RootMoves.end(), move))
721           continue;
722
723       if (SpNode)
724       {
725           // Shared counter cannot be decremented later if the move turns out to be illegal
726           if (!pos.legal(move, ci.pinned))
727               continue;
728
729           moveCount = ++splitPoint->moveCount;
730           splitPoint->mutex.unlock();
731       }
732       else
733           ++moveCount;
734
735       if (RootNode)
736       {
737           Signals.firstRootMove = (moveCount == 1);
738
739           if (thisThread == Threads.main() && Time::now() - SearchTime > 3000)
740               sync_cout << "info depth " << depth / ONE_PLY
741                         << " currmove " << move_to_uci(move, pos.is_chess960())
742                         << " currmovenumber " << moveCount + PVIdx << sync_endl;
743       }
744
745       ext = DEPTH_ZERO;
746       captureOrPromotion = pos.capture_or_promotion(move);
747
748       givesCheck =  type_of(move) == NORMAL && !ci.dcCandidates
749                   ? ci.checkSq[type_of(pos.piece_on(from_sq(move)))] & to_sq(move)
750                   : pos.gives_check(move, ci);
751
752       dangerous =   givesCheck
753                  || type_of(move) != NORMAL
754                  || pos.advanced_pawn_push(move);
755
756       // Step 12. Extend checks
757       if (givesCheck && pos.see_sign(move) >= VALUE_ZERO)
758           ext = ONE_PLY;
759
760       // Singular extension search. If all moves but one fail low on a search of
761       // (alpha-s, beta-s), and just one fails high on (alpha, beta), then that move
762       // is singular and should be extended. To verify this we do a reduced search
763       // on all the other moves but the ttMove and if the result is lower than
764       // ttValue minus a margin then we extend the ttMove.
765       if (    singularExtensionNode
766           &&  move == ttMove
767           && !ext
768           &&  pos.legal(move, ci.pinned))
769       {
770           Value rBeta = ttValue - int(depth);
771           ss->excludedMove = move;
772           ss->skipNullMove = true;
773           value = search<NonPV, false>(pos, ss, rBeta - 1, rBeta, depth / 2, cutNode);
774           ss->skipNullMove = false;
775           ss->excludedMove = MOVE_NONE;
776
777           if (value < rBeta)
778               ext = ONE_PLY;
779       }
780
781       // Update the current move (this must be done after singular extension search)
782       newDepth = depth - ONE_PLY + ext;
783
784       // Step 13. Pruning at shallow depth (exclude PV nodes)
785       if (   !PvNode
786           && !captureOrPromotion
787           && !inCheck
788           && !dangerous
789        /* &&  move != ttMove Already implicit in the next condition */
790           &&  bestValue > VALUE_MATED_IN_MAX_PLY)
791       {
792           // Move count based pruning
793           if (   depth < 16 * ONE_PLY
794               && moveCount >= FutilityMoveCounts[improving][depth] )
795           {
796               if (SpNode)
797                   splitPoint->mutex.lock();
798
799               continue;
800           }
801
802           predictedDepth = newDepth - reduction<PvNode>(improving, depth, moveCount);
803
804           // Futility pruning: parent node
805           if (predictedDepth < 7 * ONE_PLY)
806           {
807               futilityValue = ss->staticEval + futility_margin(predictedDepth)
808                             + 128 + Gains[pos.moved_piece(move)][to_sq(move)];
809
810               if (futilityValue <= alpha)
811               {
812                   bestValue = std::max(bestValue, futilityValue);
813
814                   if (SpNode)
815                   {
816                       splitPoint->mutex.lock();
817                       if (bestValue > splitPoint->bestValue)
818                           splitPoint->bestValue = bestValue;
819                   }
820                   continue;
821               }
822           }
823
824           // Prune moves with negative SEE at low depths
825           if (predictedDepth < 4 * ONE_PLY && pos.see_sign(move) < VALUE_ZERO)
826           {
827               if (SpNode)
828                   splitPoint->mutex.lock();
829
830               continue;
831           }
832       }
833
834       // Check for legality just before making the move
835       if (!RootNode && !SpNode && !pos.legal(move, ci.pinned))
836       {
837           moveCount--;
838           continue;
839       }
840
841       pvMove = PvNode && moveCount == 1;
842       ss->currentMove = move;
843       if (!SpNode && !captureOrPromotion && quietCount < 64)
844           quietsSearched[quietCount++] = move;
845
846       // Step 14. Make the move
847       pos.do_move(move, st, ci, givesCheck);
848
849       // Step 15. Reduced depth search (LMR). If the move fails high it will be
850       // re-searched at full depth.
851       if (    depth >= 3 * ONE_PLY
852           && !pvMove
853           && !captureOrPromotion
854           &&  move != ttMove
855           &&  move != ss->killers[0]
856           &&  move != ss->killers[1])
857       {
858           ss->reduction = reduction<PvNode>(improving, depth, moveCount);
859
860           if (!PvNode && cutNode)
861               ss->reduction += ONE_PLY;
862
863           else if (History[pos.piece_on(to_sq(move))][to_sq(move)] < 0)
864               ss->reduction += ONE_PLY / 2;
865
866           if (move == countermoves[0] || move == countermoves[1])
867               ss->reduction = std::max(DEPTH_ZERO, ss->reduction - ONE_PLY);
868
869           // Decrease reduction for moves that escape a capture
870           if (   ss->reduction
871               && type_of(move) == NORMAL
872               && type_of(pos.piece_on(to_sq(move))) != PAWN
873               && pos.see(make_move(to_sq(move), from_sq(move))) < 0)
874               ss->reduction = std::max(DEPTH_ZERO, ss->reduction - ONE_PLY);
875
876           Depth d = std::max(newDepth - ss->reduction, ONE_PLY);
877           if (SpNode)
878               alpha = splitPoint->alpha;
879
880           value = -search<NonPV, false>(pos, ss+1, -(alpha+1), -alpha, d, true);
881
882           // Re-search at intermediate depth if reduction is very high
883           if (value > alpha && ss->reduction >= 4 * ONE_PLY)
884           {
885               Depth d2 = std::max(newDepth - 2 * ONE_PLY, ONE_PLY);
886               value = -search<NonPV, false>(pos, ss+1, -(alpha+1), -alpha, d2, true);
887           }
888
889           doFullDepthSearch = (value > alpha && ss->reduction != DEPTH_ZERO);
890           ss->reduction = DEPTH_ZERO;
891       }
892       else
893           doFullDepthSearch = !pvMove;
894
895       // Step 16. Full depth search, when LMR is skipped or fails high
896       if (doFullDepthSearch)
897       {
898           if (SpNode)
899               alpha = splitPoint->alpha;
900
901           value = newDepth < ONE_PLY ?
902                           givesCheck ? -qsearch<NonPV,  true>(pos, ss+1, -(alpha+1), -alpha, DEPTH_ZERO)
903                                      : -qsearch<NonPV, false>(pos, ss+1, -(alpha+1), -alpha, DEPTH_ZERO)
904                                      : - search<NonPV, false>(pos, ss+1, -(alpha+1), -alpha, newDepth, !cutNode);
905       }
906
907       // For PV nodes only, do a full PV search on the first move or after a fail
908       // high (in the latter case search only if value < beta), otherwise let the
909       // parent node fail low with value <= alpha and to try another move.
910       if (PvNode && (pvMove || (value > alpha && (RootNode || value < beta))))
911           value = newDepth < ONE_PLY ?
912                           givesCheck ? -qsearch<PV,  true>(pos, ss+1, -beta, -alpha, DEPTH_ZERO)
913                                      : -qsearch<PV, false>(pos, ss+1, -beta, -alpha, DEPTH_ZERO)
914                                      : - search<PV, false>(pos, ss+1, -beta, -alpha, newDepth, false);
915       // Step 17. Undo move
916       pos.undo_move(move);
917
918       assert(value > -VALUE_INFINITE && value < VALUE_INFINITE);
919
920       // Step 18. Check for new best move
921       if (SpNode)
922       {
923           splitPoint->mutex.lock();
924           bestValue = splitPoint->bestValue;
925           alpha = splitPoint->alpha;
926       }
927
928       // Finished searching the move. If a stop or a cutoff occurred, the return
929       // value of the search cannot be trusted, and we return immediately without
930       // updating best move, PV and TT.
931       if (Signals.stop || thisThread->cutoff_occurred())
932           return VALUE_ZERO;
933
934       if (RootNode)
935       {
936           RootMove& rm = *std::find(RootMoves.begin(), RootMoves.end(), move);
937
938           // PV move or new best move ?
939           if (pvMove || value > alpha)
940           {
941               rm.score = value;
942               rm.extract_pv_from_tt(pos);
943
944               // We record how often the best move has been changed in each
945               // iteration. This information is used for time management: When
946               // the best move changes frequently, we allocate some more time.
947               if (!pvMove)
948                   ++BestMoveChanges;
949           }
950           else
951               // All other moves but the PV are set to the lowest value: this is
952               // not a problem when sorting because the sort is stable and the
953               // move position in the list is preserved - just the PV is pushed up.
954               rm.score = -VALUE_INFINITE;
955       }
956
957       if (value > bestValue)
958       {
959           bestValue = SpNode ? splitPoint->bestValue = value : value;
960
961           if (value > alpha)
962           {
963               bestMove = SpNode ? splitPoint->bestMove = move : move;
964
965               if (PvNode && value < beta) // Update alpha! Always alpha < beta
966                   alpha = SpNode ? splitPoint->alpha = value : value;
967               else
968               {
969                   assert(value >= beta); // Fail high
970
971                   if (SpNode)
972                       splitPoint->cutoff = true;
973
974                   break;
975               }
976           }
977       }
978
979       // Step 19. Check for splitting the search
980       if (   !SpNode
981           &&  depth >= Threads.minimumSplitDepth
982           &&  Threads.available_slave(thisThread)
983           &&  (   !thisThread->activeSplitPoint
984                || !thisThread->activeSplitPoint->allSlavesSearching)
985           &&  thisThread->splitPointsSize < MAX_SPLITPOINTS_PER_THREAD)
986       {
987           assert(bestValue > -VALUE_INFINITE && bestValue < beta);
988
989           thisThread->split<FakeSplit>(pos, ss, alpha, beta, &bestValue, &bestMove,
990                                        depth, moveCount, &mp, NT, cutNode);
991
992           if (Signals.stop || thisThread->cutoff_occurred())
993               return VALUE_ZERO;
994
995           if (bestValue >= beta)
996               break;
997       }
998     }
999
1000     if (SpNode)
1001         return bestValue;
1002
1003     // Following condition would detect a stop or a cutoff set only after move
1004     // loop has been completed. But in this case bestValue is valid because we
1005     // have fully searched our subtree, and we can anyhow save the result in TT.
1006     /*
1007        if (Signals.stop || thisThread->cutoff_occurred())
1008         return VALUE_DRAW;
1009     */
1010
1011     // Step 20. Check for mate and stalemate
1012     // All legal moves have been searched and if there are no legal moves, it
1013     // must be mate or stalemate. If we are in a singular extension search then
1014     // return a fail low score.
1015     if (!moveCount)
1016         bestValue = excludedMove ? alpha
1017                    :     inCheck ? mated_in(ss->ply) : DrawValue[pos.side_to_move()];
1018
1019     // Quiet best move: update killers, history, countermoves and followupmoves
1020     else if (bestValue >= beta && !pos.capture_or_promotion(bestMove) && !inCheck)
1021         update_stats(pos, ss, bestMove, depth, quietsSearched, quietCount - 1);
1022
1023     TT.store(posKey, value_to_tt(bestValue, ss->ply),
1024              bestValue >= beta  ? BOUND_LOWER :
1025              PvNode && bestMove ? BOUND_EXACT : BOUND_UPPER,
1026              depth, bestMove, ss->staticEval);
1027
1028     assert(bestValue > -VALUE_INFINITE && bestValue < VALUE_INFINITE);
1029
1030     return bestValue;
1031   }
1032
1033
1034   // qsearch() is the quiescence search function, which is called by the main
1035   // search function when the remaining depth is zero (or, to be more precise,
1036   // less than ONE_PLY).
1037
1038   template <NodeType NT, bool InCheck>
1039   Value qsearch(Position& pos, Stack* ss, Value alpha, Value beta, Depth depth) {
1040
1041     const bool PvNode = NT == PV;
1042
1043     assert(NT == PV || NT == NonPV);
1044     assert(InCheck == !!pos.checkers());
1045     assert(alpha >= -VALUE_INFINITE && alpha < beta && beta <= VALUE_INFINITE);
1046     assert(PvNode || (alpha == beta - 1));
1047     assert(depth <= DEPTH_ZERO);
1048
1049     StateInfo st;
1050     const TTEntry* tte;
1051     Key posKey;
1052     Move ttMove, move, bestMove;
1053     Value bestValue, value, ttValue, futilityValue, futilityBase, oldAlpha;
1054     bool givesCheck, evasionPrunable;
1055     Depth ttDepth;
1056
1057     // To flag BOUND_EXACT a node with eval above alpha and no available moves
1058     if (PvNode)
1059         oldAlpha = alpha;
1060
1061     ss->currentMove = bestMove = MOVE_NONE;
1062     ss->ply = (ss-1)->ply + 1;
1063
1064     // Check for an instant draw or if the maximum ply has been reached
1065     if (pos.is_draw() || ss->ply > MAX_PLY)
1066         return ss->ply > MAX_PLY && !InCheck ? evaluate(pos) : DrawValue[pos.side_to_move()];
1067
1068     // Decide whether or not to include checks: this fixes also the type of
1069     // TT entry depth that we are going to use. Note that in qsearch we use
1070     // only two types of depth in TT: DEPTH_QS_CHECKS or DEPTH_QS_NO_CHECKS.
1071     ttDepth = InCheck || depth >= DEPTH_QS_CHECKS ? DEPTH_QS_CHECKS
1072                                                   : DEPTH_QS_NO_CHECKS;
1073
1074     // Transposition table lookup
1075     posKey = pos.key();
1076     tte = TT.probe(posKey);
1077     ttMove = tte ? tte->move() : MOVE_NONE;
1078     ttValue = tte ? value_from_tt(tte->value(),ss->ply) : VALUE_NONE;
1079
1080     if (   tte
1081         && tte->depth() >= ttDepth
1082         && ttValue != VALUE_NONE // Only in case of TT access race
1083         && (           PvNode ?  tte->bound() == BOUND_EXACT
1084             : ttValue >= beta ? (tte->bound() &  BOUND_LOWER)
1085                               : (tte->bound() &  BOUND_UPPER)))
1086     {
1087         ss->currentMove = ttMove; // Can be MOVE_NONE
1088         return ttValue;
1089     }
1090
1091     // Evaluate the position statically
1092     if (InCheck)
1093     {
1094         ss->staticEval = VALUE_NONE;
1095         bestValue = futilityBase = -VALUE_INFINITE;
1096     }
1097     else
1098     {
1099         if (tte)
1100         {
1101             // Never assume anything on values stored in TT
1102             if ((ss->staticEval = bestValue = tte->eval_value()) == VALUE_NONE)
1103                 ss->staticEval = bestValue = evaluate(pos);
1104
1105             // Can ttValue be used as a better position evaluation?
1106             if (ttValue != VALUE_NONE)
1107                 if (tte->bound() & (ttValue > bestValue ? BOUND_LOWER : BOUND_UPPER))
1108                     bestValue = ttValue;
1109         }
1110         else
1111             ss->staticEval = bestValue =
1112             (ss-1)->currentMove != MOVE_NULL ? evaluate(pos) : -(ss-1)->staticEval + 2 * Eval::Tempo;
1113
1114         // Stand pat. Return immediately if static value is at least beta
1115         if (bestValue >= beta)
1116         {
1117             if (!tte)
1118                 TT.store(pos.key(), value_to_tt(bestValue, ss->ply), BOUND_LOWER,
1119                          DEPTH_NONE, MOVE_NONE, ss->staticEval);
1120
1121             return bestValue;
1122         }
1123
1124         if (PvNode && bestValue > alpha)
1125             alpha = bestValue;
1126
1127         futilityBase = bestValue + 128;
1128     }
1129
1130     // Initialize a MovePicker object for the current position, and prepare
1131     // to search the moves. Because the depth is <= 0 here, only captures,
1132     // queen promotions and checks (only if depth >= DEPTH_QS_CHECKS) will
1133     // be generated.
1134     MovePicker mp(pos, ttMove, depth, History, to_sq((ss-1)->currentMove));
1135     CheckInfo ci(pos);
1136
1137     // Loop through the moves until no moves remain or a beta cutoff occurs
1138     while ((move = mp.next_move<false>()) != MOVE_NONE)
1139     {
1140       assert(is_ok(move));
1141
1142       givesCheck =  type_of(move) == NORMAL && !ci.dcCandidates
1143                   ? ci.checkSq[type_of(pos.piece_on(from_sq(move)))] & to_sq(move)
1144                   : pos.gives_check(move, ci);
1145
1146       // Futility pruning
1147       if (   !PvNode
1148           && !InCheck
1149           && !givesCheck
1150           &&  move != ttMove
1151           &&  futilityBase > -VALUE_KNOWN_WIN
1152           && !pos.advanced_pawn_push(move))
1153       {
1154           assert(type_of(move) != ENPASSANT); // Due to !pos.advanced_pawn_push
1155
1156           futilityValue = futilityBase + PieceValue[EG][pos.piece_on(to_sq(move))];
1157
1158           if (futilityValue < beta)
1159           {
1160               bestValue = std::max(bestValue, futilityValue);
1161               continue;
1162           }
1163
1164           if (futilityBase < beta && pos.see(move) <= VALUE_ZERO)
1165           {
1166               bestValue = std::max(bestValue, futilityBase);
1167               continue;
1168           }
1169       }
1170
1171       // Detect non-capture evasions that are candidates to be pruned
1172       evasionPrunable =    InCheck
1173                        &&  bestValue > VALUE_MATED_IN_MAX_PLY
1174                        && !pos.capture(move)
1175                        && !pos.can_castle(pos.side_to_move());
1176
1177       // Don't search moves with negative SEE values
1178       if (   !PvNode
1179           && (!InCheck || evasionPrunable)
1180           &&  move != ttMove
1181           &&  type_of(move) != PROMOTION
1182           &&  pos.see_sign(move) < VALUE_ZERO)
1183           continue;
1184
1185       // Check for legality just before making the move
1186       if (!pos.legal(move, ci.pinned))
1187           continue;
1188
1189       ss->currentMove = move;
1190
1191       // Make and search the move
1192       pos.do_move(move, st, ci, givesCheck);
1193       value = givesCheck ? -qsearch<NT,  true>(pos, ss+1, -beta, -alpha, depth - ONE_PLY)
1194                          : -qsearch<NT, false>(pos, ss+1, -beta, -alpha, depth - ONE_PLY);
1195       pos.undo_move(move);
1196
1197       assert(value > -VALUE_INFINITE && value < VALUE_INFINITE);
1198
1199       // Check for new best move
1200       if (value > bestValue)
1201       {
1202           bestValue = value;
1203
1204           if (value > alpha)
1205           {
1206               if (PvNode && value < beta) // Update alpha here! Always alpha < beta
1207               {
1208                   alpha = value;
1209                   bestMove = move;
1210               }
1211               else // Fail high
1212               {
1213                   TT.store(posKey, value_to_tt(value, ss->ply), BOUND_LOWER,
1214                            ttDepth, move, ss->staticEval);
1215
1216                   return value;
1217               }
1218           }
1219        }
1220     }
1221
1222     // All legal moves have been searched. A special case: If we're in check
1223     // and no legal moves were found, it is checkmate.
1224     if (InCheck && bestValue == -VALUE_INFINITE)
1225         return mated_in(ss->ply); // Plies to mate from the root
1226
1227     TT.store(posKey, value_to_tt(bestValue, ss->ply),
1228              PvNode && bestValue > oldAlpha ? BOUND_EXACT : BOUND_UPPER,
1229              ttDepth, bestMove, ss->staticEval);
1230
1231     assert(bestValue > -VALUE_INFINITE && bestValue < VALUE_INFINITE);
1232
1233     return bestValue;
1234   }
1235
1236
1237   // value_to_tt() adjusts a mate score from "plies to mate from the root" to
1238   // "plies to mate from the current position". Non-mate scores are unchanged.
1239   // The function is called before storing a value in the transposition table.
1240
1241   Value value_to_tt(Value v, int ply) {
1242
1243     assert(v != VALUE_NONE);
1244
1245     return  v >= VALUE_MATE_IN_MAX_PLY  ? v + ply
1246           : v <= VALUE_MATED_IN_MAX_PLY ? v - ply : v;
1247   }
1248
1249
1250   // value_from_tt() is the inverse of value_to_tt(): It adjusts a mate score
1251   // from the transposition table (which refers to the plies to mate/be mated
1252   // from current position) to "plies to mate/be mated from the root".
1253
1254   Value value_from_tt(Value v, int ply) {
1255
1256     return  v == VALUE_NONE             ? VALUE_NONE
1257           : v >= VALUE_MATE_IN_MAX_PLY  ? v - ply
1258           : v <= VALUE_MATED_IN_MAX_PLY ? v + ply : v;
1259   }
1260
1261
1262   // update_stats() updates killers, history, countermoves and followupmoves stats after a fail-high
1263   // of a quiet move.
1264
1265   void update_stats(const Position& pos, Stack* ss, Move move, Depth depth, Move* quiets, int quietsCnt) {
1266
1267     if (ss->killers[0] != move)
1268     {
1269         ss->killers[1] = ss->killers[0];
1270         ss->killers[0] = move;
1271     }
1272
1273     // Increase history value of the cut-off move and decrease all the other
1274     // played quiet moves.
1275     Value bonus = Value(int(depth) * int(depth));
1276     History.update(pos.moved_piece(move), to_sq(move), bonus);
1277     for (int i = 0; i < quietsCnt; ++i)
1278     {
1279         Move m = quiets[i];
1280         History.update(pos.moved_piece(m), to_sq(m), -bonus);
1281     }
1282
1283     if (is_ok((ss-1)->currentMove))
1284     {
1285         Square prevMoveSq = to_sq((ss-1)->currentMove);
1286         Countermoves.update(pos.piece_on(prevMoveSq), prevMoveSq, move);
1287     }
1288
1289     if (is_ok((ss-2)->currentMove) && (ss-1)->currentMove == (ss-1)->ttMove)
1290     {
1291         Square prevOwnMoveSq = to_sq((ss-2)->currentMove);
1292         Followupmoves.update(pos.piece_on(prevOwnMoveSq), prevOwnMoveSq, move);
1293     }
1294   }
1295
1296
1297   // When playing with a strength handicap, choose best move among the MultiPV
1298   // set using a statistical rule dependent on 'level'. Idea by Heinz van Saanen.
1299
1300   Move Skill::pick_move() {
1301
1302     static RKISS rk;
1303
1304     // PRNG sequence should be not deterministic
1305     for (int i = Time::now() % 50; i > 0; --i)
1306         rk.rand<unsigned>();
1307
1308     // RootMoves are already sorted by score in descending order
1309     int variance = std::min(RootMoves[0].score - RootMoves[MultiPV - 1].score, PawnValueMg);
1310     int weakness = 120 - 2 * level;
1311     int max_s = -VALUE_INFINITE;
1312     best = MOVE_NONE;
1313
1314     // Choose best move. For each move score we add two terms both dependent on
1315     // weakness. One deterministic and bigger for weaker moves, and one random,
1316     // then we choose the move with the resulting highest score.
1317     for (size_t i = 0; i < MultiPV; ++i)
1318     {
1319         int s = RootMoves[i].score;
1320
1321         // Don't allow crazy blunders even at very low skills
1322         if (i > 0 && RootMoves[i-1].score > s + 2 * PawnValueMg)
1323             break;
1324
1325         // This is our magic formula
1326         s += (  weakness * int(RootMoves[0].score - s)
1327               + variance * (rk.rand<unsigned>() % weakness)) / 128;
1328
1329         if (s > max_s)
1330         {
1331             max_s = s;
1332             best = RootMoves[i].pv[0];
1333         }
1334     }
1335     return best;
1336   }
1337
1338
1339   // uci_pv() formats PV information according to the UCI protocol. UCI
1340   // requires that all (if any) unsearched PV lines are sent using a previous
1341   // search score.
1342
1343   string uci_pv(const Position& pos, int depth, Value alpha, Value beta) {
1344
1345     std::stringstream ss;
1346     Time::point elapsed = Time::now() - SearchTime + 1;
1347     size_t uciPVSize = std::min((size_t)Options["MultiPV"], RootMoves.size());
1348     int selDepth = 0;
1349
1350     for (size_t i = 0; i < Threads.size(); ++i)
1351         if (Threads[i]->maxPly > selDepth)
1352             selDepth = Threads[i]->maxPly;
1353
1354     for (size_t i = 0; i < uciPVSize; ++i)
1355     {
1356         bool updated = (i <= PVIdx);
1357
1358         if (depth == 1 && !updated)
1359             continue;
1360
1361         int d   = updated ? depth : depth - 1;
1362         Value v = updated ? RootMoves[i].score : RootMoves[i].prevScore;
1363
1364         if (ss.rdbuf()->in_avail()) // Not at first line
1365             ss << "\n";
1366
1367         ss << "info depth " << d
1368            << " seldepth "  << selDepth
1369            << " score "     << (i == PVIdx ? score_to_uci(v, alpha, beta) : score_to_uci(v))
1370            << " nodes "     << pos.nodes_searched()
1371            << " nps "       << pos.nodes_searched() * 1000 / elapsed
1372            << " time "      << elapsed
1373            << " multipv "   << i + 1
1374            << " pv";
1375
1376         for (size_t j = 0; RootMoves[i].pv[j] != MOVE_NONE; ++j)
1377             ss << " " << move_to_uci(RootMoves[i].pv[j], pos.is_chess960());
1378     }
1379
1380     return ss.str();
1381   }
1382
1383 } // namespace
1384
1385
1386 /// RootMove::extract_pv_from_tt() builds a PV by adding moves from the TT table.
1387 /// We also consider both failing high nodes and BOUND_EXACT nodes here to
1388 /// ensure that we have a ponder move even when we fail high at root. This
1389 /// results in a long PV to print that is important for position analysis.
1390
1391 void RootMove::extract_pv_from_tt(Position& pos) {
1392
1393   StateInfo state[MAX_PLY_PLUS_6], *st = state;
1394   const TTEntry* tte;
1395   int ply = 1;    // At root ply is 1...
1396   Move m = pv[0]; // ...instead pv[] array starts from 0
1397   Value expectedScore = score;
1398
1399   pv.clear();
1400
1401   do {
1402       pv.push_back(m);
1403
1404       assert(MoveList<LEGAL>(pos).contains(pv[ply - 1]));
1405
1406       pos.do_move(pv[ply++ - 1], *st++);
1407       tte = TT.probe(pos.key());
1408       expectedScore = -expectedScore;
1409
1410   } while (   tte
1411            && expectedScore == value_from_tt(tte->value(), ply)
1412            && pos.pseudo_legal(m = tte->move()) // Local copy, TT could change
1413            && pos.legal(m, pos.pinned_pieces(pos.side_to_move()))
1414            && ply < MAX_PLY
1415            && (!pos.is_draw() || ply <= 2));
1416
1417   pv.push_back(MOVE_NONE); // Must be zero-terminating
1418
1419   while (--ply) pos.undo_move(pv[ply - 1]);
1420 }
1421
1422
1423 /// RootMove::insert_pv_in_tt() is called at the end of a search iteration, and
1424 /// inserts the PV back into the TT. This makes sure the old PV moves are searched
1425 /// first, even if the old TT entries have been overwritten.
1426
1427 void RootMove::insert_pv_in_tt(Position& pos) {
1428
1429   StateInfo state[MAX_PLY_PLUS_6], *st = state;
1430   const TTEntry* tte;
1431   int idx = 0; // Ply starts from 1, we need to start from 0
1432
1433   do {
1434       tte = TT.probe(pos.key());
1435
1436       if (!tte || tte->move() != pv[idx]) // Don't overwrite correct entries
1437           TT.store(pos.key(), VALUE_NONE, BOUND_NONE, DEPTH_NONE, pv[idx], VALUE_NONE);
1438
1439       assert(MoveList<LEGAL>(pos).contains(pv[idx]));
1440
1441       pos.do_move(pv[idx++], *st++);
1442
1443   } while (pv[idx] != MOVE_NONE);
1444
1445   while (idx) pos.undo_move(pv[--idx]);
1446 }
1447
1448
1449 /// Thread::idle_loop() is where the thread is parked when it has no work to do
1450
1451 void Thread::idle_loop() {
1452
1453   // Pointer 'this_sp' is not null only if we are called from split(), and not
1454   // at the thread creation. This means we are the split point's master.
1455   SplitPoint* this_sp = splitPointsSize ? activeSplitPoint : NULL;
1456
1457   assert(!this_sp || (this_sp->masterThread == this && searching));
1458
1459   while (true)
1460   {
1461       // If we are not searching, wait for a condition to be signaled instead of
1462       // wasting CPU time polling for work.
1463       while (!searching || exit)
1464       {
1465           if (exit)
1466           {
1467               assert(!this_sp);
1468               return;
1469           }
1470
1471           // Grab the lock to avoid races with Thread::notify_one()
1472           mutex.lock();
1473
1474           // If we are master and all slaves have finished then exit idle_loop
1475           if (this_sp && this_sp->slavesMask.none())
1476           {
1477               mutex.unlock();
1478               break;
1479           }
1480
1481           // Do sleep after retesting sleep conditions under lock protection. In
1482           // particular we need to avoid a deadlock in case a master thread has,
1483           // in the meanwhile, allocated us and sent the notify_one() call before
1484           // we had the chance to grab the lock.
1485           if (!searching && !exit)
1486               sleepCondition.wait(mutex);
1487
1488           mutex.unlock();
1489       }
1490
1491       // If this thread has been assigned work, launch a search
1492       if (searching)
1493       {
1494           assert(!exit);
1495
1496           Threads.mutex.lock();
1497
1498           assert(searching);
1499           assert(activeSplitPoint);
1500           SplitPoint* sp = activeSplitPoint;
1501
1502           Threads.mutex.unlock();
1503
1504           Stack stack[MAX_PLY_PLUS_6], *ss = stack+2; // To allow referencing (ss-2)
1505           Position pos(*sp->pos, this);
1506
1507           std::memcpy(ss-2, sp->ss-2, 5 * sizeof(Stack));
1508           ss->splitPoint = sp;
1509
1510           sp->mutex.lock();
1511
1512           assert(activePosition == NULL);
1513
1514           activePosition = &pos;
1515
1516           if (sp->nodeType == NonPV)
1517               search<NonPV, true>(pos, ss, sp->alpha, sp->beta, sp->depth, sp->cutNode);
1518
1519           else if (sp->nodeType == PV)
1520               search<PV, true>(pos, ss, sp->alpha, sp->beta, sp->depth, sp->cutNode);
1521
1522           else if (sp->nodeType == Root)
1523               search<Root, true>(pos, ss, sp->alpha, sp->beta, sp->depth, sp->cutNode);
1524
1525           else
1526               assert(false);
1527
1528           assert(searching);
1529
1530           searching = false;
1531           activePosition = NULL;
1532           sp->slavesMask.reset(idx);
1533           sp->allSlavesSearching = false;
1534           sp->nodes += pos.nodes_searched();
1535
1536           // Wake up the master thread so to allow it to return from the idle
1537           // loop in case we are the last slave of the split point.
1538           if (    this != sp->masterThread
1539               &&  sp->slavesMask.none())
1540           {
1541               assert(!sp->masterThread->searching);
1542               sp->masterThread->notify_one();
1543           }
1544
1545           // After releasing the lock we can't access any SplitPoint related data
1546           // in a safe way because it could have been released under our feet by
1547           // the sp master.
1548           sp->mutex.unlock();
1549
1550           // Try to late join to another split point if none of its slaves has
1551           // already finished.
1552           if (Threads.size() > 2)
1553               for (size_t i = 0; i < Threads.size(); ++i)
1554               {
1555                   const int size = Threads[i]->splitPointsSize; // Local copy
1556                   sp = size ? &Threads[i]->splitPoints[size - 1] : NULL;
1557
1558                   if (   sp
1559                       && sp->allSlavesSearching
1560                       && available_to(Threads[i]))
1561                   {
1562                       // Recheck the conditions under lock protection
1563                       Threads.mutex.lock();
1564                       sp->mutex.lock();
1565
1566                       if (   sp->allSlavesSearching
1567                           && available_to(Threads[i]))
1568                       {
1569                            sp->slavesMask.set(idx);
1570                            activeSplitPoint = sp;
1571                            searching = true;
1572                       }
1573
1574                       sp->mutex.unlock();
1575                       Threads.mutex.unlock();
1576
1577                       break; // Just a single attempt
1578                   }
1579               }
1580       }
1581
1582       // If this thread is the master of a split point and all slaves have finished
1583       // their work at this split point, return from the idle loop.
1584       if (this_sp && this_sp->slavesMask.none())
1585       {
1586           this_sp->mutex.lock();
1587           bool finished = this_sp->slavesMask.none(); // Retest under lock protection
1588           this_sp->mutex.unlock();
1589           if (finished)
1590               return;
1591       }
1592   }
1593 }
1594
1595
1596 /// check_time() is called by the timer thread when the timer triggers. It is
1597 /// used to print debug info and, more importantly, to detect when we are out of
1598 /// available time and thus stop the search.
1599
1600 void check_time() {
1601
1602   static Time::point lastInfoTime = Time::now();
1603   int64_t nodes = 0; // Workaround silly 'uninitialized' gcc warning
1604
1605   if (Time::now() - lastInfoTime >= 1000)
1606   {
1607       lastInfoTime = Time::now();
1608       dbg_print();
1609   }
1610
1611   if (Limits.ponder)
1612       return;
1613
1614   if (Limits.nodes)
1615   {
1616       Threads.mutex.lock();
1617
1618       nodes = RootPos.nodes_searched();
1619
1620       // Loop across all split points and sum accumulated SplitPoint nodes plus
1621       // all the currently active positions nodes.
1622       for (size_t i = 0; i < Threads.size(); ++i)
1623           for (int j = 0; j < Threads[i]->splitPointsSize; ++j)
1624           {
1625               SplitPoint& sp = Threads[i]->splitPoints[j];
1626
1627               sp.mutex.lock();
1628
1629               nodes += sp.nodes;
1630
1631               for (size_t idx = 0; idx < Threads.size(); ++idx)
1632                   if (sp.slavesMask.test(idx) && Threads[idx]->activePosition)
1633                       nodes += Threads[idx]->activePosition->nodes_searched();
1634
1635               sp.mutex.unlock();
1636           }
1637
1638       Threads.mutex.unlock();
1639   }
1640
1641   Time::point elapsed = Time::now() - SearchTime;
1642   bool stillAtFirstMove =    Signals.firstRootMove
1643                          && !Signals.failedLowAtRoot
1644                          &&  elapsed > TimeMgr.available_time() * 75 / 100;
1645
1646   bool noMoreTime =   elapsed > TimeMgr.maximum_time() - 2 * TimerThread::Resolution
1647                    || stillAtFirstMove;
1648
1649   if (   (Limits.use_time_management() && noMoreTime)
1650       || (Limits.movetime && elapsed >= Limits.movetime)
1651       || (Limits.nodes && nodes >= Limits.nodes))
1652       Signals.stop = true;
1653 }