]> git.sesse.net Git - stockfish/blob - src/search.cpp
Depth dependant singular extension margin
[stockfish] / src / search.cpp
1 /*
2   Stockfish, a UCI chess playing engine derived from Glaurung 2.1
3   Copyright (C) 2004-2008 Tord Romstad (Glaurung author)
4   Copyright (C) 2008-2010 Marco Costalba, Joona Kiiski, Tord Romstad
5
6   Stockfish is free software: you can redistribute it and/or modify
7   it under the terms of the GNU General Public License as published by
8   the Free Software Foundation, either version 3 of the License, or
9   (at your option) any later version.
10
11   Stockfish is distributed in the hope that it will be useful,
12   but WITHOUT ANY WARRANTY; without even the implied warranty of
13   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14   GNU General Public License for more details.
15
16   You should have received a copy of the GNU General Public License
17   along with this program.  If not, see <http://www.gnu.org/licenses/>.
18 */
19
20
21 ////
22 //// Includes
23 ////
24
25 #include <cassert>
26 #include <cmath>
27 #include <cstring>
28 #include <fstream>
29 #include <iostream>
30 #include <sstream>
31 #include <vector>
32
33 #include "book.h"
34 #include "evaluate.h"
35 #include "history.h"
36 #include "misc.h"
37 #include "move.h"
38 #include "movegen.h"
39 #include "movepick.h"
40 #include "lock.h"
41 #include "search.h"
42 #include "timeman.h"
43 #include "thread.h"
44 #include "tt.h"
45 #include "ucioption.h"
46
47 using std::cout;
48 using std::endl;
49
50 ////
51 //// Local definitions
52 ////
53
54 namespace {
55
56   // Types
57   enum NodeType { NonPV, PV };
58
59   // Set to true to force running with one thread.
60   // Used for debugging SMP code.
61   const bool FakeSplit = false;
62
63   // Fast lookup table of sliding pieces indexed by Piece
64   const bool Slidings[18] = { 0, 0, 0, 1, 1, 1, 0, 0, 0, 0, 0, 1, 1, 1 };
65   inline bool piece_is_slider(Piece p) { return Slidings[p]; }
66
67   // ThreadsManager class is used to handle all the threads related stuff in search,
68   // init, starting, parking and, the most important, launching a slave thread at a
69   // split point are what this class does. All the access to shared thread data is
70   // done through this class, so that we avoid using global variables instead.
71
72   class ThreadsManager {
73     /* As long as the single ThreadsManager object is defined as a global we don't
74        need to explicitly initialize to zero its data members because variables with
75        static storage duration are automatically set to zero before enter main()
76     */
77   public:
78     void init_threads();
79     void exit_threads();
80
81     int min_split_depth() const { return minimumSplitDepth; }
82     int active_threads() const { return activeThreads; }
83     void set_active_threads(int cnt) { activeThreads = cnt; }
84
85     void read_uci_options();
86     bool available_thread_exists(int master) const;
87     bool thread_is_available(int slave, int master) const;
88     bool cutoff_at_splitpoint(int threadID) const;
89     void wake_sleeping_thread(int threadID);
90     void idle_loop(int threadID, SplitPoint* sp);
91
92     template <bool Fake>
93     void split(Position& pos, SearchStack* ss, int ply, Value* alpha, const Value beta, Value* bestValue,
94                Depth depth, Move threatMove, bool mateThreat, int moveCount, MovePicker* mp, bool pvNode);
95
96   private:
97     Depth minimumSplitDepth;
98     int maxThreadsPerSplitPoint;
99     bool useSleepingThreads;
100     int activeThreads;
101     volatile bool allThreadsShouldExit;
102     Thread threads[MAX_THREADS];
103     Lock mpLock, sleepLock[MAX_THREADS];
104     WaitCondition sleepCond[MAX_THREADS];
105   };
106
107
108   // RootMove struct is used for moves at the root at the tree. For each root
109   // move, we store two scores, a node count, and a PV (really a refutation
110   // in the case of moves which fail low). Value pv_score is normally set at
111   // -VALUE_INFINITE for all non-pv moves, while non_pv_score is computed
112   // according to the order in which moves are returned by MovePicker.
113
114   struct RootMove {
115
116     RootMove();
117     RootMove(const RootMove& rm) { *this = rm; }
118     RootMove& operator=(const RootMove& rm);
119
120     // RootMove::operator<() is the comparison function used when
121     // sorting the moves. A move m1 is considered to be better
122     // than a move m2 if it has an higher pv_score, or if it has
123     // equal pv_score but m1 has the higher non_pv_score. In this
124     // way we are guaranteed that PV moves are always sorted as first.
125     bool operator<(const RootMove& m) const {
126       return pv_score != m.pv_score ? pv_score < m.pv_score
127                                     : non_pv_score < m.non_pv_score;
128     }
129
130     void extract_pv_from_tt(Position& pos);
131     void insert_pv_in_tt(Position& pos);
132     std::string pv_info_to_uci(Position& pos, int depth, Value alpha, Value beta, int pvLine);
133
134     int64_t nodes;
135     Value pv_score;
136     Value non_pv_score;
137     Move pv[PLY_MAX_PLUS_2];
138   };
139
140
141   // RootMoveList struct is essentially a std::vector<> of RootMove objects,
142   // with an handful of methods above the standard ones.
143
144   struct RootMoveList : public std::vector<RootMove> {
145
146     typedef std::vector<RootMove> Base;
147
148     void init(Position& pos, Move searchMoves[]);
149     void sort() { insertion_sort<RootMove, Base::iterator>(begin(), end()); }
150     void sort_multipv(int n) { insertion_sort<RootMove, Base::iterator>(begin(), begin() + n); }
151
152     int bestMoveChanges;
153   };
154
155
156   // When formatting a move for std::cout we must know if we are in Chess960
157   // or not. To keep using the handy operator<<() on the move the trick is to
158   // embed this flag in the stream itself. Function-like named enum set960 is
159   // used as a custom manipulator and the stream internal general-purpose array,
160   // accessed through ios_base::iword(), is used to pass the flag to the move's
161   // operator<<() that will use it to properly format castling moves.
162   enum set960 {};
163
164   std::ostream& operator<< (std::ostream& os, const set960& f) {
165
166     os.iword(0) = int(f);
167     return os;
168   }
169
170
171   // Overload operator << for moves to make it easier to print moves in
172   // coordinate notation compatible with UCI protocol.
173   std::ostream& operator<<(std::ostream& os, Move m) {
174
175     bool chess960 = (os.iword(0) != 0); // See set960()
176     return os << move_to_uci(m, chess960);
177   }
178
179
180   /// Adjustments
181
182   // Step 6. Razoring
183
184   // Maximum depth for razoring
185   const Depth RazorDepth = 4 * ONE_PLY;
186
187   // Dynamic razoring margin based on depth
188   inline Value razor_margin(Depth d) { return Value(0x200 + 0x10 * int(d)); }
189
190   // Maximum depth for use of dynamic threat detection when null move fails low
191   const Depth ThreatDepth = 5 * ONE_PLY;
192
193   // Step 9. Internal iterative deepening
194
195   // Minimum depth for use of internal iterative deepening
196   const Depth IIDDepth[2] = { 8 * ONE_PLY /* non-PV */, 5 * ONE_PLY /* PV */};
197
198   // At Non-PV nodes we do an internal iterative deepening search
199   // when the static evaluation is bigger then beta - IIDMargin.
200   const Value IIDMargin = Value(0x100);
201
202   // Step 11. Decide the new search depth
203
204   // Extensions. Configurable UCI options
205   // Array index 0 is used at non-PV nodes, index 1 at PV nodes.
206   Depth CheckExtension[2], PawnPushTo7thExtension[2], PassedPawnExtension[2];
207   Depth PawnEndgameExtension[2], MateThreatExtension[2];
208
209   // Minimum depth for use of singular extension
210   const Depth SingularExtensionDepth[2] = { 8 * ONE_PLY /* non-PV */, 6 * ONE_PLY /* PV */};
211
212   // Step 12. Futility pruning
213
214   // Futility margin for quiescence search
215   const Value FutilityMarginQS = Value(0x80);
216
217   // Futility lookup tables (initialized at startup) and their getter functions
218   Value FutilityMarginsMatrix[16][64]; // [depth][moveNumber]
219   int FutilityMoveCountArray[32]; // [depth]
220
221   inline Value futility_margin(Depth d, int mn) { return d < 7 * ONE_PLY ? FutilityMarginsMatrix[Max(d, 1)][Min(mn, 63)] : 2 * VALUE_INFINITE; }
222   inline int futility_move_count(Depth d) { return d < 16 * ONE_PLY ? FutilityMoveCountArray[d] : 512; }
223
224   // Step 14. Reduced search
225
226   // Reduction lookup tables (initialized at startup) and their getter functions
227   int8_t ReductionMatrix[2][64][64]; // [pv][depth][moveNumber]
228
229   template <NodeType PV>
230   inline Depth reduction(Depth d, int mn) { return (Depth) ReductionMatrix[PV][Min(d / 2, 63)][Min(mn, 63)]; }
231
232   // Easy move margin. An easy move candidate must be at least this much
233   // better than the second best move.
234   const Value EasyMoveMargin = Value(0x200);
235
236
237   /// Namespace variables
238
239   // Book object
240   Book OpeningBook;
241
242   // Root move list
243   RootMoveList Rml;
244
245   // MultiPV mode
246   int MultiPV;
247
248   // Time management variables
249   int SearchStartTime, MaxNodes, MaxDepth, ExactMaxTime;
250   bool UseTimeManagement, InfiniteSearch, Pondering, StopOnPonderhit;
251   bool FirstRootMove, StopRequest, QuitRequest, AspirationFailLow;
252   TimeManager TimeMgr;
253
254   // Log file
255   bool UseLogFile;
256   std::ofstream LogFile;
257
258   // Multi-threads manager object
259   ThreadsManager ThreadsMgr;
260
261   // Node counters, used only by thread[0] but try to keep in different cache
262   // lines (64 bytes each) from the heavy multi-thread read accessed variables.
263   bool SendSearchedNodes;
264   int NodesSincePoll;
265   int NodesBetweenPolls = 30000;
266
267   // History table
268   History H;
269
270   /// Local functions
271
272   Move id_loop(Position& pos, Move searchMoves[], Move* ponderMove);
273
274   template <NodeType PvNode, bool SpNode, bool Root>
275   Value search(Position& pos, SearchStack* ss, Value alpha, Value beta, Depth depth, int ply);
276
277   template <NodeType PvNode>
278   Value qsearch(Position& pos, SearchStack* ss, Value alpha, Value beta, Depth depth, int ply);
279
280   template <NodeType PvNode>
281   inline Value search(Position& pos, SearchStack* ss, Value alpha, Value beta, Depth depth, int ply) {
282
283       return depth < ONE_PLY ? qsearch<PvNode>(pos, ss, alpha, beta, DEPTH_ZERO, ply)
284                              : search<PvNode, false, false>(pos, ss, alpha, beta, depth, ply);
285   }
286
287   template <NodeType PvNode>
288   Depth extension(const Position& pos, Move m, bool captureOrPromotion, bool moveIsCheck, bool mateThreat, bool* dangerous);
289
290   bool check_is_dangerous(Position &pos, Move move, Value futilityBase, Value beta, Value *bValue);
291   bool connected_moves(const Position& pos, Move m1, Move m2);
292   bool value_is_mate(Value value);
293   Value value_to_tt(Value v, int ply);
294   Value value_from_tt(Value v, int ply);
295   bool ok_to_use_TT(const TTEntry* tte, Depth depth, Value beta, int ply);
296   bool connected_threat(const Position& pos, Move m, Move threat);
297   Value refine_eval(const TTEntry* tte, Value defaultEval, int ply);
298   void update_history(const Position& pos, Move move, Depth depth, Move movesSearched[], int moveCount);
299   void update_killers(Move m, Move killers[]);
300   void update_gains(const Position& pos, Move move, Value before, Value after);
301   void qsearch_scoring(Position& pos, MoveStack* mlist, MoveStack* last);
302
303   int current_search_time();
304   std::string value_to_uci(Value v);
305   std::string speed_to_uci(int64_t nodes);
306   void poll(const Position& pos);
307   void wait_for_stop_or_ponderhit();
308
309 #if !defined(_MSC_VER)
310   void* init_thread(void* threadID);
311 #else
312   DWORD WINAPI init_thread(LPVOID threadID);
313 #endif
314
315
316   // MovePickerExt is an extended MovePicker used to choose at compile time
317   // the proper move source according to the type of node.
318   template<bool SpNode, bool Root> struct MovePickerExt;
319
320   // In Root nodes use RootMoveList Rml as source. Score and sort the root moves
321   // before to search them.
322   template<> struct MovePickerExt<false, true> : public MovePicker {
323
324     MovePickerExt(const Position& p, Move ttm, Depth d, const History& h, SearchStack* ss, Value b)
325                  : MovePicker(p, ttm, d, h, ss, b), firstCall(true) {
326       Move move;
327       Value score = VALUE_ZERO;
328
329       // Score root moves using the standard way used in main search, the moves
330       // are scored according to the order in which they are returned by MovePicker.
331       // This is the second order score that is used to compare the moves when
332       // the first order pv scores of both moves are equal.
333       while ((move = MovePicker::get_next_move()) != MOVE_NONE)
334           for (rm = Rml.begin(); rm != Rml.end(); ++rm)
335               if (rm->pv[0] == move)
336               {
337                   rm->non_pv_score = score--;
338                   break;
339               }
340
341       Rml.sort();
342       rm = Rml.begin();
343     }
344
345     Move get_next_move() {
346
347       if (!firstCall)
348           ++rm;
349       else
350           firstCall = false;
351
352       return rm != Rml.end() ? rm->pv[0] : MOVE_NONE;
353     }
354
355     RootMoveList::iterator rm;
356     bool firstCall;
357   };
358
359   // In SpNodes use split point's shared MovePicker object as move source
360   template<> struct MovePickerExt<true, false> : public MovePicker {
361
362     MovePickerExt(const Position& p, Move ttm, Depth d, const History& h,
363                   SearchStack* ss, Value b) : MovePicker(p, ttm, d, h, ss, b),
364                   mp(ss->sp->mp) {}
365
366     Move get_next_move() { return mp->get_next_move(); }
367
368     RootMoveList::iterator rm; // Dummy, needed to compile
369     MovePicker* mp;
370   };
371
372   // Default case, create and use a MovePicker object as source
373   template<> struct MovePickerExt<false, false> : public MovePicker {
374
375     MovePickerExt(const Position& p, Move ttm, Depth d, const History& h,
376                   SearchStack* ss, Value b) : MovePicker(p, ttm, d, h, ss, b) {}
377
378     RootMoveList::iterator rm; // Dummy, needed to compile
379   };
380
381 } // namespace
382
383
384 ////
385 //// Functions
386 ////
387
388 /// init_threads(), exit_threads() and nodes_searched() are helpers to
389 /// give accessibility to some TM methods from outside of current file.
390
391 void init_threads() { ThreadsMgr.init_threads(); }
392 void exit_threads() { ThreadsMgr.exit_threads(); }
393
394
395 /// init_search() is called during startup. It initializes various lookup tables
396
397 void init_search() {
398
399   int d;  // depth (ONE_PLY == 2)
400   int hd; // half depth (ONE_PLY == 1)
401   int mc; // moveCount
402
403   // Init reductions array
404   for (hd = 1; hd < 64; hd++) for (mc = 1; mc < 64; mc++)
405   {
406       double    pvRed = log(double(hd)) * log(double(mc)) / 3.0;
407       double nonPVRed = 0.33 + log(double(hd)) * log(double(mc)) / 2.25;
408       ReductionMatrix[PV][hd][mc]    = (int8_t) (   pvRed >= 1.0 ? floor(   pvRed * int(ONE_PLY)) : 0);
409       ReductionMatrix[NonPV][hd][mc] = (int8_t) (nonPVRed >= 1.0 ? floor(nonPVRed * int(ONE_PLY)) : 0);
410   }
411
412   // Init futility margins array
413   for (d = 1; d < 16; d++) for (mc = 0; mc < 64; mc++)
414       FutilityMarginsMatrix[d][mc] = Value(112 * int(log(double(d * d) / 2) / log(2.0) + 1.001) - 8 * mc + 45);
415
416   // Init futility move count array
417   for (d = 0; d < 32; d++)
418       FutilityMoveCountArray[d] = int(3.001 + 0.25 * pow(d, 2.0));
419 }
420
421
422 /// perft() is our utility to verify move generation is bug free. All the legal
423 /// moves up to given depth are generated and counted and the sum returned.
424
425 int64_t perft(Position& pos, Depth depth)
426 {
427     MoveStack mlist[MOVES_MAX];
428     StateInfo st;
429     Move m;
430     int64_t sum = 0;
431
432     // Generate all legal moves
433     MoveStack* last = generate<MV_LEGAL>(pos, mlist);
434
435     // If we are at the last ply we don't need to do and undo
436     // the moves, just to count them.
437     if (depth <= ONE_PLY)
438         return int(last - mlist);
439
440     // Loop through all legal moves
441     CheckInfo ci(pos);
442     for (MoveStack* cur = mlist; cur != last; cur++)
443     {
444         m = cur->move;
445         pos.do_move(m, st, ci, pos.move_is_check(m, ci));
446         sum += perft(pos, depth - ONE_PLY);
447         pos.undo_move(m);
448     }
449     return sum;
450 }
451
452
453 /// think() is the external interface to Stockfish's search, and is called when
454 /// the program receives the UCI 'go' command. It initializes various
455 /// search-related global variables, and calls id_loop(). It returns false
456 /// when a quit command is received during the search.
457
458 bool think(Position& pos, bool infinite, bool ponder, int time[], int increment[],
459            int movesToGo, int maxDepth, int maxNodes, int maxTime, Move searchMoves[]) {
460
461   // Initialize global search variables
462   StopOnPonderhit = StopRequest = QuitRequest = AspirationFailLow = SendSearchedNodes = false;
463   NodesSincePoll = 0;
464   SearchStartTime = get_system_time();
465   ExactMaxTime = maxTime;
466   MaxDepth = maxDepth;
467   MaxNodes = maxNodes;
468   InfiniteSearch = infinite;
469   Pondering = ponder;
470   UseTimeManagement = !ExactMaxTime && !MaxDepth && !MaxNodes && !InfiniteSearch;
471
472   // Look for a book move, only during games, not tests
473   if (UseTimeManagement && Options["OwnBook"].value<bool>())
474   {
475       if (Options["Book File"].value<std::string>() != OpeningBook.name())
476           OpeningBook.open(Options["Book File"].value<std::string>());
477
478       Move bookMove = OpeningBook.get_move(pos, Options["Best Book Move"].value<bool>());
479       if (bookMove != MOVE_NONE)
480       {
481           if (Pondering)
482               wait_for_stop_or_ponderhit();
483
484           cout << "bestmove " << bookMove << endl;
485           return !QuitRequest;
486       }
487   }
488
489   // Read UCI option values
490   TT.set_size(Options["Hash"].value<int>());
491   if (Options["Clear Hash"].value<bool>())
492   {
493       Options["Clear Hash"].set_value("false");
494       TT.clear();
495   }
496
497   CheckExtension[1]         = Options["Check Extension (PV nodes)"].value<Depth>();
498   CheckExtension[0]         = Options["Check Extension (non-PV nodes)"].value<Depth>();
499   PawnPushTo7thExtension[1] = Options["Pawn Push to 7th Extension (PV nodes)"].value<Depth>();
500   PawnPushTo7thExtension[0] = Options["Pawn Push to 7th Extension (non-PV nodes)"].value<Depth>();
501   PassedPawnExtension[1]    = Options["Passed Pawn Extension (PV nodes)"].value<Depth>();
502   PassedPawnExtension[0]    = Options["Passed Pawn Extension (non-PV nodes)"].value<Depth>();
503   PawnEndgameExtension[1]   = Options["Pawn Endgame Extension (PV nodes)"].value<Depth>();
504   PawnEndgameExtension[0]   = Options["Pawn Endgame Extension (non-PV nodes)"].value<Depth>();
505   MateThreatExtension[1]    = Options["Mate Threat Extension (PV nodes)"].value<Depth>();
506   MateThreatExtension[0]    = Options["Mate Threat Extension (non-PV nodes)"].value<Depth>();
507   MultiPV                   = Options["MultiPV"].value<int>();
508   UseLogFile                = Options["Use Search Log"].value<bool>();
509
510   read_evaluation_uci_options(pos.side_to_move());
511
512   // Set the number of active threads
513   ThreadsMgr.read_uci_options();
514   init_eval(ThreadsMgr.active_threads());
515
516   // Wake up needed threads
517   for (int i = 1; i < ThreadsMgr.active_threads(); i++)
518       ThreadsMgr.wake_sleeping_thread(i);
519
520   // Set thinking time
521   int myTime = time[pos.side_to_move()];
522   int myIncrement = increment[pos.side_to_move()];
523   if (UseTimeManagement)
524       TimeMgr.init(myTime, myIncrement, movesToGo, pos.startpos_ply_counter());
525
526   // Set best NodesBetweenPolls interval to avoid lagging under
527   // heavy time pressure.
528   if (MaxNodes)
529       NodesBetweenPolls = Min(MaxNodes, 30000);
530   else if (myTime && myTime < 1000)
531       NodesBetweenPolls = 1000;
532   else if (myTime && myTime < 5000)
533       NodesBetweenPolls = 5000;
534   else
535       NodesBetweenPolls = 30000;
536
537   // Write search information to log file
538   if (UseLogFile)
539   {
540       std::string name = Options["Search Log Filename"].value<std::string>();
541       LogFile.open(name.c_str(), std::ios::out | std::ios::app);
542
543       LogFile << "\nSearching: "  << pos.to_fen()
544               << "\ninfinite: "   << infinite
545               << " ponder: "      << ponder
546               << " time: "        << myTime
547               << " increment: "   << myIncrement
548               << " moves to go: " << movesToGo
549               << endl;
550   }
551
552   // We're ready to start thinking. Call the iterative deepening loop function
553   Move ponderMove = MOVE_NONE;
554   Move bestMove = id_loop(pos, searchMoves, &ponderMove);
555
556   // Print final search statistics
557   cout << "info" << speed_to_uci(pos.nodes_searched()) << endl;
558
559   if (UseLogFile)
560   {
561       int t = current_search_time();
562
563       LogFile << "Nodes: "          << pos.nodes_searched()
564               << "\nNodes/second: " << (t > 0 ? int(pos.nodes_searched() * 1000 / t) : 0)
565               << "\nBest move: "    << move_to_san(pos, bestMove);
566
567       StateInfo st;
568       pos.do_move(bestMove, st);
569       LogFile << "\nPonder move: " << move_to_san(pos, ponderMove) << endl;
570       pos.undo_move(bestMove); // Return from think() with unchanged position
571       LogFile.close();
572   }
573
574   // This makes all the threads to go to sleep
575   ThreadsMgr.set_active_threads(1);
576
577   // If we are pondering or in infinite search, we shouldn't print the
578   // best move before we are told to do so.
579   if (!StopRequest && (Pondering || InfiniteSearch))
580       wait_for_stop_or_ponderhit();
581
582   // Could be both MOVE_NONE when searching on a stalemate position
583   cout << "bestmove " << bestMove << " ponder " << ponderMove << endl;
584
585   return !QuitRequest;
586 }
587
588
589 namespace {
590
591   // id_loop() is the main iterative deepening loop. It calls search() repeatedly
592   // with increasing depth until the allocated thinking time has been consumed,
593   // user stops the search, or the maximum search depth is reached.
594
595   Move id_loop(Position& pos, Move searchMoves[], Move* ponderMove) {
596
597     SearchStack ss[PLY_MAX_PLUS_2];
598     Value bestValues[PLY_MAX_PLUS_2];
599     int bestMoveChanges[PLY_MAX_PLUS_2];
600     int depth, researchCountFL, researchCountFH, aspirationDelta;
601     Value value, alpha, beta;
602     Move bestMove, easyMove;
603
604     // Moves to search are verified, scored and sorted
605     Rml.init(pos, searchMoves);
606
607     // Initialize FIXME move before Rml.init()
608     TT.new_search();
609     H.clear();
610     memset(ss, 0, 4 * sizeof(SearchStack));
611     *ponderMove = bestMove = easyMove = MOVE_NONE;
612     depth = aspirationDelta = 0;
613     ss->currentMove = MOVE_NULL; // Hack to skip update_gains()
614     alpha = -VALUE_INFINITE, beta = VALUE_INFINITE;
615
616     // Handle special case of searching on a mate/stalemate position
617     if (Rml.size() == 0)
618     {
619         cout << "info depth 0 score "
620              << value_to_uci(pos.is_check() ? -VALUE_MATE : VALUE_DRAW)
621              << endl;
622
623         return MOVE_NONE;
624     }
625
626     // Is one move significantly better than others after initial scoring ?
627     if (   Rml.size() == 1
628         || Rml[0].pv_score > Rml[1].pv_score + EasyMoveMargin)
629         easyMove = Rml[0].pv[0];
630
631     // Iterative deepening loop
632     while (++depth <= PLY_MAX && (!MaxDepth || depth <= MaxDepth) && !StopRequest)
633     {
634         Rml.bestMoveChanges = researchCountFL = researchCountFH = 0;
635         cout << "info depth " << depth << endl;
636
637         // Calculate dynamic aspiration window based on previous iterations
638         if (MultiPV == 1 && depth >= 5 && abs(bestValues[depth - 1]) < VALUE_KNOWN_WIN)
639         {
640             int prevDelta1 = bestValues[depth - 1] - bestValues[depth - 2];
641             int prevDelta2 = bestValues[depth - 2] - bestValues[depth - 3];
642
643             aspirationDelta = Min(Max(abs(prevDelta1) + abs(prevDelta2) / 2, 16), 24);
644             aspirationDelta = (aspirationDelta + 7) / 8 * 8; // Round to match grainSize
645
646             alpha = Max(bestValues[depth - 1] - aspirationDelta, -VALUE_INFINITE);
647             beta  = Min(bestValues[depth - 1] + aspirationDelta,  VALUE_INFINITE);
648         }
649
650         // Start with a small aspiration window and, in case of fail high/low,
651         // research with bigger window until not failing high/low anymore.
652         while (true)
653         {
654             // Search starting from ss+1 to allow calling update_gains()
655             value = search<PV, false, true>(pos, ss+1, alpha, beta, depth * ONE_PLY, 0);
656
657             // Send PV line to GUI and write to transposition table in case the
658             // relevant entries have been overwritten during the search.
659             for (int i = 0; i < Min(MultiPV, (int)Rml.size()); i++)
660             {
661                 Rml[i].insert_pv_in_tt(pos);
662                 cout << set960(pos.is_chess960())
663                      << Rml[i].pv_info_to_uci(pos, depth, alpha, beta, i) << endl;
664             }
665
666             // Value cannot be trusted. Break out immediately!
667             if (StopRequest)
668                 break;
669
670             assert(value >= alpha);
671
672             // In case of failing high/low increase aspiration window and research,
673             // otherwise exit the fail high/low loop.
674             if (value >= beta)
675             {
676                 beta = Min(beta + aspirationDelta * (1 << researchCountFH), VALUE_INFINITE);
677                 researchCountFH++;
678             }
679             else if (value <= alpha)
680             {
681                 AspirationFailLow = true;
682                 StopOnPonderhit = false;
683
684                 alpha = Max(alpha - aspirationDelta * (1 << researchCountFL), -VALUE_INFINITE);
685                 researchCountFL++;
686             }
687             else
688                 break;
689         }
690
691         // Collect info about search result
692         bestMove = Rml[0].pv[0];
693         bestValues[depth] = value;
694         bestMoveChanges[depth] = Rml.bestMoveChanges;
695
696         if (UseLogFile)
697             LogFile << pretty_pv(pos, depth, value, current_search_time(), Rml[0].pv) << endl;
698
699         // Drop the easy move if differs from the new best move
700         if (bestMove != easyMove)
701             easyMove = MOVE_NONE;
702
703         if (UseTimeManagement && !StopRequest)
704         {
705             // Time to stop?
706             bool noMoreTime = false;
707
708             // Stop search early when the last two iterations returned a mate score
709             if (   depth >= 5
710                 && abs(bestValues[depth])     >= abs(VALUE_MATE) - 100
711                 && abs(bestValues[depth - 1]) >= abs(VALUE_MATE) - 100)
712                 noMoreTime = true;
713
714             // Stop search early if one move seems to be much better than the
715             // others or if there is only a single legal move. In this latter
716             // case we search up to Iteration 8 anyway to get a proper score.
717             if (   depth >= 7
718                 && easyMove == bestMove
719                 && (   Rml.size() == 1
720                     ||(   Rml[0].nodes > (pos.nodes_searched() * 85) / 100
721                        && current_search_time() > TimeMgr.available_time() / 16)
722                     ||(   Rml[0].nodes > (pos.nodes_searched() * 98) / 100
723                        && current_search_time() > TimeMgr.available_time() / 32)))
724                 noMoreTime = true;
725
726             // Add some extra time if the best move has changed during the last two iterations
727             if (depth > 4 && depth < 50)
728                 TimeMgr.pv_instability(bestMoveChanges[depth], bestMoveChanges[depth-1]);
729
730             // Stop search if most of MaxSearchTime is consumed at the end of the
731             // iteration. We probably don't have enough time to search the first
732             // move at the next iteration anyway.
733             if (current_search_time() > (TimeMgr.available_time() * 80) / 128)
734                 noMoreTime = true;
735
736             if (noMoreTime)
737             {
738                 if (Pondering)
739                     StopOnPonderhit = true;
740                 else
741                     break;
742             }
743         }
744     }
745
746     *ponderMove = Rml[0].pv[1];
747     return bestMove;
748   }
749
750
751   // search<>() is the main search function for both PV and non-PV nodes and for
752   // normal and SplitPoint nodes. When called just after a split point the search
753   // is simpler because we have already probed the hash table, done a null move
754   // search, and searched the first move before splitting, we don't have to repeat
755   // all this work again. We also don't need to store anything to the hash table
756   // here: This is taken care of after we return from the split point.
757
758   template <NodeType PvNode, bool SpNode, bool Root>
759   Value search(Position& pos, SearchStack* ss, Value alpha, Value beta, Depth depth, int ply) {
760
761     assert(alpha >= -VALUE_INFINITE && alpha <= VALUE_INFINITE);
762     assert(beta > alpha && beta <= VALUE_INFINITE);
763     assert(PvNode || alpha == beta - 1);
764     assert((Root || ply > 0) && ply < PLY_MAX);
765     assert(pos.thread() >= 0 && pos.thread() < ThreadsMgr.active_threads());
766
767     Move movesSearched[MOVES_MAX];
768     int64_t nodes;
769     StateInfo st;
770     const TTEntry *tte;
771     Key posKey;
772     Move ttMove, move, excludedMove, threatMove;
773     Depth ext, newDepth;
774     ValueType vt;
775     Value bestValue, value, oldAlpha;
776     Value refinedValue, nullValue, futilityBase, futilityValueScaled; // Non-PV specific
777     bool isPvMove, isCheck, singularExtensionNode, moveIsCheck, captureOrPromotion, dangerous;
778     bool mateThreat = false;
779     int moveCount = 0, playedMoveCount = 0;
780     int threadID = pos.thread();
781     SplitPoint* sp = NULL;
782
783     refinedValue = bestValue = value = -VALUE_INFINITE;
784     oldAlpha = alpha;
785     isCheck = pos.is_check();
786
787     if (SpNode)
788     {
789         sp = ss->sp;
790         tte = NULL;
791         ttMove = excludedMove = MOVE_NONE;
792         threatMove = sp->threatMove;
793         mateThreat = sp->mateThreat;
794         goto split_point_start;
795     }
796     else if (Root)
797         bestValue = alpha;
798
799     // Step 1. Initialize node and poll. Polling can abort search
800     ss->currentMove = ss->bestMove = threatMove = (ss+1)->excludedMove = MOVE_NONE;
801     (ss+1)->skipNullMove = false; (ss+1)->reduction = DEPTH_ZERO;
802     (ss+2)->killers[0] = (ss+2)->killers[1] = (ss+2)->mateKiller = MOVE_NONE;
803
804     if (threadID == 0 && ++NodesSincePoll > NodesBetweenPolls)
805     {
806         NodesSincePoll = 0;
807         poll(pos);
808     }
809
810     // Step 2. Check for aborted search and immediate draw
811     if ((   StopRequest
812          || ThreadsMgr.cutoff_at_splitpoint(threadID)
813          || pos.is_draw()
814          || ply >= PLY_MAX - 1) && !Root)
815         return VALUE_DRAW;
816
817     // Step 3. Mate distance pruning
818     alpha = Max(value_mated_in(ply), alpha);
819     beta = Min(value_mate_in(ply+1), beta);
820     if (alpha >= beta)
821         return alpha;
822
823     // Step 4. Transposition table lookup
824     // We don't want the score of a partial search to overwrite a previous full search
825     // TT value, so we use a different position key in case of an excluded move.
826     excludedMove = ss->excludedMove;
827     posKey = excludedMove ? pos.get_exclusion_key() : pos.get_key();
828
829     tte = TT.retrieve(posKey);
830     ttMove = tte ? tte->move() : MOVE_NONE;
831
832     // At PV nodes we check for exact scores, while at non-PV nodes we check for
833     // and return a fail high/low. Biggest advantage at probing at PV nodes is
834     // to have a smooth experience in analysis mode.
835     if (   !Root
836         && tte
837         && (PvNode ? tte->depth() >= depth && tte->type() == VALUE_TYPE_EXACT
838                    : ok_to_use_TT(tte, depth, beta, ply)))
839     {
840         TT.refresh(tte);
841         ss->bestMove = ttMove; // Can be MOVE_NONE
842         return value_from_tt(tte->value(), ply);
843     }
844
845     // Step 5. Evaluate the position statically and
846     // update gain statistics of parent move.
847     if (isCheck)
848         ss->eval = ss->evalMargin = VALUE_NONE;
849     else if (tte)
850     {
851         assert(tte->static_value() != VALUE_NONE);
852
853         ss->eval = tte->static_value();
854         ss->evalMargin = tte->static_value_margin();
855         refinedValue = refine_eval(tte, ss->eval, ply);
856     }
857     else
858     {
859         refinedValue = ss->eval = evaluate(pos, ss->evalMargin);
860         TT.store(posKey, VALUE_NONE, VALUE_TYPE_NONE, DEPTH_NONE, MOVE_NONE, ss->eval, ss->evalMargin);
861     }
862
863     // Save gain for the parent non-capture move
864     update_gains(pos, (ss-1)->currentMove, (ss-1)->eval, ss->eval);
865
866     // Step 6. Razoring (is omitted in PV nodes)
867     if (   !PvNode
868         &&  depth < RazorDepth
869         && !isCheck
870         &&  refinedValue < beta - razor_margin(depth)
871         &&  ttMove == MOVE_NONE
872         && !value_is_mate(beta)
873         && !pos.has_pawn_on_7th(pos.side_to_move()))
874     {
875         Value rbeta = beta - razor_margin(depth);
876         Value v = qsearch<NonPV>(pos, ss, rbeta-1, rbeta, DEPTH_ZERO, ply);
877         if (v < rbeta)
878             // Logically we should return (v + razor_margin(depth)), but
879             // surprisingly this did slightly weaker in tests.
880             return v;
881     }
882
883     // Step 7. Static null move pruning (is omitted in PV nodes)
884     // We're betting that the opponent doesn't have a move that will reduce
885     // the score by more than futility_margin(depth) if we do a null move.
886     if (   !PvNode
887         && !ss->skipNullMove
888         &&  depth < RazorDepth
889         && !isCheck
890         &&  refinedValue >= beta + futility_margin(depth, 0)
891         && !value_is_mate(beta)
892         &&  pos.non_pawn_material(pos.side_to_move()))
893         return refinedValue - futility_margin(depth, 0);
894
895     // Step 8. Null move search with verification search (is omitted in PV nodes)
896     if (   !PvNode
897         && !ss->skipNullMove
898         &&  depth > ONE_PLY
899         && !isCheck
900         &&  refinedValue >= beta
901         && !value_is_mate(beta)
902         &&  pos.non_pawn_material(pos.side_to_move()))
903     {
904         ss->currentMove = MOVE_NULL;
905
906         // Null move dynamic reduction based on depth
907         int R = 3 + (depth >= 5 * ONE_PLY ? depth / 8 : 0);
908
909         // Null move dynamic reduction based on value
910         if (refinedValue - beta > PawnValueMidgame)
911             R++;
912
913         pos.do_null_move(st);
914         (ss+1)->skipNullMove = true;
915         nullValue = -search<NonPV>(pos, ss+1, -beta, -alpha, depth-R*ONE_PLY, ply+1);
916         (ss+1)->skipNullMove = false;
917         pos.undo_null_move();
918
919         if (nullValue >= beta)
920         {
921             // Do not return unproven mate scores
922             if (nullValue >= value_mate_in(PLY_MAX))
923                 nullValue = beta;
924
925             if (depth < 6 * ONE_PLY)
926                 return nullValue;
927
928             // Do verification search at high depths
929             ss->skipNullMove = true;
930             Value v = search<NonPV>(pos, ss, alpha, beta, depth-R*ONE_PLY, ply);
931             ss->skipNullMove = false;
932
933             if (v >= beta)
934                 return nullValue;
935         }
936         else
937         {
938             // The null move failed low, which means that we may be faced with
939             // some kind of threat. If the previous move was reduced, check if
940             // the move that refuted the null move was somehow connected to the
941             // move which was reduced. If a connection is found, return a fail
942             // low score (which will cause the reduced move to fail high in the
943             // parent node, which will trigger a re-search with full depth).
944             if (nullValue == value_mated_in(ply + 2))
945                 mateThreat = true;
946
947             threatMove = (ss+1)->bestMove;
948             if (   depth < ThreatDepth
949                 && (ss-1)->reduction
950                 && threatMove != MOVE_NONE
951                 && connected_moves(pos, (ss-1)->currentMove, threatMove))
952                 return beta - 1;
953         }
954     }
955
956     // Step 9. Internal iterative deepening
957     if (   depth >= IIDDepth[PvNode]
958         && ttMove == MOVE_NONE
959         && (PvNode || (!isCheck && ss->eval >= beta - IIDMargin)))
960     {
961         Depth d = (PvNode ? depth - 2 * ONE_PLY : depth / 2);
962
963         ss->skipNullMove = true;
964         search<PvNode>(pos, ss, alpha, beta, d, ply);
965         ss->skipNullMove = false;
966
967         ttMove = ss->bestMove;
968         tte = TT.retrieve(posKey);
969     }
970
971     // Expensive mate threat detection (only for PV nodes)
972     if (PvNode)
973         mateThreat = pos.has_mate_threat();
974
975 split_point_start: // At split points actual search starts from here
976
977     // Initialize a MovePicker object for the current position
978     MovePickerExt<SpNode, Root> mp(pos, ttMove, depth, H, ss, (PvNode ? -VALUE_INFINITE : beta));
979     CheckInfo ci(pos);
980     ss->bestMove = MOVE_NONE;
981     futilityBase = ss->eval + ss->evalMargin;
982     singularExtensionNode =   !Root
983                            && !SpNode
984                            && depth >= SingularExtensionDepth[PvNode]
985                            && tte
986                            && tte->move()
987                            && !excludedMove // Do not allow recursive singular extension search
988                            && (tte->type() & VALUE_TYPE_LOWER)
989                            && tte->depth() >= depth - 3 * ONE_PLY;
990     if (SpNode)
991     {
992         lock_grab(&(sp->lock));
993         bestValue = sp->bestValue;
994     }
995
996     // Step 10. Loop through moves
997     // Loop through all legal moves until no moves remain or a beta cutoff occurs
998     while (   bestValue < beta
999            && (move = mp.get_next_move()) != MOVE_NONE
1000            && !ThreadsMgr.cutoff_at_splitpoint(threadID))
1001     {
1002       assert(move_is_ok(move));
1003
1004       if (SpNode)
1005       {
1006           moveCount = ++sp->moveCount;
1007           lock_release(&(sp->lock));
1008       }
1009       else if (move == excludedMove)
1010           continue;
1011       else
1012           moveCount++;
1013
1014       if (Root)
1015       {
1016           // This is used by time management
1017           FirstRootMove = (moveCount == 1);
1018
1019           // Save the current node count before the move is searched
1020           nodes = pos.nodes_searched();
1021
1022           // If it's time to send nodes info, do it here where we have the
1023           // correct accumulated node counts searched by each thread.
1024           if (SendSearchedNodes)
1025           {
1026               SendSearchedNodes = false;
1027               cout << "info" << speed_to_uci(pos.nodes_searched()) << endl;
1028           }
1029
1030           if (current_search_time() >= 1000)
1031               cout << "info currmove " << move
1032                    << " currmovenumber " << moveCount << endl;
1033       }
1034
1035       isPvMove = (PvNode && moveCount <= (Root ? MultiPV : 1));
1036       moveIsCheck = pos.move_is_check(move, ci);
1037       captureOrPromotion = pos.move_is_capture_or_promotion(move);
1038
1039       // Step 11. Decide the new search depth
1040       ext = extension<PvNode>(pos, move, captureOrPromotion, moveIsCheck, mateThreat, &dangerous);
1041
1042       // Singular extension search. If all moves but one fail low on a search of (alpha-s, beta-s),
1043       // and just one fails high on (alpha, beta), then that move is singular and should be extended.
1044       // To verify this we do a reduced search on all the other moves but the ttMove, if result is
1045       // lower than ttValue minus a margin then we extend ttMove.
1046       if (   singularExtensionNode
1047           && move == tte->move()
1048           && ext < ONE_PLY)
1049       {
1050           Value ttValue = value_from_tt(tte->value(), ply);
1051
1052           if (abs(ttValue) < VALUE_KNOWN_WIN)
1053           {
1054               Value b = ttValue - depth;
1055               ss->excludedMove = move;
1056               ss->skipNullMove = true;
1057               Value v = search<NonPV>(pos, ss, b - 1, b, depth / 2, ply);
1058               ss->skipNullMove = false;
1059               ss->excludedMove = MOVE_NONE;
1060               ss->bestMove = MOVE_NONE;
1061               if (v < b)
1062                   ext = ONE_PLY;
1063           }
1064       }
1065
1066       // Update current move (this must be done after singular extension search)
1067       ss->currentMove = move;
1068       newDepth = depth - ONE_PLY + ext;
1069
1070       // Step 12. Futility pruning (is omitted in PV nodes)
1071       if (   !PvNode
1072           && !captureOrPromotion
1073           && !isCheck
1074           && !dangerous
1075           &&  move != ttMove
1076           && !move_is_castle(move))
1077       {
1078           // Move count based pruning
1079           if (   moveCount >= futility_move_count(depth)
1080               && !(threatMove && connected_threat(pos, move, threatMove))
1081               && bestValue > value_mated_in(PLY_MAX)) // FIXME bestValue is racy
1082           {
1083               if (SpNode)
1084                   lock_grab(&(sp->lock));
1085
1086               continue;
1087           }
1088
1089           // Value based pruning
1090           // We illogically ignore reduction condition depth >= 3*ONE_PLY for predicted depth,
1091           // but fixing this made program slightly weaker.
1092           Depth predictedDepth = newDepth - reduction<NonPV>(depth, moveCount);
1093           futilityValueScaled =  futilityBase + futility_margin(predictedDepth, moveCount)
1094                                + H.gain(pos.piece_on(move_from(move)), move_to(move));
1095
1096           if (futilityValueScaled < beta)
1097           {
1098               if (SpNode)
1099               {
1100                   lock_grab(&(sp->lock));
1101                   if (futilityValueScaled > sp->bestValue)
1102                       sp->bestValue = bestValue = futilityValueScaled;
1103               }
1104               else if (futilityValueScaled > bestValue)
1105                   bestValue = futilityValueScaled;
1106
1107               continue;
1108           }
1109
1110           // Prune moves with negative SEE at low depths
1111           if (   predictedDepth < 2 * ONE_PLY
1112               && bestValue > value_mated_in(PLY_MAX)
1113               && pos.see_sign(move) < 0)
1114           {
1115               if (SpNode)
1116                   lock_grab(&(sp->lock));
1117
1118               continue;
1119           }
1120       }
1121
1122       // Step 13. Make the move
1123       pos.do_move(move, st, ci, moveIsCheck);
1124
1125       if (!SpNode && !captureOrPromotion)
1126           movesSearched[playedMoveCount++] = move;
1127
1128       // Step extra. pv search (only in PV nodes)
1129       // The first move in list is the expected PV
1130       if (isPvMove)
1131       {
1132           // Aspiration window is disabled in multi-pv case
1133           if (Root && MultiPV > 1)
1134               alpha = -VALUE_INFINITE;
1135
1136           value = -search<PV>(pos, ss+1, -beta, -alpha, newDepth, ply+1);
1137       }
1138       else
1139       {
1140           // Step 14. Reduced depth search
1141           // If the move fails high will be re-searched at full depth.
1142           bool doFullDepthSearch = true;
1143
1144           if (    depth >= 3 * ONE_PLY
1145               && !captureOrPromotion
1146               && !dangerous
1147               && !move_is_castle(move)
1148               &&  ss->killers[0] != move
1149               &&  ss->killers[1] != move)
1150           {
1151               ss->reduction = reduction<PvNode>(depth, moveCount);
1152               if (ss->reduction)
1153               {
1154                   alpha = SpNode ? sp->alpha : alpha;
1155                   Depth d = newDepth - ss->reduction;
1156                   value = -search<NonPV>(pos, ss+1, -(alpha+1), -alpha, d, ply+1);
1157
1158                   doFullDepthSearch = (value > alpha);
1159               }
1160               ss->reduction = DEPTH_ZERO; // Restore original reduction
1161           }
1162
1163           // Step 15. Full depth search
1164           if (doFullDepthSearch)
1165           {
1166               alpha = SpNode ? sp->alpha : alpha;
1167               value = -search<NonPV>(pos, ss+1, -(alpha+1), -alpha, newDepth, ply+1);
1168
1169               // Step extra. pv search (only in PV nodes)
1170               // Search only for possible new PV nodes, if instead value >= beta then
1171               // parent node fails low with value <= alpha and tries another move.
1172               if (PvNode && value > alpha && (Root || value < beta))
1173                   value = -search<PV>(pos, ss+1, -beta, -alpha, newDepth, ply+1);
1174           }
1175       }
1176
1177       // Step 16. Undo move
1178       pos.undo_move(move);
1179
1180       assert(value > -VALUE_INFINITE && value < VALUE_INFINITE);
1181
1182       // Step 17. Check for new best move
1183       if (SpNode)
1184       {
1185           lock_grab(&(sp->lock));
1186           bestValue = sp->bestValue;
1187           alpha = sp->alpha;
1188       }
1189
1190       if (value > bestValue && !(SpNode && ThreadsMgr.cutoff_at_splitpoint(threadID)))
1191       {
1192           bestValue = value;
1193
1194           if (SpNode)
1195               sp->bestValue = value;
1196
1197           if (!Root && value > alpha)
1198           {
1199               if (PvNode && value < beta) // We want always alpha < beta
1200               {
1201                   alpha = value;
1202
1203                   if (SpNode)
1204                       sp->alpha = value;
1205               }
1206               else if (SpNode)
1207                   sp->betaCutoff = true;
1208
1209               if (value == value_mate_in(ply + 1))
1210                   ss->mateKiller = move;
1211
1212               ss->bestMove = move;
1213
1214               if (SpNode)
1215                   sp->ss->bestMove = move;
1216           }
1217       }
1218
1219       if (Root)
1220       {
1221           // Finished searching the move. If StopRequest is true, the search
1222           // was aborted because the user interrupted the search or because we
1223           // ran out of time. In this case, the return value of the search cannot
1224           // be trusted, and we break out of the loop without updating the best
1225           // move and/or PV.
1226           if (StopRequest)
1227               break;
1228
1229           // Remember searched nodes counts for this move
1230           mp.rm->nodes += pos.nodes_searched() - nodes;
1231
1232           // PV move or new best move ?
1233           if (isPvMove || value > alpha)
1234           {
1235               // Update PV
1236               ss->bestMove = move;
1237               mp.rm->pv_score = value;
1238               mp.rm->extract_pv_from_tt(pos);
1239
1240               // We record how often the best move has been changed in each
1241               // iteration. This information is used for time management: When
1242               // the best move changes frequently, we allocate some more time.
1243               if (!isPvMove && MultiPV == 1)
1244                   Rml.bestMoveChanges++;
1245
1246               Rml.sort_multipv(moveCount);
1247
1248               // Update alpha. In multi-pv we don't use aspiration window, so
1249               // set alpha equal to minimum score among the PV lines.
1250               if (MultiPV > 1)
1251                   alpha = Rml[Min(moveCount, MultiPV) - 1].pv_score; // FIXME why moveCount?
1252               else if (value > alpha)
1253                   alpha = value;
1254           }
1255           else
1256               mp.rm->pv_score = -VALUE_INFINITE;
1257
1258       } // Root
1259
1260       // Step 18. Check for split
1261       if (   !Root
1262           && !SpNode
1263           && depth >= ThreadsMgr.min_split_depth()
1264           && ThreadsMgr.active_threads() > 1
1265           && bestValue < beta
1266           && ThreadsMgr.available_thread_exists(threadID)
1267           && !StopRequest
1268           && !ThreadsMgr.cutoff_at_splitpoint(threadID))
1269           ThreadsMgr.split<FakeSplit>(pos, ss, ply, &alpha, beta, &bestValue, depth,
1270                                       threatMove, mateThreat, moveCount, &mp, PvNode);
1271     }
1272
1273     // Step 19. Check for mate and stalemate
1274     // All legal moves have been searched and if there are
1275     // no legal moves, it must be mate or stalemate.
1276     // If one move was excluded return fail low score.
1277     if (!SpNode && !moveCount)
1278         return excludedMove ? oldAlpha : isCheck ? value_mated_in(ply) : VALUE_DRAW;
1279
1280     // Step 20. Update tables
1281     // If the search is not aborted, update the transposition table,
1282     // history counters, and killer moves.
1283     if (!SpNode && !StopRequest && !ThreadsMgr.cutoff_at_splitpoint(threadID))
1284     {
1285         move = bestValue <= oldAlpha ? MOVE_NONE : ss->bestMove;
1286         vt   = bestValue <= oldAlpha ? VALUE_TYPE_UPPER
1287              : bestValue >= beta ? VALUE_TYPE_LOWER : VALUE_TYPE_EXACT;
1288
1289         TT.store(posKey, value_to_tt(bestValue, ply), vt, depth, move, ss->eval, ss->evalMargin);
1290
1291         // Update killers and history only for non capture moves that fails high
1292         if (    bestValue >= beta
1293             && !pos.move_is_capture_or_promotion(move))
1294         {
1295             update_history(pos, move, depth, movesSearched, playedMoveCount);
1296             update_killers(move, ss->killers);
1297         }
1298     }
1299
1300     if (SpNode)
1301     {
1302         // Here we have the lock still grabbed
1303         sp->slaves[threadID] = 0;
1304         sp->nodes += pos.nodes_searched();
1305         lock_release(&(sp->lock));
1306     }
1307
1308     assert(bestValue > -VALUE_INFINITE && bestValue < VALUE_INFINITE);
1309
1310     return bestValue;
1311   }
1312
1313   // qsearch() is the quiescence search function, which is called by the main
1314   // search function when the remaining depth is zero (or, to be more precise,
1315   // less than ONE_PLY).
1316
1317   template <NodeType PvNode>
1318   Value qsearch(Position& pos, SearchStack* ss, Value alpha, Value beta, Depth depth, int ply) {
1319
1320     assert(alpha >= -VALUE_INFINITE && alpha <= VALUE_INFINITE);
1321     assert(beta >= -VALUE_INFINITE && beta <= VALUE_INFINITE);
1322     assert(PvNode || alpha == beta - 1);
1323     assert(depth <= 0);
1324     assert(ply > 0 && ply < PLY_MAX);
1325     assert(pos.thread() >= 0 && pos.thread() < ThreadsMgr.active_threads());
1326
1327     StateInfo st;
1328     Move ttMove, move;
1329     Value bestValue, value, evalMargin, futilityValue, futilityBase;
1330     bool isCheck, enoughMaterial, moveIsCheck, evasionPrunable;
1331     const TTEntry* tte;
1332     Depth ttDepth;
1333     Value oldAlpha = alpha;
1334
1335     ss->bestMove = ss->currentMove = MOVE_NONE;
1336
1337     // Check for an instant draw or maximum ply reached
1338     if (pos.is_draw() || ply >= PLY_MAX - 1)
1339         return VALUE_DRAW;
1340
1341     // Decide whether or not to include checks, this fixes also the type of
1342     // TT entry depth that we are going to use. Note that in qsearch we use
1343     // only two types of depth in TT: DEPTH_QS_CHECKS or DEPTH_QS_NO_CHECKS.
1344     isCheck = pos.is_check();
1345     ttDepth = (isCheck || depth >= DEPTH_QS_CHECKS ? DEPTH_QS_CHECKS : DEPTH_QS_NO_CHECKS);
1346
1347     // Transposition table lookup. At PV nodes, we don't use the TT for
1348     // pruning, but only for move ordering.
1349     tte = TT.retrieve(pos.get_key());
1350     ttMove = (tte ? tte->move() : MOVE_NONE);
1351
1352     if (!PvNode && tte && ok_to_use_TT(tte, ttDepth, beta, ply))
1353     {
1354         ss->bestMove = ttMove; // Can be MOVE_NONE
1355         return value_from_tt(tte->value(), ply);
1356     }
1357
1358     // Evaluate the position statically
1359     if (isCheck)
1360     {
1361         bestValue = futilityBase = -VALUE_INFINITE;
1362         ss->eval = evalMargin = VALUE_NONE;
1363         enoughMaterial = false;
1364     }
1365     else
1366     {
1367         if (tte)
1368         {
1369             assert(tte->static_value() != VALUE_NONE);
1370
1371             evalMargin = tte->static_value_margin();
1372             ss->eval = bestValue = tte->static_value();
1373         }
1374         else
1375             ss->eval = bestValue = evaluate(pos, evalMargin);
1376
1377         update_gains(pos, (ss-1)->currentMove, (ss-1)->eval, ss->eval);
1378
1379         // Stand pat. Return immediately if static value is at least beta
1380         if (bestValue >= beta)
1381         {
1382             if (!tte)
1383                 TT.store(pos.get_key(), value_to_tt(bestValue, ply), VALUE_TYPE_LOWER, DEPTH_NONE, MOVE_NONE, ss->eval, evalMargin);
1384
1385             return bestValue;
1386         }
1387
1388         if (PvNode && bestValue > alpha)
1389             alpha = bestValue;
1390
1391         // Futility pruning parameters, not needed when in check
1392         futilityBase = ss->eval + evalMargin + FutilityMarginQS;
1393         enoughMaterial = pos.non_pawn_material(pos.side_to_move()) > RookValueMidgame;
1394     }
1395
1396     // Initialize a MovePicker object for the current position, and prepare
1397     // to search the moves. Because the depth is <= 0 here, only captures,
1398     // queen promotions and checks (only if depth >= DEPTH_QS_CHECKS) will
1399     // be generated.
1400     MovePicker mp(pos, ttMove, depth, H);
1401     CheckInfo ci(pos);
1402
1403     // Loop through the moves until no moves remain or a beta cutoff occurs
1404     while (   alpha < beta
1405            && (move = mp.get_next_move()) != MOVE_NONE)
1406     {
1407       assert(move_is_ok(move));
1408
1409       moveIsCheck = pos.move_is_check(move, ci);
1410
1411       // Futility pruning
1412       if (   !PvNode
1413           && !isCheck
1414           && !moveIsCheck
1415           &&  move != ttMove
1416           &&  enoughMaterial
1417           && !move_is_promotion(move)
1418           && !pos.move_is_passed_pawn_push(move))
1419       {
1420           futilityValue =  futilityBase
1421                          + pos.endgame_value_of_piece_on(move_to(move))
1422                          + (move_is_ep(move) ? PawnValueEndgame : VALUE_ZERO);
1423
1424           if (futilityValue < alpha)
1425           {
1426               if (futilityValue > bestValue)
1427                   bestValue = futilityValue;
1428               continue;
1429           }
1430       }
1431
1432       // Detect non-capture evasions that are candidate to be pruned
1433       evasionPrunable =   isCheck
1434                        && bestValue > value_mated_in(PLY_MAX)
1435                        && !pos.move_is_capture(move)
1436                        && !pos.can_castle(pos.side_to_move());
1437
1438       // Don't search moves with negative SEE values
1439       if (   !PvNode
1440           && (!isCheck || evasionPrunable)
1441           &&  move != ttMove
1442           && !move_is_promotion(move)
1443           &&  pos.see_sign(move) < 0)
1444           continue;
1445
1446       // Don't search useless checks
1447       if (   !PvNode
1448           && !isCheck
1449           &&  moveIsCheck
1450           &&  move != ttMove
1451           && !pos.move_is_capture_or_promotion(move)
1452           &&  ss->eval + PawnValueMidgame / 4 < beta
1453           && !check_is_dangerous(pos, move, futilityBase, beta, &bestValue))
1454       {
1455           if (ss->eval + PawnValueMidgame / 4 > bestValue)
1456               bestValue = ss->eval + PawnValueMidgame / 4;
1457
1458           continue;
1459       }
1460
1461       // Update current move
1462       ss->currentMove = move;
1463
1464       // Make and search the move
1465       pos.do_move(move, st, ci, moveIsCheck);
1466       value = -qsearch<PvNode>(pos, ss+1, -beta, -alpha, depth-ONE_PLY, ply+1);
1467       pos.undo_move(move);
1468
1469       assert(value > -VALUE_INFINITE && value < VALUE_INFINITE);
1470
1471       // New best move?
1472       if (value > bestValue)
1473       {
1474           bestValue = value;
1475           if (value > alpha)
1476           {
1477               alpha = value;
1478               ss->bestMove = move;
1479           }
1480        }
1481     }
1482
1483     // All legal moves have been searched. A special case: If we're in check
1484     // and no legal moves were found, it is checkmate.
1485     if (isCheck && bestValue == -VALUE_INFINITE)
1486         return value_mated_in(ply);
1487
1488     // Update transposition table
1489     ValueType vt = (bestValue <= oldAlpha ? VALUE_TYPE_UPPER : bestValue >= beta ? VALUE_TYPE_LOWER : VALUE_TYPE_EXACT);
1490     TT.store(pos.get_key(), value_to_tt(bestValue, ply), vt, ttDepth, ss->bestMove, ss->eval, evalMargin);
1491
1492     assert(bestValue > -VALUE_INFINITE && bestValue < VALUE_INFINITE);
1493
1494     return bestValue;
1495   }
1496
1497
1498   // qsearch_scoring() scores each move of a list using a qsearch() evaluation,
1499   // it is used in RootMoveList to get an initial scoring.
1500   void qsearch_scoring(Position& pos, MoveStack* mlist, MoveStack* last) {
1501
1502     SearchStack ss[PLY_MAX_PLUS_2];
1503     StateInfo st;
1504
1505     memset(ss, 0, 4 * sizeof(SearchStack));
1506     ss[0].eval = ss[0].evalMargin = VALUE_NONE;
1507
1508     for (MoveStack* cur = mlist; cur != last; cur++)
1509     {
1510         ss[0].currentMove = cur->move;
1511         pos.do_move(cur->move, st);
1512         cur->score = -qsearch<PV>(pos, ss+1, -VALUE_INFINITE, VALUE_INFINITE, DEPTH_ZERO, 1);
1513         pos.undo_move(cur->move);
1514     }
1515   }
1516
1517
1518   // check_is_dangerous() tests if a checking move can be pruned in qsearch().
1519   // bestValue is updated only when returning false because in that case move
1520   // will be pruned.
1521
1522   bool check_is_dangerous(Position &pos, Move move, Value futilityBase, Value beta, Value *bestValue)
1523   {
1524     Bitboard b, occ, oldAtt, newAtt, kingAtt;
1525     Square from, to, ksq, victimSq;
1526     Piece pc;
1527     Color them;
1528     Value futilityValue, bv = *bestValue;
1529
1530     from = move_from(move);
1531     to = move_to(move);
1532     them = opposite_color(pos.side_to_move());
1533     ksq = pos.king_square(them);
1534     kingAtt = pos.attacks_from<KING>(ksq);
1535     pc = pos.piece_on(from);
1536
1537     occ = pos.occupied_squares() & ~(1ULL << from) & ~(1ULL << ksq);
1538     oldAtt = pos.attacks_from(pc, from, occ);
1539     newAtt = pos.attacks_from(pc,   to, occ);
1540
1541     // Rule 1. Checks which give opponent's king at most one escape square are dangerous
1542     b = kingAtt & ~pos.pieces_of_color(them) & ~newAtt & ~(1ULL << to);
1543
1544     if (!(b && (b & (b - 1))))
1545         return true;
1546
1547     // Rule 2. Queen contact check is very dangerous
1548     if (   type_of_piece(pc) == QUEEN
1549         && bit_is_set(kingAtt, to))
1550         return true;
1551
1552     // Rule 3. Creating new double threats with checks
1553     b = pos.pieces_of_color(them) & newAtt & ~oldAtt & ~(1ULL << ksq);
1554
1555     while (b)
1556     {
1557         victimSq = pop_1st_bit(&b);
1558         futilityValue = futilityBase + pos.endgame_value_of_piece_on(victimSq);
1559
1560         // Note that here we generate illegal "double move"!
1561         if (   futilityValue >= beta
1562             && pos.see_sign(make_move(from, victimSq)) >= 0)
1563             return true;
1564
1565         if (futilityValue > bv)
1566             bv = futilityValue;
1567     }
1568
1569     // Update bestValue only if check is not dangerous (because we will prune the move)
1570     *bestValue = bv;
1571     return false;
1572   }
1573
1574
1575   // connected_moves() tests whether two moves are 'connected' in the sense
1576   // that the first move somehow made the second move possible (for instance
1577   // if the moving piece is the same in both moves). The first move is assumed
1578   // to be the move that was made to reach the current position, while the
1579   // second move is assumed to be a move from the current position.
1580
1581   bool connected_moves(const Position& pos, Move m1, Move m2) {
1582
1583     Square f1, t1, f2, t2;
1584     Piece p;
1585
1586     assert(m1 && move_is_ok(m1));
1587     assert(m2 && move_is_ok(m2));
1588
1589     // Case 1: The moving piece is the same in both moves
1590     f2 = move_from(m2);
1591     t1 = move_to(m1);
1592     if (f2 == t1)
1593         return true;
1594
1595     // Case 2: The destination square for m2 was vacated by m1
1596     t2 = move_to(m2);
1597     f1 = move_from(m1);
1598     if (t2 == f1)
1599         return true;
1600
1601     // Case 3: Moving through the vacated square
1602     if (   piece_is_slider(pos.piece_on(f2))
1603         && bit_is_set(squares_between(f2, t2), f1))
1604       return true;
1605
1606     // Case 4: The destination square for m2 is defended by the moving piece in m1
1607     p = pos.piece_on(t1);
1608     if (bit_is_set(pos.attacks_from(p, t1), t2))
1609         return true;
1610
1611     // Case 5: Discovered check, checking piece is the piece moved in m1
1612     if (    piece_is_slider(p)
1613         &&  bit_is_set(squares_between(t1, pos.king_square(pos.side_to_move())), f2)
1614         && !bit_is_set(squares_between(t1, pos.king_square(pos.side_to_move())), t2))
1615     {
1616         // discovered_check_candidates() works also if the Position's side to
1617         // move is the opposite of the checking piece.
1618         Color them = opposite_color(pos.side_to_move());
1619         Bitboard dcCandidates = pos.discovered_check_candidates(them);
1620
1621         if (bit_is_set(dcCandidates, f2))
1622             return true;
1623     }
1624     return false;
1625   }
1626
1627
1628   // value_is_mate() checks if the given value is a mate one eventually
1629   // compensated for the ply.
1630
1631   bool value_is_mate(Value value) {
1632
1633     assert(abs(value) <= VALUE_INFINITE);
1634
1635     return   value <= value_mated_in(PLY_MAX)
1636           || value >= value_mate_in(PLY_MAX);
1637   }
1638
1639
1640   // value_to_tt() adjusts a mate score from "plies to mate from the root" to
1641   // "plies to mate from the current ply".  Non-mate scores are unchanged.
1642   // The function is called before storing a value to the transposition table.
1643
1644   Value value_to_tt(Value v, int ply) {
1645
1646     if (v >= value_mate_in(PLY_MAX))
1647       return v + ply;
1648
1649     if (v <= value_mated_in(PLY_MAX))
1650       return v - ply;
1651
1652     return v;
1653   }
1654
1655
1656   // value_from_tt() is the inverse of value_to_tt(): It adjusts a mate score from
1657   // the transposition table to a mate score corrected for the current ply.
1658
1659   Value value_from_tt(Value v, int ply) {
1660
1661     if (v >= value_mate_in(PLY_MAX))
1662       return v - ply;
1663
1664     if (v <= value_mated_in(PLY_MAX))
1665       return v + ply;
1666
1667     return v;
1668   }
1669
1670
1671   // extension() decides whether a move should be searched with normal depth,
1672   // or with extended depth. Certain classes of moves (checking moves, in
1673   // particular) are searched with bigger depth than ordinary moves and in
1674   // any case are marked as 'dangerous'. Note that also if a move is not
1675   // extended, as example because the corresponding UCI option is set to zero,
1676   // the move is marked as 'dangerous' so, at least, we avoid to prune it.
1677   template <NodeType PvNode>
1678   Depth extension(const Position& pos, Move m, bool captureOrPromotion,
1679                   bool moveIsCheck, bool mateThreat, bool* dangerous) {
1680
1681     assert(m != MOVE_NONE);
1682
1683     Depth result = DEPTH_ZERO;
1684     *dangerous = moveIsCheck | mateThreat;
1685
1686     if (*dangerous)
1687     {
1688         if (moveIsCheck && pos.see_sign(m) >= 0)
1689             result += CheckExtension[PvNode];
1690
1691         if (mateThreat)
1692             result += MateThreatExtension[PvNode];
1693     }
1694
1695     if (pos.type_of_piece_on(move_from(m)) == PAWN)
1696     {
1697         Color c = pos.side_to_move();
1698         if (relative_rank(c, move_to(m)) == RANK_7)
1699         {
1700             result += PawnPushTo7thExtension[PvNode];
1701             *dangerous = true;
1702         }
1703         if (pos.pawn_is_passed(c, move_to(m)))
1704         {
1705             result += PassedPawnExtension[PvNode];
1706             *dangerous = true;
1707         }
1708     }
1709
1710     if (   captureOrPromotion
1711         && pos.type_of_piece_on(move_to(m)) != PAWN
1712         && (  pos.non_pawn_material(WHITE) + pos.non_pawn_material(BLACK)
1713             - pos.midgame_value_of_piece_on(move_to(m)) == VALUE_ZERO)
1714         && !move_is_promotion(m)
1715         && !move_is_ep(m))
1716     {
1717         result += PawnEndgameExtension[PvNode];
1718         *dangerous = true;
1719     }
1720
1721     if (   PvNode
1722         && captureOrPromotion
1723         && pos.type_of_piece_on(move_to(m)) != PAWN
1724         && pos.see_sign(m) >= 0)
1725     {
1726         result += ONE_PLY / 2;
1727         *dangerous = true;
1728     }
1729
1730     return Min(result, ONE_PLY);
1731   }
1732
1733
1734   // connected_threat() tests whether it is safe to forward prune a move or if
1735   // is somehow connected to the threat move returned by null search.
1736
1737   bool connected_threat(const Position& pos, Move m, Move threat) {
1738
1739     assert(move_is_ok(m));
1740     assert(threat && move_is_ok(threat));
1741     assert(!pos.move_is_check(m));
1742     assert(!pos.move_is_capture_or_promotion(m));
1743     assert(!pos.move_is_passed_pawn_push(m));
1744
1745     Square mfrom, mto, tfrom, tto;
1746
1747     mfrom = move_from(m);
1748     mto = move_to(m);
1749     tfrom = move_from(threat);
1750     tto = move_to(threat);
1751
1752     // Case 1: Don't prune moves which move the threatened piece
1753     if (mfrom == tto)
1754         return true;
1755
1756     // Case 2: If the threatened piece has value less than or equal to the
1757     // value of the threatening piece, don't prune moves which defend it.
1758     if (   pos.move_is_capture(threat)
1759         && (   pos.midgame_value_of_piece_on(tfrom) >= pos.midgame_value_of_piece_on(tto)
1760             || pos.type_of_piece_on(tfrom) == KING)
1761         && pos.move_attacks_square(m, tto))
1762         return true;
1763
1764     // Case 3: If the moving piece in the threatened move is a slider, don't
1765     // prune safe moves which block its ray.
1766     if (   piece_is_slider(pos.piece_on(tfrom))
1767         && bit_is_set(squares_between(tfrom, tto), mto)
1768         && pos.see_sign(m) >= 0)
1769         return true;
1770
1771     return false;
1772   }
1773
1774
1775   // ok_to_use_TT() returns true if a transposition table score
1776   // can be used at a given point in search.
1777
1778   bool ok_to_use_TT(const TTEntry* tte, Depth depth, Value beta, int ply) {
1779
1780     Value v = value_from_tt(tte->value(), ply);
1781
1782     return   (   tte->depth() >= depth
1783               || v >= Max(value_mate_in(PLY_MAX), beta)
1784               || v < Min(value_mated_in(PLY_MAX), beta))
1785
1786           && (   ((tte->type() & VALUE_TYPE_LOWER) && v >= beta)
1787               || ((tte->type() & VALUE_TYPE_UPPER) && v < beta));
1788   }
1789
1790
1791   // refine_eval() returns the transposition table score if
1792   // possible otherwise falls back on static position evaluation.
1793
1794   Value refine_eval(const TTEntry* tte, Value defaultEval, int ply) {
1795
1796       assert(tte);
1797
1798       Value v = value_from_tt(tte->value(), ply);
1799
1800       if (   ((tte->type() & VALUE_TYPE_LOWER) && v >= defaultEval)
1801           || ((tte->type() & VALUE_TYPE_UPPER) && v < defaultEval))
1802           return v;
1803
1804       return defaultEval;
1805   }
1806
1807
1808   // update_history() registers a good move that produced a beta-cutoff
1809   // in history and marks as failures all the other moves of that ply.
1810
1811   void update_history(const Position& pos, Move move, Depth depth,
1812                       Move movesSearched[], int moveCount) {
1813     Move m;
1814     Value bonus = Value(int(depth) * int(depth));
1815
1816     H.update(pos.piece_on(move_from(move)), move_to(move), bonus);
1817
1818     for (int i = 0; i < moveCount - 1; i++)
1819     {
1820         m = movesSearched[i];
1821
1822         assert(m != move);
1823
1824         H.update(pos.piece_on(move_from(m)), move_to(m), -bonus);
1825     }
1826   }
1827
1828
1829   // update_killers() add a good move that produced a beta-cutoff
1830   // among the killer moves of that ply.
1831
1832   void update_killers(Move m, Move killers[]) {
1833
1834     if (m != killers[0])
1835     {
1836         killers[1] = killers[0];
1837         killers[0] = m;
1838     }
1839   }
1840
1841
1842   // update_gains() updates the gains table of a non-capture move given
1843   // the static position evaluation before and after the move.
1844
1845   void update_gains(const Position& pos, Move m, Value before, Value after) {
1846
1847     if (   m != MOVE_NULL
1848         && before != VALUE_NONE
1849         && after != VALUE_NONE
1850         && pos.captured_piece_type() == PIECE_TYPE_NONE
1851         && !move_is_special(m))
1852         H.update_gain(pos.piece_on(move_to(m)), move_to(m), -(before + after));
1853   }
1854
1855   // current_search_time() returns the number of milliseconds which have passed
1856   // since the beginning of the current search.
1857
1858   int current_search_time() {
1859
1860     return get_system_time() - SearchStartTime;
1861   }
1862
1863
1864   // value_to_uci() converts a value to a string suitable for use with the UCI
1865   // protocol specifications:
1866   //
1867   // cp <x>     The score from the engine's point of view in centipawns.
1868   // mate <y>   Mate in y moves, not plies. If the engine is getting mated
1869   //            use negative values for y.
1870
1871   std::string value_to_uci(Value v) {
1872
1873     std::stringstream s;
1874
1875     if (abs(v) < VALUE_MATE - PLY_MAX * ONE_PLY)
1876       s << "cp " << int(v) * 100 / int(PawnValueMidgame); // Scale to centipawns
1877     else
1878       s << "mate " << (v > 0 ? (VALUE_MATE - v + 1) / 2 : -(VALUE_MATE + v) / 2);
1879
1880     return s.str();
1881   }
1882
1883
1884   // speed_to_uci() returns a string with time stats of current search suitable
1885   // to be sent to UCI gui.
1886
1887   std::string speed_to_uci(int64_t nodes) {
1888
1889     std::stringstream s;
1890     int t = current_search_time();
1891
1892     s << " nodes " << nodes
1893       << " nps "   << (t > 0 ? int(nodes * 1000 / t) : 0)
1894       << " time "  << t;
1895
1896     return s.str();
1897   }
1898
1899
1900   // poll() performs two different functions: It polls for user input, and it
1901   // looks at the time consumed so far and decides if it's time to abort the
1902   // search.
1903
1904   void poll(const Position& pos) {
1905
1906     static int lastInfoTime;
1907     int t = current_search_time();
1908
1909     //  Poll for input
1910     if (input_available())
1911     {
1912         // We are line oriented, don't read single chars
1913         std::string command;
1914
1915         if (!std::getline(std::cin, command))
1916             command = "quit";
1917
1918         if (command == "quit")
1919         {
1920             // Quit the program as soon as possible
1921             Pondering = false;
1922             QuitRequest = StopRequest = true;
1923             return;
1924         }
1925         else if (command == "stop")
1926         {
1927             // Stop calculating as soon as possible, but still send the "bestmove"
1928             // and possibly the "ponder" token when finishing the search.
1929             Pondering = false;
1930             StopRequest = true;
1931         }
1932         else if (command == "ponderhit")
1933         {
1934             // The opponent has played the expected move. GUI sends "ponderhit" if
1935             // we were told to ponder on the same move the opponent has played. We
1936             // should continue searching but switching from pondering to normal search.
1937             Pondering = false;
1938
1939             if (StopOnPonderhit)
1940                 StopRequest = true;
1941         }
1942     }
1943
1944     // Print search information
1945     if (t < 1000)
1946         lastInfoTime = 0;
1947
1948     else if (lastInfoTime > t)
1949         // HACK: Must be a new search where we searched less than
1950         // NodesBetweenPolls nodes during the first second of search.
1951         lastInfoTime = 0;
1952
1953     else if (t - lastInfoTime >= 1000)
1954     {
1955         lastInfoTime = t;
1956
1957         if (dbg_show_mean)
1958             dbg_print_mean();
1959
1960         if (dbg_show_hit_rate)
1961             dbg_print_hit_rate();
1962
1963         // Send info on searched nodes as soon as we return to root
1964         SendSearchedNodes = true;
1965     }
1966
1967     // Should we stop the search?
1968     if (Pondering)
1969         return;
1970
1971     bool stillAtFirstMove =    FirstRootMove
1972                            && !AspirationFailLow
1973                            &&  t > TimeMgr.available_time();
1974
1975     bool noMoreTime =   t > TimeMgr.maximum_time()
1976                      || stillAtFirstMove;
1977
1978     if (   (UseTimeManagement && noMoreTime)
1979         || (ExactMaxTime && t >= ExactMaxTime)
1980         || (MaxNodes && pos.nodes_searched() >= MaxNodes)) // FIXME
1981         StopRequest = true;
1982   }
1983
1984
1985   // wait_for_stop_or_ponderhit() is called when the maximum depth is reached
1986   // while the program is pondering. The point is to work around a wrinkle in
1987   // the UCI protocol: When pondering, the engine is not allowed to give a
1988   // "bestmove" before the GUI sends it a "stop" or "ponderhit" command.
1989   // We simply wait here until one of these commands is sent, and return,
1990   // after which the bestmove and pondermove will be printed.
1991
1992   void wait_for_stop_or_ponderhit() {
1993
1994     std::string command;
1995
1996     while (true)
1997     {
1998         // Wait for a command from stdin
1999         if (!std::getline(std::cin, command))
2000             command = "quit";
2001
2002         if (command == "quit")
2003         {
2004             QuitRequest = true;
2005             break;
2006         }
2007         else if (command == "ponderhit" || command == "stop")
2008             break;
2009     }
2010   }
2011
2012
2013   // init_thread() is the function which is called when a new thread is
2014   // launched. It simply calls the idle_loop() function with the supplied
2015   // threadID. There are two versions of this function; one for POSIX
2016   // threads and one for Windows threads.
2017
2018 #if !defined(_MSC_VER)
2019
2020   void* init_thread(void* threadID) {
2021
2022     ThreadsMgr.idle_loop(*(int*)threadID, NULL);
2023     return NULL;
2024   }
2025
2026 #else
2027
2028   DWORD WINAPI init_thread(LPVOID threadID) {
2029
2030     ThreadsMgr.idle_loop(*(int*)threadID, NULL);
2031     return 0;
2032   }
2033
2034 #endif
2035
2036
2037   /// The ThreadsManager class
2038
2039
2040   // read_uci_options() updates number of active threads and other internal
2041   // parameters according to the UCI options values. It is called before
2042   // to start a new search.
2043
2044   void ThreadsManager::read_uci_options() {
2045
2046     maxThreadsPerSplitPoint = Options["Maximum Number of Threads per Split Point"].value<int>();
2047     minimumSplitDepth       = Options["Minimum Split Depth"].value<int>() * ONE_PLY;
2048     useSleepingThreads      = Options["Use Sleeping Threads"].value<bool>();
2049     activeThreads           = Options["Threads"].value<int>();
2050   }
2051
2052
2053   // idle_loop() is where the threads are parked when they have no work to do.
2054   // The parameter 'sp', if non-NULL, is a pointer to an active SplitPoint
2055   // object for which the current thread is the master.
2056
2057   void ThreadsManager::idle_loop(int threadID, SplitPoint* sp) {
2058
2059     assert(threadID >= 0 && threadID < MAX_THREADS);
2060
2061     int i;
2062     bool allFinished = false;
2063
2064     while (true)
2065     {
2066         // Slave threads can exit as soon as AllThreadsShouldExit raises,
2067         // master should exit as last one.
2068         if (allThreadsShouldExit)
2069         {
2070             assert(!sp);
2071             threads[threadID].state = THREAD_TERMINATED;
2072             return;
2073         }
2074
2075         // If we are not thinking, wait for a condition to be signaled
2076         // instead of wasting CPU time polling for work.
2077         while (   threadID >= activeThreads || threads[threadID].state == THREAD_INITIALIZING
2078                || (useSleepingThreads && threads[threadID].state == THREAD_AVAILABLE))
2079         {
2080             assert(!sp || useSleepingThreads);
2081             assert(threadID != 0 || useSleepingThreads);
2082
2083             if (threads[threadID].state == THREAD_INITIALIZING)
2084                 threads[threadID].state = THREAD_AVAILABLE;
2085
2086             // Grab the lock to avoid races with wake_sleeping_thread()
2087             lock_grab(&sleepLock[threadID]);
2088
2089             // If we are master and all slaves have finished do not go to sleep
2090             for (i = 0; sp && i < activeThreads && !sp->slaves[i]; i++) {}
2091             allFinished = (i == activeThreads);
2092
2093             if (allFinished || allThreadsShouldExit)
2094             {
2095                 lock_release(&sleepLock[threadID]);
2096                 break;
2097             }
2098
2099             // Do sleep here after retesting sleep conditions
2100             if (threadID >= activeThreads || threads[threadID].state == THREAD_AVAILABLE)
2101                 cond_wait(&sleepCond[threadID], &sleepLock[threadID]);
2102
2103             lock_release(&sleepLock[threadID]);
2104         }
2105
2106         // If this thread has been assigned work, launch a search
2107         if (threads[threadID].state == THREAD_WORKISWAITING)
2108         {
2109             assert(!allThreadsShouldExit);
2110
2111             threads[threadID].state = THREAD_SEARCHING;
2112
2113             // Copy SplitPoint position and search stack and call search()
2114             // with SplitPoint template parameter set to true.
2115             SearchStack ss[PLY_MAX_PLUS_2];
2116             SplitPoint* tsp = threads[threadID].splitPoint;
2117             Position pos(*tsp->pos, threadID);
2118
2119             memcpy(ss, tsp->ss - 1, 4 * sizeof(SearchStack));
2120             (ss+1)->sp = tsp;
2121
2122             if (tsp->pvNode)
2123                 search<PV, true, false>(pos, ss+1, tsp->alpha, tsp->beta, tsp->depth, tsp->ply);
2124             else
2125                 search<NonPV, true, false>(pos, ss+1, tsp->alpha, tsp->beta, tsp->depth, tsp->ply);
2126
2127             assert(threads[threadID].state == THREAD_SEARCHING);
2128
2129             threads[threadID].state = THREAD_AVAILABLE;
2130
2131             // Wake up master thread so to allow it to return from the idle loop in
2132             // case we are the last slave of the split point.
2133             if (useSleepingThreads && threadID != tsp->master && threads[tsp->master].state == THREAD_AVAILABLE)
2134                 wake_sleeping_thread(tsp->master);
2135         }
2136
2137         // If this thread is the master of a split point and all slaves have
2138         // finished their work at this split point, return from the idle loop.
2139         for (i = 0; sp && i < activeThreads && !sp->slaves[i]; i++) {}
2140         allFinished = (i == activeThreads);
2141
2142         if (allFinished)
2143         {
2144             // Because sp->slaves[] is reset under lock protection,
2145             // be sure sp->lock has been released before to return.
2146             lock_grab(&(sp->lock));
2147             lock_release(&(sp->lock));
2148
2149             // In helpful master concept a master can help only a sub-tree, and
2150             // because here is all finished is not possible master is booked.
2151             assert(threads[threadID].state == THREAD_AVAILABLE);
2152
2153             threads[threadID].state = THREAD_SEARCHING;
2154             return;
2155         }
2156     }
2157   }
2158
2159
2160   // init_threads() is called during startup. It launches all helper threads,
2161   // and initializes the split point stack and the global locks and condition
2162   // objects.
2163
2164   void ThreadsManager::init_threads() {
2165
2166     int i, arg[MAX_THREADS];
2167     bool ok;
2168
2169     // Initialize global locks
2170     lock_init(&mpLock);
2171
2172     for (i = 0; i < MAX_THREADS; i++)
2173     {
2174         lock_init(&sleepLock[i]);
2175         cond_init(&sleepCond[i]);
2176     }
2177
2178     // Initialize splitPoints[] locks
2179     for (i = 0; i < MAX_THREADS; i++)
2180         for (int j = 0; j < MAX_ACTIVE_SPLIT_POINTS; j++)
2181             lock_init(&(threads[i].splitPoints[j].lock));
2182
2183     // Will be set just before program exits to properly end the threads
2184     allThreadsShouldExit = false;
2185
2186     // Threads will be put all threads to sleep as soon as created
2187     activeThreads = 1;
2188
2189     // All threads except the main thread should be initialized to THREAD_INITIALIZING
2190     threads[0].state = THREAD_SEARCHING;
2191     for (i = 1; i < MAX_THREADS; i++)
2192         threads[i].state = THREAD_INITIALIZING;
2193
2194     // Launch the helper threads
2195     for (i = 1; i < MAX_THREADS; i++)
2196     {
2197         arg[i] = i;
2198
2199 #if !defined(_MSC_VER)
2200         pthread_t pthread[1];
2201         ok = (pthread_create(pthread, NULL, init_thread, (void*)(&arg[i])) == 0);
2202         pthread_detach(pthread[0]);
2203 #else
2204         ok = (CreateThread(NULL, 0, init_thread, (LPVOID)(&arg[i]), 0, NULL) != NULL);
2205 #endif
2206         if (!ok)
2207         {
2208             cout << "Failed to create thread number " << i << endl;
2209             exit(EXIT_FAILURE);
2210         }
2211
2212         // Wait until the thread has finished launching and is gone to sleep
2213         while (threads[i].state == THREAD_INITIALIZING) {}
2214     }
2215   }
2216
2217
2218   // exit_threads() is called when the program exits. It makes all the
2219   // helper threads exit cleanly.
2220
2221   void ThreadsManager::exit_threads() {
2222
2223     allThreadsShouldExit = true; // Let the woken up threads to exit idle_loop()
2224
2225     // Wake up all the threads and waits for termination
2226     for (int i = 1; i < MAX_THREADS; i++)
2227     {
2228         wake_sleeping_thread(i);
2229         while (threads[i].state != THREAD_TERMINATED) {}
2230     }
2231
2232     // Now we can safely destroy the locks
2233     for (int i = 0; i < MAX_THREADS; i++)
2234         for (int j = 0; j < MAX_ACTIVE_SPLIT_POINTS; j++)
2235             lock_destroy(&(threads[i].splitPoints[j].lock));
2236
2237     lock_destroy(&mpLock);
2238
2239     // Now we can safely destroy the wait conditions
2240     for (int i = 0; i < MAX_THREADS; i++)
2241     {
2242         lock_destroy(&sleepLock[i]);
2243         cond_destroy(&sleepCond[i]);
2244     }
2245   }
2246
2247
2248   // cutoff_at_splitpoint() checks whether a beta cutoff has occurred in
2249   // the thread's currently active split point, or in some ancestor of
2250   // the current split point.
2251
2252   bool ThreadsManager::cutoff_at_splitpoint(int threadID) const {
2253
2254     assert(threadID >= 0 && threadID < activeThreads);
2255
2256     SplitPoint* sp = threads[threadID].splitPoint;
2257
2258     for ( ; sp && !sp->betaCutoff; sp = sp->parent) {}
2259     return sp != NULL;
2260   }
2261
2262
2263   // thread_is_available() checks whether the thread with threadID "slave" is
2264   // available to help the thread with threadID "master" at a split point. An
2265   // obvious requirement is that "slave" must be idle. With more than two
2266   // threads, this is not by itself sufficient:  If "slave" is the master of
2267   // some active split point, it is only available as a slave to the other
2268   // threads which are busy searching the split point at the top of "slave"'s
2269   // split point stack (the "helpful master concept" in YBWC terminology).
2270
2271   bool ThreadsManager::thread_is_available(int slave, int master) const {
2272
2273     assert(slave >= 0 && slave < activeThreads);
2274     assert(master >= 0 && master < activeThreads);
2275     assert(activeThreads > 1);
2276
2277     if (threads[slave].state != THREAD_AVAILABLE || slave == master)
2278         return false;
2279
2280     // Make a local copy to be sure doesn't change under our feet
2281     int localActiveSplitPoints = threads[slave].activeSplitPoints;
2282
2283     // No active split points means that the thread is available as
2284     // a slave for any other thread.
2285     if (localActiveSplitPoints == 0 || activeThreads == 2)
2286         return true;
2287
2288     // Apply the "helpful master" concept if possible. Use localActiveSplitPoints
2289     // that is known to be > 0, instead of threads[slave].activeSplitPoints that
2290     // could have been set to 0 by another thread leading to an out of bound access.
2291     if (threads[slave].splitPoints[localActiveSplitPoints - 1].slaves[master])
2292         return true;
2293
2294     return false;
2295   }
2296
2297
2298   // available_thread_exists() tries to find an idle thread which is available as
2299   // a slave for the thread with threadID "master".
2300
2301   bool ThreadsManager::available_thread_exists(int master) const {
2302
2303     assert(master >= 0 && master < activeThreads);
2304     assert(activeThreads > 1);
2305
2306     for (int i = 0; i < activeThreads; i++)
2307         if (thread_is_available(i, master))
2308             return true;
2309
2310     return false;
2311   }
2312
2313
2314   // split() does the actual work of distributing the work at a node between
2315   // several available threads. If it does not succeed in splitting the
2316   // node (because no idle threads are available, or because we have no unused
2317   // split point objects), the function immediately returns. If splitting is
2318   // possible, a SplitPoint object is initialized with all the data that must be
2319   // copied to the helper threads and we tell our helper threads that they have
2320   // been assigned work. This will cause them to instantly leave their idle loops and
2321   // call search().When all threads have returned from search() then split() returns.
2322
2323   template <bool Fake>
2324   void ThreadsManager::split(Position& pos, SearchStack* ss, int ply, Value* alpha,
2325                              const Value beta, Value* bestValue, Depth depth, Move threatMove,
2326                              bool mateThreat, int moveCount, MovePicker* mp, bool pvNode) {
2327     assert(pos.is_ok());
2328     assert(ply > 0 && ply < PLY_MAX);
2329     assert(*bestValue >= -VALUE_INFINITE);
2330     assert(*bestValue <= *alpha);
2331     assert(*alpha < beta);
2332     assert(beta <= VALUE_INFINITE);
2333     assert(depth > DEPTH_ZERO);
2334     assert(pos.thread() >= 0 && pos.thread() < activeThreads);
2335     assert(activeThreads > 1);
2336
2337     int i, master = pos.thread();
2338     Thread& masterThread = threads[master];
2339
2340     lock_grab(&mpLock);
2341
2342     // If no other thread is available to help us, or if we have too many
2343     // active split points, don't split.
2344     if (   !available_thread_exists(master)
2345         || masterThread.activeSplitPoints >= MAX_ACTIVE_SPLIT_POINTS)
2346     {
2347         lock_release(&mpLock);
2348         return;
2349     }
2350
2351     // Pick the next available split point object from the split point stack
2352     SplitPoint& splitPoint = masterThread.splitPoints[masterThread.activeSplitPoints++];
2353
2354     // Initialize the split point object
2355     splitPoint.parent = masterThread.splitPoint;
2356     splitPoint.master = master;
2357     splitPoint.betaCutoff = false;
2358     splitPoint.ply = ply;
2359     splitPoint.depth = depth;
2360     splitPoint.threatMove = threatMove;
2361     splitPoint.mateThreat = mateThreat;
2362     splitPoint.alpha = *alpha;
2363     splitPoint.beta = beta;
2364     splitPoint.pvNode = pvNode;
2365     splitPoint.bestValue = *bestValue;
2366     splitPoint.mp = mp;
2367     splitPoint.moveCount = moveCount;
2368     splitPoint.pos = &pos;
2369     splitPoint.nodes = 0;
2370     splitPoint.ss = ss;
2371     for (i = 0; i < activeThreads; i++)
2372         splitPoint.slaves[i] = 0;
2373
2374     masterThread.splitPoint = &splitPoint;
2375
2376     // If we are here it means we are not available
2377     assert(masterThread.state != THREAD_AVAILABLE);
2378
2379     int workersCnt = 1; // At least the master is included
2380
2381     // Allocate available threads setting state to THREAD_BOOKED
2382     for (i = 0; !Fake && i < activeThreads && workersCnt < maxThreadsPerSplitPoint; i++)
2383         if (thread_is_available(i, master))
2384         {
2385             threads[i].state = THREAD_BOOKED;
2386             threads[i].splitPoint = &splitPoint;
2387             splitPoint.slaves[i] = 1;
2388             workersCnt++;
2389         }
2390
2391     assert(Fake || workersCnt > 1);
2392
2393     // We can release the lock because slave threads are already booked and master is not available
2394     lock_release(&mpLock);
2395
2396     // Tell the threads that they have work to do. This will make them leave
2397     // their idle loop.
2398     for (i = 0; i < activeThreads; i++)
2399         if (i == master || splitPoint.slaves[i])
2400         {
2401             assert(i == master || threads[i].state == THREAD_BOOKED);
2402
2403             threads[i].state = THREAD_WORKISWAITING; // This makes the slave to exit from idle_loop()
2404
2405             if (useSleepingThreads && i != master)
2406                 wake_sleeping_thread(i);
2407         }
2408
2409     // Everything is set up. The master thread enters the idle loop, from
2410     // which it will instantly launch a search, because its state is
2411     // THREAD_WORKISWAITING.  We send the split point as a second parameter to the
2412     // idle loop, which means that the main thread will return from the idle
2413     // loop when all threads have finished their work at this split point.
2414     idle_loop(master, &splitPoint);
2415
2416     // We have returned from the idle loop, which means that all threads are
2417     // finished. Update alpha and bestValue, and return.
2418     lock_grab(&mpLock);
2419
2420     *alpha = splitPoint.alpha;
2421     *bestValue = splitPoint.bestValue;
2422     masterThread.activeSplitPoints--;
2423     masterThread.splitPoint = splitPoint.parent;
2424     pos.set_nodes_searched(pos.nodes_searched() + splitPoint.nodes);
2425
2426     lock_release(&mpLock);
2427   }
2428
2429
2430   // wake_sleeping_thread() wakes up the thread with the given threadID
2431   // when it is time to start a new search.
2432
2433   void ThreadsManager::wake_sleeping_thread(int threadID) {
2434
2435      lock_grab(&sleepLock[threadID]);
2436      cond_signal(&sleepCond[threadID]);
2437      lock_release(&sleepLock[threadID]);
2438   }
2439
2440
2441   /// RootMove and RootMoveList method's definitions
2442
2443   RootMove::RootMove() {
2444
2445     nodes = 0;
2446     pv_score = non_pv_score = -VALUE_INFINITE;
2447     pv[0] = MOVE_NONE;
2448   }
2449
2450   RootMove& RootMove::operator=(const RootMove& rm) {
2451
2452     const Move* src = rm.pv;
2453     Move* dst = pv;
2454
2455     // Avoid a costly full rm.pv[] copy
2456     do *dst++ = *src; while (*src++ != MOVE_NONE);
2457
2458     nodes = rm.nodes;
2459     pv_score = rm.pv_score;
2460     non_pv_score = rm.non_pv_score;
2461     return *this;
2462   }
2463
2464   // extract_pv_from_tt() builds a PV by adding moves from the transposition table.
2465   // We consider also failing high nodes and not only VALUE_TYPE_EXACT nodes. This
2466   // allow to always have a ponder move even when we fail high at root and also a
2467   // long PV to print that is important for position analysis.
2468
2469   void RootMove::extract_pv_from_tt(Position& pos) {
2470
2471     StateInfo state[PLY_MAX_PLUS_2], *st = state;
2472     TTEntry* tte;
2473     int ply = 1;
2474
2475     assert(pv[0] != MOVE_NONE && move_is_legal(pos, pv[0]));
2476
2477     pos.do_move(pv[0], *st++);
2478
2479     while (   (tte = TT.retrieve(pos.get_key())) != NULL
2480            && tte->move() != MOVE_NONE
2481            && move_is_legal(pos, tte->move())
2482            && ply < PLY_MAX
2483            && (!pos.is_draw() || ply < 2))
2484     {
2485         pv[ply] = tte->move();
2486         pos.do_move(pv[ply++], *st++);
2487     }
2488     pv[ply] = MOVE_NONE;
2489
2490     do pos.undo_move(pv[--ply]); while (ply);
2491   }
2492
2493   // insert_pv_in_tt() is called at the end of a search iteration, and inserts
2494   // the PV back into the TT. This makes sure the old PV moves are searched
2495   // first, even if the old TT entries have been overwritten.
2496
2497   void RootMove::insert_pv_in_tt(Position& pos) {
2498
2499     StateInfo state[PLY_MAX_PLUS_2], *st = state;
2500     TTEntry* tte;
2501     Key k;
2502     Value v, m = VALUE_NONE;
2503     int ply = 0;
2504
2505     assert(pv[0] != MOVE_NONE && move_is_legal(pos, pv[0]));
2506
2507     do {
2508         k = pos.get_key();
2509         tte = TT.retrieve(k);
2510
2511         // Don't overwrite existing correct entries
2512         if (!tte || tte->move() != pv[ply])
2513         {
2514             v = (pos.is_check() ? VALUE_NONE : evaluate(pos, m));
2515             TT.store(k, VALUE_NONE, VALUE_TYPE_NONE, DEPTH_NONE, pv[ply], v, m);
2516         }
2517         pos.do_move(pv[ply], *st++);
2518
2519     } while (pv[++ply] != MOVE_NONE);
2520
2521     do pos.undo_move(pv[--ply]); while (ply);
2522   }
2523
2524   // pv_info_to_uci() returns a string with information on the current PV line
2525   // formatted according to UCI specification. It is called at each iteration
2526   // or after a new pv is found.
2527
2528   std::string RootMove::pv_info_to_uci(Position& pos, int depth, Value alpha, Value beta, int pvLine) {
2529
2530     std::stringstream s, l;
2531     Move* m = pv;
2532
2533     while (*m != MOVE_NONE)
2534         l << *m++ << " ";
2535
2536     s << "info depth " << depth
2537       << " seldepth " << int(m - pv)
2538       << " multipv " << pvLine + 1
2539       << " score " << value_to_uci(pv_score)
2540       << (pv_score >= beta ? " lowerbound" : pv_score <= alpha ? " upperbound" : "")
2541       << speed_to_uci(pos.nodes_searched())
2542       << " pv "    << l.str();
2543
2544     return s.str();
2545   }
2546
2547
2548   void RootMoveList::init(Position& pos, Move searchMoves[]) {
2549
2550     MoveStack mlist[MOVES_MAX];
2551     Move* sm;
2552
2553     clear();
2554     bestMoveChanges = 0;
2555
2556     // Generate all legal moves and score them
2557     MoveStack* last = generate<MV_LEGAL>(pos, mlist);
2558     qsearch_scoring(pos, mlist, last);
2559
2560     // Add each move to the RootMoveList's vector
2561     for (MoveStack* cur = mlist; cur != last; cur++)
2562     {
2563         // If we have a searchMoves[] list then verify cur->move
2564         // is in the list before to add it.
2565         for (sm = searchMoves; *sm && *sm != cur->move; sm++) {}
2566
2567         if (searchMoves[0] && *sm != cur->move)
2568             continue;
2569
2570         RootMove rm;
2571         rm.pv[0] = cur->move;
2572         rm.pv[1] = MOVE_NONE;
2573         rm.pv_score = Value(cur->score);
2574         push_back(rm);
2575     }
2576     sort();
2577   }
2578
2579 } // namespace