git.sesse.net Git - stockfish/blob - src/Makefile

   1 # Stockfish, a UCI chess playing engine derived from Glaurung 2.1
   2 # Copyright (C) 2004-2021 The Stockfish developers (see AUTHORS file)
   3 #
   4 # Stockfish is free software: you can redistribute it and/or modify
   5 # it under the terms of the GNU General Public License as published by
   6 # the Free Software Foundation, either version 3 of the License, or
   7 # (at your option) any later version.
   8 #
   9 # Stockfish is distributed in the hope that it will be useful,
  10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  12 # GNU General Public License for more details.
  13 #
  14 # You should have received a copy of the GNU General Public License
  15 # along with this program.  If not, see <http://www.gnu.org/licenses/>.
  16
  17
  18 ### ==========================================================================
  19 ### Section 1. General Configuration
  20 ### ==========================================================================
  21
  22 ### Executable name
  23 ifeq ($(COMP),mingw)
  24 EXE = stockfish.exe
  25 else
  26 EXE = stockfish
  27 endif
  28
  29 ### Installation dir definitions
  30 PREFIX = /usr/local
  31 BINDIR = $(PREFIX)/bin
  32
  33 ### Built-in benchmark for pgo-builds
  34 ifeq ($(SDE_PATH),)
  35         PGOBENCH = ./$(EXE) bench
  36 else
  37         PGOBENCH = $(SDE_PATH) -- ./$(EXE) bench
  38 endif
  39
  40 ### Source and object files
  41 SRCS = benchmark.cpp bitbase.cpp bitboard.cpp endgame.cpp evaluate.cpp main.cpp \
  42         material.cpp misc.cpp movegen.cpp movepick.cpp pawns.cpp position.cpp psqt.cpp \
  43         search.cpp thread.cpp timeman.cpp tt.cpp uci.cpp ucioption.cpp tune.cpp syzygy/tbprobe.cpp \
  44         nnue/evaluate_nnue.cpp nnue/features/half_ka_v2_hm.cpp \
  45         hashprobe.grpc.pb.cc hashprobe.pb.cc
  46 CLISRCS = client.cpp hashprobe.grpc.pb.cc hashprobe.pb.cc uci.cpp
  47
  48 OBJS = $(notdir $(SRCS:.cpp=.o))
  49 CLIOBJS = $(notdir $(CLISRCS:.cpp=.o))
  50
  51 VPATH = syzygy:nnue:nnue/features
  52
  53 ### Establish the operating system name
  54 KERNEL = $(shell uname -s)
  55 ifeq ($(KERNEL),Linux)
  56         OS = $(shell uname -o)
  57 endif
  58
  59 ### ==========================================================================
  60 ### Section 2. High-level Configuration
  61 ### ==========================================================================
  62 #
  63 # flag                --- Comp switch      --- Description
  64 # ----------------------------------------------------------------------------
  65 #
  66 # debug = yes/no      --- -DNDEBUG         --- Enable/Disable debug mode
  67 # sanitize = none/<sanitizer> ... (-fsanitize )
  68 #                     --- ( undefined )    --- enable undefined behavior checks
  69 #                     --- ( thread    )    --- enable threading error checks
  70 #                     --- ( address   )    --- enable memory access checks
  71 #                     --- ...etc...        --- see compiler documentation for supported sanitizers
  72 # optimize = yes/no   --- (-O3/-fast etc.) --- Enable/Disable optimizations
  73 # arch = (name)       --- (-arch)          --- Target architecture
  74 # bits = 64/32        --- -DIS_64BIT       --- 64-/32-bit operating system
  75 # prefetch = yes/no   --- -DUSE_PREFETCH   --- Use prefetch asm-instruction
  76 # popcnt = yes/no     --- -DUSE_POPCNT     --- Use popcnt asm-instruction
  77 # pext = yes/no       --- -DUSE_PEXT       --- Use pext x86_64 asm-instruction
  78 # sse = yes/no        --- -msse            --- Use Intel Streaming SIMD Extensions
  79 # mmx = yes/no        --- -mmmx            --- Use Intel MMX instructions
  80 # sse2 = yes/no       --- -msse2           --- Use Intel Streaming SIMD Extensions 2
  81 # ssse3 = yes/no      --- -mssse3          --- Use Intel Supplemental Streaming SIMD Extensions 3
  82 # sse41 = yes/no      --- -msse4.1         --- Use Intel Streaming SIMD Extensions 4.1
  83 # avx2 = yes/no       --- -mavx2           --- Use Intel Advanced Vector Extensions 2
  84 # avxvnni = yes/no    --- -mavxvnni        --- Use Intel Vector Neural Network Instructions AVX
  85 # avx512 = yes/no     --- -mavx512bw       --- Use Intel Advanced Vector Extensions 512
  86 # vnni256 = yes/no    --- -mavx512vnni     --- Use Intel Vector Neural Network Instructions 256
  87 # vnni512 = yes/no    --- -mavx512vnni     --- Use Intel Vector Neural Network Instructions 512
  88 # neon = yes/no       --- -DUSE_NEON       --- Use ARM SIMD architecture
  89 #
  90 # Note that Makefile is space sensitive, so when adding new architectures
  91 # or modifying existing flags, you have to make sure there are no extra spaces
  92 # at the end of the line for flag values.
  93 #
  94 # Example of use for these flags:
  95 # make build ARCH=x86-64-avx512 debug=yes sanitize="address undefined"
  96
  97
  98 ### 2.1. General and architecture defaults
  99
 100 ifeq ($(ARCH),)
 101    ARCH = x86-64-modern
 102    help_skip_sanity = yes
 103 endif
 104 # explicitly check for the list of supported architectures (as listed with make help),
 105 # the user can override with `make ARCH=x86-32-vnni256 SUPPORTED_ARCH=true`
 106 ifeq ($(ARCH), $(filter $(ARCH), \
 107                  x86-64-vnni512 x86-64-vnni256 x86-64-avx512 x86-64-avxvnni x86-64-bmi2 \
 108                  x86-64-avx2 x86-64-sse41-popcnt x86-64-modern x86-64-ssse3 x86-64-sse3-popcnt \
 109                  x86-64 x86-32-sse41-popcnt x86-32-sse2 x86-32 ppc-64 ppc-32 e2k \
 110                  armv7 armv7-neon armv8 apple-silicon general-64 general-32))
 111    SUPPORTED_ARCH=true
 112 else
 113    SUPPORTED_ARCH=false
 114 endif
 115
 116 optimize = yes
 117 debug = no
 118 sanitize = none
 119 bits = 64
 120 prefetch = no
 121 popcnt = no
 122 pext = no
 123 sse = no
 124 mmx = no
 125 sse2 = no
 126 ssse3 = no
 127 sse41 = no
 128 avx2 = no
 129 avxvnni = no
 130 avx512 = no
 131 vnni256 = no
 132 vnni512 = no
 133 neon = no
 134 arm_version = 0
 135 STRIP = strip
 136
 137 ### 2.2 Architecture specific
 138
 139 ifeq ($(findstring x86,$(ARCH)),x86)
 140
 141 # x86-32/64
 142
 143 ifeq ($(findstring x86-32,$(ARCH)),x86-32)
 144         arch = i386
 145         bits = 32
 146         sse = yes
 147         mmx = yes
 148 else
 149         arch = x86_64
 150         sse = yes
 151         sse2 = yes
 152 endif
 153
 154 ifeq ($(findstring -sse,$(ARCH)),-sse)
 155         sse = yes
 156 endif
 157
 158 ifeq ($(findstring -popcnt,$(ARCH)),-popcnt)
 159         popcnt = yes
 160 endif
 161
 162 ifeq ($(findstring -mmx,$(ARCH)),-mmx)
 163         mmx = yes
 164 endif
 165
 166 ifeq ($(findstring -sse2,$(ARCH)),-sse2)
 167         sse = yes
 168         sse2 = yes
 169 endif
 170
 171 ifeq ($(findstring -ssse3,$(ARCH)),-ssse3)
 172         sse = yes
 173         sse2 = yes
 174         ssse3 = yes
 175 endif
 176
 177 ifeq ($(findstring -sse41,$(ARCH)),-sse41)
 178         sse = yes
 179         sse2 = yes
 180         ssse3 = yes
 181         sse41 = yes
 182 endif
 183
 184 ifeq ($(findstring -modern,$(ARCH)),-modern)
 185         popcnt = yes
 186         sse = yes
 187         sse2 = yes
 188         ssse3 = yes
 189         sse41 = yes
 190 endif
 191
 192 ifeq ($(findstring -avx2,$(ARCH)),-avx2)
 193         popcnt = yes
 194         sse = yes
 195         sse2 = yes
 196         ssse3 = yes
 197         sse41 = yes
 198         avx2 = yes
 199 endif
 200
 201 ifeq ($(findstring -avxvnni,$(ARCH)),-avxvnni)
 202         popcnt = yes
 203         sse = yes
 204         sse2 = yes
 205         ssse3 = yes
 206         sse41 = yes
 207         avx2 = yes
 208         avxvnni = yes
 209         pext = yes
 210 endif
 211
 212 ifeq ($(findstring -bmi2,$(ARCH)),-bmi2)
 213         popcnt = yes
 214         sse = yes
 215         sse2 = yes
 216         ssse3 = yes
 217         sse41 = yes
 218         avx2 = yes
 219         pext = yes
 220 endif
 221
 222 ifeq ($(findstring -avx512,$(ARCH)),-avx512)
 223         popcnt = yes
 224         sse = yes
 225         sse2 = yes
 226         ssse3 = yes
 227         sse41 = yes
 228         avx2 = yes
 229         pext = yes
 230         avx512 = yes
 231 endif
 232
 233 ifeq ($(findstring -vnni256,$(ARCH)),-vnni256)
 234         popcnt = yes
 235         sse = yes
 236         sse2 = yes
 237         ssse3 = yes
 238         sse41 = yes
 239         avx2 = yes
 240         pext = yes
 241         vnni256 = yes
 242 endif
 243
 244 ifeq ($(findstring -vnni512,$(ARCH)),-vnni512)
 245         popcnt = yes
 246         sse = yes
 247         sse2 = yes
 248         ssse3 = yes
 249         sse41 = yes
 250         avx2 = yes
 251         pext = yes
 252         avx512 = yes
 253         vnni512 = yes
 254 endif
 255
 256 ifeq ($(sse),yes)
 257         prefetch = yes
 258 endif
 259
 260 # 64-bit pext is not available on x86-32
 261 ifeq ($(bits),32)
 262         pext = no
 263 endif
 264
 265 else
 266
 267 # all other architectures
 268
 269 ifeq ($(ARCH),general-32)
 270         arch = any
 271         bits = 32
 272 endif
 273
 274 ifeq ($(ARCH),general-64)
 275         arch = any
 276 endif
 277
 278 ifeq ($(ARCH),armv7)
 279         arch = armv7
 280         prefetch = yes
 281         bits = 32
 282         arm_version = 7
 283 endif
 284
 285 ifeq ($(ARCH),armv7-neon)
 286         arch = armv7
 287         prefetch = yes
 288         popcnt = yes
 289         neon = yes
 290         bits = 32
 291         arm_version = 7
 292 endif
 293
 294 ifeq ($(ARCH),armv8)
 295         arch = armv8
 296         prefetch = yes
 297         popcnt = yes
 298         neon = yes
 299         arm_version = 8
 300 endif
 301
 302 ifeq ($(ARCH),apple-silicon)
 303         arch = arm64
 304         prefetch = yes
 305         popcnt = yes
 306         neon = yes
 307         arm_version = 8
 308 endif
 309
 310 ifeq ($(ARCH),ppc-32)
 311         arch = ppc
 312         bits = 32
 313 endif
 314
 315 ifeq ($(ARCH),ppc-64)
 316         arch = ppc64
 317         popcnt = yes
 318         prefetch = yes
 319 endif
 320
 321 ifeq ($(findstring e2k,$(ARCH)),e2k)
 322         arch = e2k
 323         mmx = yes
 324         bits = 64
 325         sse = yes
 326         sse2 = yes
 327         ssse3 = yes
 328         sse41 = yes
 329         popcnt = yes
 330 endif
 331
 332 endif
 333
 334 ### ==========================================================================
 335 ### Section 3. Low-level Configuration
 336 ### ==========================================================================
 337
 338 ### 3.1 Selecting compiler (default = gcc)
 339 CXXFLAGS += -Wall -Wcast-qual -fno-exceptions -std=c++17 $(EXTRACXXFLAGS)
 340 DEPENDFLAGS += -std=c++17
 341 LDFLAGS += $(EXTRALDFLAGS)
 342
 343 ifeq ($(COMP),)
 344         COMP=gcc
 345 endif
 346
 347 ifeq ($(COMP),gcc)
 348         comp=gcc
 349         CXX=g++
 350         CXXFLAGS += -pedantic -Wextra
 351
 352         ifeq ($(arch),$(filter $(arch),armv7 armv8))
 353                 ifeq ($(OS),Android)
 354                         CXXFLAGS += -m$(bits)
 355                         LDFLAGS += -m$(bits)
 356                 endif
 357         else
 358                 CXXFLAGS += -m$(bits)
 359                 LDFLAGS += -m$(bits)
 360         endif
 361
 362         ifeq ($(arch),$(filter $(arch),armv7))
 363                 LDFLAGS += -latomic
 364         endif
 365
 366         ifneq ($(KERNEL),Darwin)
 367            LDFLAGS += -Wl,--no-as-needed
 368         endif
 369 endif
 370
 371 ifeq ($(COMP),mingw)
 372         comp=mingw
 373
 374         ifeq ($(KERNEL),Linux)
 375                 ifeq ($(bits),64)
 376                         ifeq ($(shell which x86_64-w64-mingw32-c++-posix),)
 377                                 CXX=x86_64-w64-mingw32-c++
 378                         else
 379                                 CXX=x86_64-w64-mingw32-c++-posix
 380                         endif
 381                 else
 382                         ifeq ($(shell which i686-w64-mingw32-c++-posix),)
 383                                 CXX=i686-w64-mingw32-c++
 384                         else
 385                                 CXX=i686-w64-mingw32-c++-posix
 386                         endif
 387                 endif
 388         else
 389                 CXX=g++
 390         endif
 391
 392         CXXFLAGS += -pedantic -Wextra -Wshadow
 393         LDFLAGS += -static
 394 endif
 395
 396 ifeq ($(COMP),icc)
 397         comp=icc
 398         CXX=icpc
 399         CXXFLAGS += -diag-disable 1476,10120 -Wcheck -Wabi -Wdeprecated -strict-ansi
 400 endif
 401
 402 ifeq ($(COMP),clang)
 403         comp=clang
 404         CXX=clang++
 405         CXXFLAGS += -pedantic -Wextra -Wshadow
 406
 407         ifneq ($(KERNEL),Darwin)
 408         ifneq ($(KERNEL),OpenBSD)
 409         ifneq ($(KERNEL),FreeBSD)
 410         ifneq ($(RTLIB),compiler-rt)
 411                 LDFLAGS += -latomic
 412         endif
 413         endif
 414         endif
 415         endif
 416
 417         ifeq ($(arch),$(filter $(arch),armv7 armv8))
 418                 ifeq ($(OS),Android)
 419                         CXXFLAGS += -m$(bits)
 420                         LDFLAGS += -m$(bits)
 421                 endif
 422         else
 423                 CXXFLAGS += -m$(bits)
 424                 LDFLAGS += -m$(bits)
 425         endif
 426 endif
 427
 428 ifeq ($(KERNEL),Darwin)
 429         CXXFLAGS += -mmacosx-version-min=10.14
 430         LDFLAGS += -mmacosx-version-min=10.14
 431         ifneq ($(arch),any)
 432                 CXXFLAGS += -arch $(arch)
 433                 LDFLAGS += -arch $(arch)
 434         endif
 435         XCRUN = xcrun
 436 endif
 437
 438 # To cross-compile for Android, NDK version r21 or later is recommended.
 439 # In earlier NDK versions, you'll need to pass -fno-addrsig if using GNU binutils.
 440 # Currently we don't know how to make PGO builds with the NDK yet.
 441 ifeq ($(COMP),ndk)
 442         CXXFLAGS += -stdlib=libc++ -fPIE
 443         comp=clang
 444         ifeq ($(arch),armv7)
 445                 CXX=armv7a-linux-androideabi16-clang++
 446                 CXXFLAGS += -mthumb -march=armv7-a -mfloat-abi=softfp -mfpu=neon
 447                 STRIP=arm-linux-androideabi-strip
 448         endif
 449         ifeq ($(arch),armv8)
 450                 CXX=aarch64-linux-android21-clang++
 451                 STRIP=aarch64-linux-android-strip
 452         endif
 453         LDFLAGS += -static-libstdc++ -pie -lm -latomic
 454 endif
 455
 456 ifeq ($(comp),icc)
 457         profile_make = icc-profile-make
 458         profile_use = icc-profile-use
 459 else ifeq ($(comp),clang)
 460         profile_make = clang-profile-make
 461         profile_use = clang-profile-use
 462 else
 463         profile_make = gcc-profile-make
 464         profile_use = gcc-profile-use
 465         ifeq ($(KERNEL),Darwin)
 466                 EXTRAPROFILEFLAGS = -fvisibility=hidden
 467         endif
 468 endif
 469
 470 ### Travis CI script uses COMPILER to overwrite CXX
 471 ifdef COMPILER
 472         COMPCXX=$(COMPILER)
 473 endif
 474
 475 ### Allow overwriting CXX from command line
 476 ifdef COMPCXX
 477         CXX=$(COMPCXX)
 478 endif
 479
 480 ### Sometimes gcc is really clang
 481 ifeq ($(COMP),gcc)
 482         gccversion = $(shell $(CXX) --version)
 483         gccisclang = $(findstring clang,$(gccversion))
 484         ifneq ($(gccisclang),)
 485                 profile_make = clang-profile-make
 486                 profile_use = clang-profile-use
 487         endif
 488 endif
 489
 490 ### On mingw use Windows threads, otherwise POSIX
 491 ifneq ($(comp),mingw)
 492         CXXFLAGS += -DUSE_PTHREADS
 493         # On Android Bionic's C library comes with its own pthread implementation bundled in
 494         ifneq ($(OS),Android)
 495                 # Haiku has pthreads in its libroot, so only link it in on other platforms
 496                 ifneq ($(KERNEL),Haiku)
 497                         ifneq ($(COMP),ndk)
 498                                 LDFLAGS += -lpthread
 499                         endif
 500                 endif
 501         endif
 502 endif
 503
 504 ### 3.2.1 Debugging
 505 ifeq ($(debug),no)
 506         CXXFLAGS += -DNDEBUG
 507 else
 508         CXXFLAGS += -g
 509 endif
 510
 511 ### 3.2.2 Debugging with undefined behavior sanitizers
 512 ifneq ($(sanitize),none)
 513         CXXFLAGS += -g3 $(addprefix -fsanitize=,$(sanitize))
 514         LDFLAGS += $(addprefix -fsanitize=,$(sanitize))
 515 endif
 516
 517 ### 3.3 Optimization
 518 ifeq ($(optimize),yes)
 519
 520         CXXFLAGS += -O3 -g
 521
 522         ifeq ($(comp),gcc)
 523                 ifeq ($(OS), Android)
 524                         CXXFLAGS += -fno-gcse -mthumb -march=armv7-a -mfloat-abi=softfp
 525                 endif
 526         endif
 527
 528     ifeq ($(KERNEL),Darwin)
 529         ifeq ($(comp),$(filter $(comp),clang icc))
 530             CXXFLAGS += -mdynamic-no-pic
 531         endif
 532
 533         ifeq ($(comp),gcc)
 534             ifneq ($(arch),arm64)
 535                 CXXFLAGS += -mdynamic-no-pic
 536             endif
 537         endif
 538     endif
 539
 540         ifeq ($(comp),clang)
 541                 CXXFLAGS += -fexperimental-new-pass-manager
 542         endif
 543 endif
 544
 545 ### 3.4 Bits
 546 ifeq ($(bits),64)
 547         CXXFLAGS += -DIS_64BIT
 548 endif
 549
 550 ### 3.5 prefetch and popcount
 551 ifeq ($(prefetch),yes)
 552         ifeq ($(sse),yes)
 553                 CXXFLAGS += -msse
 554         endif
 555 else
 556         CXXFLAGS += -DNO_PREFETCH
 557 endif
 558
 559 ifeq ($(popcnt),yes)
 560         ifeq ($(arch),$(filter $(arch),ppc64 armv7 armv8 arm64))
 561                 CXXFLAGS += -DUSE_POPCNT
 562         else ifeq ($(comp),icc)
 563                 CXXFLAGS += -msse3 -DUSE_POPCNT
 564         else
 565                 CXXFLAGS += -msse3 -mpopcnt -DUSE_POPCNT
 566         endif
 567 endif
 568
 569 ### 3.6 SIMD architectures
 570 ifeq ($(avx2),yes)
 571         CXXFLAGS += -DUSE_AVX2
 572         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 573                 CXXFLAGS += -mavx2
 574         endif
 575 endif
 576
 577 ifeq ($(avxvnni),yes)
 578         CXXFLAGS += -DUSE_VNNI -DUSE_AVXVNNI
 579         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 580                 CXXFLAGS += -mavxvnni
 581         endif
 582 endif
 583
 584 ifeq ($(avx512),yes)
 585         CXXFLAGS += -DUSE_AVX512
 586         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 587                 CXXFLAGS += -mavx512f -mavx512bw
 588         endif
 589 endif
 590
 591 ifeq ($(vnni256),yes)
 592         CXXFLAGS += -DUSE_VNNI
 593         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 594                 CXXFLAGS += -mavx512f -mavx512bw -mavx512vnni -mavx512dq -mavx512vl -mprefer-vector-width=256
 595         endif
 596 endif
 597
 598 ifeq ($(vnni512),yes)
 599         CXXFLAGS += -DUSE_VNNI
 600         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 601                 CXXFLAGS += -mavx512vnni -mavx512dq -mavx512vl
 602         endif
 603 endif
 604
 605 ifeq ($(sse41),yes)
 606         CXXFLAGS += -DUSE_SSE41
 607         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 608                 CXXFLAGS += -msse4.1
 609         endif
 610 endif
 611
 612 ifeq ($(ssse3),yes)
 613         CXXFLAGS += -DUSE_SSSE3
 614         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 615                 CXXFLAGS += -mssse3
 616         endif
 617 endif
 618
 619 ifeq ($(sse2),yes)
 620         CXXFLAGS += -DUSE_SSE2
 621         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 622                 CXXFLAGS += -msse2
 623         endif
 624 endif
 625
 626 ifeq ($(mmx),yes)
 627         CXXFLAGS += -DUSE_MMX
 628         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 629                 CXXFLAGS += -mmmx
 630         endif
 631 endif
 632
 633 ifeq ($(neon),yes)
 634         CXXFLAGS += -DUSE_NEON=$(arm_version)
 635         ifeq ($(KERNEL),Linux)
 636         ifneq ($(COMP),ndk)
 637         ifneq ($(arch),armv8)
 638                 CXXFLAGS += -mfpu=neon
 639         endif
 640         endif
 641         endif
 642 endif
 643
 644 ### 3.7 pext
 645 ifeq ($(pext),yes)
 646         CXXFLAGS += -DUSE_PEXT
 647         ifeq ($(comp),$(filter $(comp),gcc clang mingw))
 648                 CXXFLAGS += -mbmi2
 649         endif
 650 endif
 651
 652 ### 3.8 Link Time Optimization
 653 ### This is a mix of compile and link time options because the lto link phase
 654 ### needs access to the optimization flags.
 655 ifeq ($(optimize),yes)
 656 ifeq ($(debug), no)
 657         ifeq ($(comp),clang)
 658                 CXXFLAGS += -flto
 659                 ifneq ($(findstring MINGW,$(KERNEL)),)
 660                         CXXFLAGS += -fuse-ld=lld
 661                 else ifneq ($(findstring MSYS,$(KERNEL)),)
 662                         CXXFLAGS += -fuse-ld=lld
 663                 endif
 664                 LDFLAGS += $(CXXFLAGS)
 665
 666 # GCC and CLANG use different methods for parallelizing LTO and CLANG pretends to be
 667 # GCC on some systems.
 668         else ifeq ($(comp),gcc)
 669         ifeq ($(gccisclang),)
 670                 CXXFLAGS += -flto
 671                 LDFLAGS += $(CXXFLAGS) -flto=jobserver
 672                 ifneq ($(findstring MINGW,$(KERNEL)),)
 673                         LDFLAGS += -save-temps
 674                 else ifneq ($(findstring MSYS,$(KERNEL)),)
 675                         LDFLAGS += -save-temps
 676                 endif
 677         else
 678                 CXXFLAGS += -flto
 679                 LDFLAGS += $(CXXFLAGS)
 680         endif
 681
 682 # To use LTO and static linking on windows, the tool chain requires a recent gcc:
 683 # gcc version 10.1 in msys2 or TDM-GCC version 9.2 are known to work, older might not.
 684 # So, only enable it for a cross from Linux by default.
 685         else ifeq ($(comp),mingw)
 686         ifeq ($(KERNEL),Linux)
 687         ifneq ($(arch),i386)
 688                 CXXFLAGS += -flto
 689                 LDFLAGS += $(CXXFLAGS) -flto=jobserver
 690         endif
 691         endif
 692         endif
 693 endif
 694 endif
 695
 696 ### 3.9 Android 5 can only run position independent executables. Note that this
 697 ### breaks Android 4.0 and earlier.
 698 ifeq ($(OS), Android)
 699         CXXFLAGS += -fPIE
 700         LDFLAGS += -fPIE -pie
 701 endif
 702
 703 ### ==========================================================================
 704 ### Section 4. Public Targets
 705 ### ==========================================================================
 706
 707
 708 help:
 709         @echo ""
 710         @echo "To compile stockfish, type: "
 711         @echo ""
 712         @echo "make target ARCH=arch [COMP=compiler] [COMPCXX=cxx]"
 713         @echo ""
 714         @echo "Supported targets:"
 715         @echo ""
 716         @echo "help                    > Display architecture details"
 717         @echo "build                   > Standard build"
 718         @echo "net                     > Download the default nnue net"
 719         @echo "profile-build           > Faster build (with profile-guided optimization)"
 720         @echo "strip                   > Strip executable"
 721         @echo "install                 > Install executable"
 722         @echo "clean                   > Clean up"
 723         @echo ""
 724         @echo "Supported archs:"
 725         @echo ""
 726         @echo "x86-64-vnni512          > x86 64-bit with vnni support 512bit wide"
 727         @echo "x86-64-vnni256          > x86 64-bit with vnni support 256bit wide"
 728         @echo "x86-64-avx512           > x86 64-bit with avx512 support"
 729         @echo "x86-64-avxvnni          > x86 64-bit with avxvnni support"
 730         @echo "x86-64-bmi2             > x86 64-bit with bmi2 support"
 731         @echo "x86-64-avx2             > x86 64-bit with avx2 support"
 732         @echo "x86-64-sse41-popcnt     > x86 64-bit with sse41 and popcnt support"
 733         @echo "x86-64-modern           > common modern CPU, currently x86-64-sse41-popcnt"
 734         @echo "x86-64-ssse3            > x86 64-bit with ssse3 support"
 735         @echo "x86-64-sse3-popcnt      > x86 64-bit with sse3 and popcnt support"
 736         @echo "x86-64                  > x86 64-bit generic (with sse2 support)"
 737         @echo "x86-32-sse41-popcnt     > x86 32-bit with sse41 and popcnt support"
 738         @echo "x86-32-sse2             > x86 32-bit with sse2 support"
 739         @echo "x86-32                  > x86 32-bit generic (with mmx and sse support)"
 740         @echo "ppc-64                  > PPC 64-bit"
 741         @echo "ppc-32                  > PPC 32-bit"
 742         @echo "armv7                   > ARMv7 32-bit"
 743         @echo "armv7-neon              > ARMv7 32-bit with popcnt and neon"
 744         @echo "armv8                   > ARMv8 64-bit with popcnt and neon"
 745         @echo "e2k                     > Elbrus 2000"
 746         @echo "apple-silicon           > Apple silicon ARM64"
 747         @echo "general-64              > unspecified 64-bit"
 748         @echo "general-32              > unspecified 32-bit"
 749         @echo ""
 750         @echo "Supported compilers:"
 751         @echo ""
 752         @echo "gcc                     > Gnu compiler (default)"
 753         @echo "mingw                   > Gnu compiler with MinGW under Windows"
 754         @echo "clang                   > LLVM Clang compiler"
 755         @echo "icc                     > Intel compiler"
 756         @echo "ndk                     > Google NDK to cross-compile for Android"
 757         @echo ""
 758         @echo "Simple examples. If you don't know what to do, you likely want to run: "
 759         @echo ""
 760         @echo "make -j build ARCH=x86-64  (A portable, slow compile for 64-bit systems)"
 761         @echo "make -j build ARCH=x86-32  (A portable, slow compile for 32-bit systems)"
 762         @echo ""
 763         @echo "Advanced examples, for experienced users looking for performance: "
 764         @echo ""
 765         @echo "make    help  ARCH=x86-64-bmi2"
 766         @echo "make -j profile-build ARCH=x86-64-bmi2 COMP=gcc COMPCXX=g++-9.0"
 767         @echo "make -j build ARCH=x86-64-ssse3 COMP=clang"
 768         @echo ""
 769         @echo "-------------------------------"
 770 ifeq ($(SUPPORTED_ARCH)$(help_skip_sanity), true)
 771         @echo "The selected architecture $(ARCH) will enable the following configuration: "
 772         @$(MAKE) ARCH=$(ARCH) COMP=$(COMP) config-sanity
 773 else
 774         @echo "Specify a supported architecture with the ARCH option for more details"
 775         @echo ""
 776 endif
 777
 778
 779 .PHONY: help build profile-build strip install clean net objclean profileclean \
 780         config-sanity icc-profile-use icc-profile-make gcc-profile-use gcc-profile-make \
 781         clang-profile-use clang-profile-make
 782
 783 build: net config-sanity
 784         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) all
 785
 786 profile-build: net config-sanity objclean profileclean
 787         @echo ""
 788         @echo "Step 1/4. Building instrumented executable ..."
 789         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) $(profile_make)
 790         @echo ""
 791         @echo "Step 2/4. Running benchmark for pgo-build ..."
 792         $(PGOBENCH) 2>&1 | tail -n 4
 793         @echo ""
 794         @echo "Step 3/4. Building optimized executable ..."
 795         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) objclean
 796         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) $(profile_use)
 797         @echo ""
 798         @echo "Step 4/4. Deleting profile data ..."
 799         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) profileclean
 800
 801 strip:
 802         $(STRIP) $(EXE)
 803
 804 install:
 805         -mkdir -p -m 755 $(BINDIR)
 806         -cp $(EXE) $(BINDIR)
 807         -strip $(BINDIR)/$(EXE)
 808
 809 # clean all
 810 clean: objclean profileclean
 811         @rm -f .depend *~ core
 812
 813 # evaluation network (nnue)
 814 net:
 815         $(eval nnuenet := $(shell grep EvalFileDefaultName evaluate.h | grep define | sed 's/.*\(nn-[a-z0-9]\{12\}.nnue\).*/\1/'))
 816         @echo "Default net: $(nnuenet)"
 817         $(eval nnuedownloadurl := https://tests.stockfishchess.org/api/nn/$(nnuenet))
 818         $(eval curl_or_wget := $(shell if hash curl 2>/dev/null; then echo "curl -skL"; elif hash wget 2>/dev/null; then echo "wget -qO-"; fi))
 819         @if test -f "$(nnuenet)"; then \
 820             echo "Already available."; \
 821          else \
 822             if [ "x$(curl_or_wget)" = "x" ]; then \
 823                echo "Automatic download failed: neither curl nor wget is installed. Install one of these tools or download the net manually"; exit 1; \
 824             else \
 825                echo "Downloading $(nnuedownloadurl)"; $(curl_or_wget) $(nnuedownloadurl) > $(nnuenet);\
 826             fi; \
 827         fi;
 828         $(eval shasum_command := $(shell if hash shasum 2>/dev/null; then echo "shasum -a 256 "; elif hash sha256sum 2>/dev/null; then echo "sha256sum "; fi))
 829         @if [ "x$(shasum_command)" != "x" ]; then \
 830             if [ "$(nnuenet)" != "nn-"`$(shasum_command) $(nnuenet) | cut -c1-12`".nnue" ]; then \
 831                 echo "Failed download or $(nnuenet) corrupted, please delete!"; exit 1; \
 832             fi \
 833          else \
 834             echo "shasum / sha256sum not found, skipping net validation"; \
 835         fi
 836
 837 # clean binaries and objects
 838 objclean:
 839         @rm -f $(EXE) *.o ./syzygy/*.o ./nnue/*.o ./nnue/features/*.o
 840
 841 # clean auxiliary profiling files
 842 profileclean:
 843         @rm -rf profdir
 844         @rm -f bench.txt *.gcda *.gcno ./syzygy/*.gcda ./nnue/*.gcda ./nnue/features/*.gcda *.s
 845         @rm -f stockfish.profdata *.profraw
 846         @rm -f stockfish.exe.lto_wrapper_args
 847         @rm -f stockfish.exe.ltrans.out
 848         @rm -f ./-lstdc++.res
 849
 850 default:
 851         help
 852
 853 ### ==========================================================================
 854 ### Section 5. Private Targets
 855 ### ==========================================================================
 856
 857 all: $(EXE) client .depend
 858
 859 config-sanity: net
 860         @echo ""
 861         @echo "Config:"
 862         @echo "debug: '$(debug)'"
 863         @echo "sanitize: '$(sanitize)'"
 864         @echo "optimize: '$(optimize)'"
 865         @echo "arch: '$(arch)'"
 866         @echo "bits: '$(bits)'"
 867         @echo "kernel: '$(KERNEL)'"
 868         @echo "os: '$(OS)'"
 869         @echo "prefetch: '$(prefetch)'"
 870         @echo "popcnt: '$(popcnt)'"
 871         @echo "pext: '$(pext)'"
 872         @echo "sse: '$(sse)'"
 873         @echo "mmx: '$(mmx)'"
 874         @echo "sse2: '$(sse2)'"
 875         @echo "ssse3: '$(ssse3)'"
 876         @echo "sse41: '$(sse41)'"
 877         @echo "avx2: '$(avx2)'"
 878         @echo "avxvnni: '$(avxvnni)'"
 879         @echo "avx512: '$(avx512)'"
 880         @echo "vnni256: '$(vnni256)'"
 881         @echo "vnni512: '$(vnni512)'"
 882         @echo "neon: '$(neon)'"
 883         @echo "arm_version: '$(arm_version)'"
 884         @echo ""
 885         @echo "Flags:"
 886         @echo "CXX: $(CXX)"
 887         @echo "CXXFLAGS: $(CXXFLAGS)"
 888         @echo "LDFLAGS: $(LDFLAGS)"
 889         @echo ""
 890         @echo "Testing config sanity. If this fails, try 'make help' ..."
 891         @echo ""
 892         @test "$(debug)" = "yes" || test "$(debug)" = "no"
 893         @test "$(optimize)" = "yes" || test "$(optimize)" = "no"
 894         @test "$(SUPPORTED_ARCH)" = "true"
 895         @test "$(arch)" = "any" || test "$(arch)" = "x86_64" || test "$(arch)" = "i386" || \
 896          test "$(arch)" = "ppc64" || test "$(arch)" = "ppc" || test "$(arch)" = "e2k" || \
 897          test "$(arch)" = "armv7" || test "$(arch)" = "armv8" || test "$(arch)" = "arm64"
 898         @test "$(bits)" = "32" || test "$(bits)" = "64"
 899         @test "$(prefetch)" = "yes" || test "$(prefetch)" = "no"
 900         @test "$(popcnt)" = "yes" || test "$(popcnt)" = "no"
 901         @test "$(pext)" = "yes" || test "$(pext)" = "no"
 902         @test "$(sse)" = "yes" || test "$(sse)" = "no"
 903         @test "$(mmx)" = "yes" || test "$(mmx)" = "no"
 904         @test "$(sse2)" = "yes" || test "$(sse2)" = "no"
 905         @test "$(ssse3)" = "yes" || test "$(ssse3)" = "no"
 906         @test "$(sse41)" = "yes" || test "$(sse41)" = "no"
 907         @test "$(avx2)" = "yes" || test "$(avx2)" = "no"
 908         @test "$(avx512)" = "yes" || test "$(avx512)" = "no"
 909         @test "$(vnni256)" = "yes" || test "$(vnni256)" = "no"
 910         @test "$(vnni512)" = "yes" || test "$(vnni512)" = "no"
 911         @test "$(neon)" = "yes" || test "$(neon)" = "no"
 912         @test "$(comp)" = "gcc" || test "$(comp)" = "icc" || test "$(comp)" = "mingw" || test "$(comp)" = "clang" \
 913         || test "$(comp)" = "armv7a-linux-androideabi16-clang"  || test "$(comp)" = "aarch64-linux-android21-clang"
 914
 915 $(EXE): $(OBJS)
 916         +$(CXX) -o $@ $(OBJS) $(LDFLAGS)
 917
 918 clang-profile-make:
 919         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 920         EXTRACXXFLAGS='-fprofile-instr-generate ' \
 921         EXTRALDFLAGS=' -fprofile-instr-generate' \
 922         all
 923
 924 clang-profile-use:
 925         $(XCRUN) llvm-profdata merge -output=stockfish.profdata *.profraw
 926         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 927         EXTRACXXFLAGS='-fprofile-instr-use=stockfish.profdata' \
 928         EXTRALDFLAGS='-fprofile-use ' \
 929         all
 930
 931 gcc-profile-make:
 932         @mkdir -p profdir
 933         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 934         EXTRACXXFLAGS='-fprofile-generate=profdir' \
 935         EXTRACXXFLAGS+=$(EXTRAPROFILEFLAGS) \
 936         EXTRALDFLAGS='-lgcov' \
 937         all
 938
 939 gcc-profile-use:
 940         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 941         EXTRACXXFLAGS='-fprofile-use=profdir -fno-peel-loops -fno-tracer' \
 942         EXTRACXXFLAGS+=$(EXTRAPROFILEFLAGS) \
 943         EXTRALDFLAGS='-lgcov' \
 944         all
 945
 946 icc-profile-make:
 947         @mkdir -p profdir
 948         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 949         EXTRACXXFLAGS='-prof-gen=srcpos -prof_dir ./profdir' \
 950         all
 951
 952 icc-profile-use:
 953         $(MAKE) ARCH=$(ARCH) COMP=$(COMP) \
 954         EXTRACXXFLAGS='-prof_use -prof_dir ./profdir' \
 955         all
 956
 957 ### GRPC
 958
 959 PROTOS_PATH = .
 960 PROTOC = protoc
 961 GRPC_CPP_PLUGIN = grpc_cpp_plugin
 962 GRPC_CPP_PLUGIN_PATH ?= `which $(GRPC_CPP_PLUGIN)`
 963
 964 %.grpc.pb.h %.grpc.pb.cc: %.proto
 965         $(PROTOC) -I $(PROTOS_PATH) --grpc_out=. --plugin=protoc-gen-grpc=$(GRPC_CPP_PLUGIN_PATH) $<
 966
 967 # oh my
 968 %.cpp: %.cc
 969         cp $< $@
 970
 971 %.pb.h %.pb.cc: %.proto
 972         $(PROTOC) -I $(PROTOS_PATH) --cpp_out=. $<
 973
 974 #LDFLAGS += -Wl,-Bstatic -Wl,-\( -lprotobuf -lgrpc++_unsecure -lgrpc_unsecure -lgrpc -lz -Wl,-\) -Wl,-Bdynamic -ldl
 975 LDFLAGS += /usr/lib/x86_64-linux-gnu/libprotobuf.a /usr/lib/x86_64-linux-gnu/libgrpc++_unsecure.a /usr/lib/x86_64-linux-gnu/libgrpc_unsecure.a /usr/lib/x86_64-linux-gnu/libgrpc.a /usr/lib/x86_64-linux-gnu/libcares.a /usr/lib/x86_64-linux-gnu/libgpr.a /usr/lib/x86_64-linux-gnu/libabsl_str_format_internal.a /usr/lib/x86_64-linux-gnu/libabsl_strings.a /usr/lib/x86_64-linux-gnu/libabsl_flags_marshalling.a /usr/lib/x86_64-linux-gnu/libabsl_throw_delegate.a /usr/lib/x86_64-linux-gnu/libabsl_raw_logging_internal.a /usr/lib/x86_64-linux-gnu/libabsl_base.a /usr/lib/x86_64-linux-gnu/libabsl_int128.a /usr/lib/x86_64-linux-gnu/libabsl_bad_optional_access.a -ldl -lz
 976 #LDFLAGS += /usr/lib/x86_64-linux-gnu/libprotobuf.a /usr/lib/libgrpc++_unsecure.a /usr/lib/libgrpc_unsecure.a /usr/lib/libgrpc.a /usr/lib/x86_64-linux-gnu/libcares.a -ldl -lz
 977
 978 client: $(CLIOBJS)
 979         $(CXX) -o $@ $(CLIOBJS) $(LDFLAGS)
 980
 981 # Other stuff
 982
 983 .depend: $(SRCS)
 984         -@$(CXX) $(DEPENDFLAGS) -MM $(SRCS) > $@ 2> /dev/null
 985
 986 -include .depend