版块导航: 正在加载中...

登录注册

应《网络安全法》要求，自2017年10月1日起，未进行实名认证将不得使用互联网跟帖服务。为保障您的帐号能够正常使用，请尽快对帐号进行手机号验证，感谢您的理解与支持！

24小时热门版块排行榜

返回列表

【奖励】本帖被评价28次，作者wuy069增加金币 22 个

wuy069

铁杆木虫 (正式写手)

应助: 20 (小学生)
金币: 7921.9
帖子: 506
在线: 549.1小时
虫号: 760723

[资源] Dalton2011并行编译详记

Dalton 2011 并行编译
      先唠叨几句编译的血泪史吧！这玩意编译起来真是费劲啊，从dalton2.0-cam编译了很多次，从g77,gfortran,pgi,ifort编译器; mpich,mpich2,openmpi,impi等mpi; blas,atals,lapack,mkl等数学库，虽然有些能编译成功，但测试时总有很多例子不能通过。不过我这个人在服务器、系统、软件等方面还是挺能折腾的，不把它弄清楚，始终觉得有什么东西压在心底，很是不舒服。Dalton2011发布后也折腾了一段时间，通过dalton邮件列表也问了些问题，这两天终于算把这并行编译的问题搞定了，测试时串行和并行例子都成功。虽然它很能折腾人，但也让我学到了很多。好了，言归正传，下面就讲Dalton2011的并行编译。
      现在大家所使用的Linux服务器系统几乎都是64位（x84_64或amd64），因而在此讲的几乎都是64位编译器和64位数学库编译的Dalton2011。大家默认编译的mpi都是32位整数的，也能编译成功；但最好用64位整数的mpi。
      下面分别用gfortran/gcc, ifort/icc编译Dalton2011。
1.使用gfortran/gcc, openmpi, atlas with full lapack编译并行的Dalton2011
1）首先说明一点，使用gfortran编译，gfortran版本至少要高于4.3（我用的是RHEL6.1 , gfortran版本为4.4.5），否则你编译时会出现此错误Fatal Error: Can't open module file 'memory_tracker.mod' for reading at (1): No such file or directory。使用gfortran -v  命令查看gfortran的版本。
2）在http://www.open-mpi.org/software/ompi/v1.4/ 下载稳定的openmpi，我使用的是openmpi-1.4.3。使用gfortran/gcc编译64位整数的openmpi：
[wuy@pc2 ~]$ cd tmp/
[wuy@pc2 tmp]$ ls
openmpi-1.4.3.tar.gz
[wuy@pc2 tmp]$ tar -zxvf openmpi-1.4.3.tar.gz
[wuy@pc2 tmp]$ cd openmpi-1.4.3
[wuy@pc2 tmp]$ ./configure --prefix=/home/wuy/mpi/gnu/openmpi-1.4.3 CXX=g++ CC=gcc F77=gfortran FC=gfortran FFLAGS="-m64 -fdefault-integer-8" FCFLAGS="-m64 -fdefault-integer-8" CFLAGS=-m64 CXXFLAGS=-m64
[wuy@pc2 tmp]$ make all install &> make.log &
用gfortran/gcc编译64位整数的openmpi，需要在FFLAGS和FCFLAGS选项中添加-fdefault-integer-8。
在自己用户的根目录下.bashrc中添加openmpi的环境变量
[wuy@pc2 tmp]$ cd $HOME
[wuy@pc2 ~]$ vi .bashrc
在此文件中添加：
#set for openmpi-1.4.3
export PATH=/home/wuy/mpi/gnu/openmpi-1.4.3/bin:$PATH
export LD_LIBRARY_PATH=/home/wuy/mpi/gnu/openmpi-1.4.3:$LD_LIBRARY_PATH
export LD_LIBRARY_PATH=/home/wuy/mpi/gnu/openmpi-1.4.3/lib:$LD_LIBRARY_PATH
export OMPI_MPIF77="gfortran"
export OMPI_MPIFC="gfortran"
export OMPI_MPICC="gcc"
export OMPI_MPICXX="g++"
#end
保存后退出（:wq），刷新环境变量；
[wuy@pc2 ~]$ source .bashrc
[wuy@pc2 ~]$ which mpif90
~/mpi/gnu/openmpi-1.4.3/bin/mpif90
这时说明就可以使用openmpi了。那如何知道我们编译的是64位整数的openmpi呢？
[wuy@pc2 ~]$ ompi_info -a | grep 'Fort integer size'
   Fort integer size: 8
得到是Fort integer size: 8，说明是64位整数的openmpi；如果得到的是Fort integer size: 4，说明你编译的是32位整数的openmpi。
3）数学库的选择；在此，可以不用自己编译数学库，使用Dalton2011自带的数学库也行。虽然自带的数学库也能编译成功，但是编译后的可执行代码肯定较慢。用mkl数学库也行，但用gfortran编译Dalton2011，我自己不推荐使用mkl数学库。我们可以使用完全支持lapack的atlas库。使用gfortran编译的atlas with full lapack，具体见http://math-atlas.sourceforge.ne ... 00000000|Installing ，见8 Example: Installing ATLAS with full LAPACK on Linux/AMD64。这个虽然是英文的，初步看来比较麻烦，但写的非常详细，按照他的步骤，肯定能安装成功。
我使用的是atlas3.8.2和lapack-3.1.1；安装成功后会有6个库函数，libatlas.a  libcblas.a  libf77blas.a  liblapack.a  libptcblas.a  libptf77blas.a。
在自己用户的根目录下.bashrc中添加，
#set for atlas with full lapack
export INCLUDE=$INCLUDE:/home/wuy/atlas/include
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/home/wuy/atlas/lib
#end
保存后退出（:wq），刷新环境变量；
[wuy@pc2 ~]$ source .bashrc
4）编译DALTON
[wuy@pc2 ~]$ cd chemsoft/
[wuy@pc2 chemsoft]$ ls
Dalton2011_release_v0.tgz
[wuy@pc2 chemsoft]$ tar -zxvf Dalton2011_release_v0.tgz
[wuy@pc2 chemsoft]$ cd Dalton2011_release
[wuy@pc2 Dalton2011_release]$ cd DALTON/
[wuy@pc2 DALTON]$ ./configure

------------------------------------------------------------------
Configuring the DALTON Makefile.config and "dalton" run script
------------------------------------------------------------------

INFO: Operating system from 'uname -s' : Linux
INFO: Processor type from 'uname -m' : x86_64
No architecture specified, attempting auto-configuration:
This appears to be a -linux architecture. Is this correct? [Y/n] Y

--> Installing DALTON on a -linux computer

Note that 64-bit integers are desirable for Cholesky and very large
scale CI, otherwise the most important effect is that some files will be bigger.

If you choose 64-bit integers, be careful that any system library
routines (incl. MPI) also use 64-bit integers!

Do you want 64-bit integers? [y/N] y
Do you want to install the program in a parallel MPI version? [Y/n] Y

-->WARNING: Makefiles for MPI architecture are difficult to guess
Please compare the generated Makefile.config with local documentation.

Checking for Fortran compiler ...
from this list: mpif90 mpiifort ifort pgf95 pgf90 gfortran g95

Compiler /home/wuy/mpi/gnu/openmpi-1.4.3/bin/mpif90 found, use this compiler? [Y/n] Y

-->Compiler mpif90 found and accepted.
Is backend compiler gfortran ? [Y/n] Y

Checking for C compiler ...
from this list: mpicc  mpiicc icc ecc pgcc gcc

Compiler /home/wuy/mpi/gnu/openmpi-1.4.3/bin/mpicc found, use this compiler? [Y/n] Y

-->Compiler mpicc found and accepted.

Testing existence of libraries in this order:
libacml.a libmkl.so libmkl_p3.a libatlas.a libblas.a
Directory search list for libraries:
  /usr/local/lib/ATLAS /home/wuy/math/atlas3.8.2/stallo-64-i4/lib /home/wuy/atlas/lib /lib /usr/local/lib /usr/lib /usr/local/lib/ATLAS /lib64 /usr/lib64 /usr/local/lib64

Do you want to replace this with your own directory search list? [y/N] N
Found /usr/local/lib/ATLAS/libatlas.a, use it? [Y/n] n
Found /home/wuy/math/atlas3.8.2/stallo-64-i4/lib/libatlas.a, use it? [Y/n] n
Found /home/wuy/atlas/lib/libatlas.a, use it? [Y/n] Y

-->The following mathematical library(ies) will be used:
-L/home/wuy/atlas/lib -llapack -lcblas -lf77blas -latlas

DALTON uses almost 100 Megabytes of static
allocations, in addition to the dynamic allocation.

DALTON has the possibility to reserve an amount of static memory
for storing two-electron integrals in direct and parallel calculations
Storing some or all of the 2-el. integrals in memory will speed up
direct and parallel calculations (and in particular the latter).
NOTE: This will increase the static memory allocation used by DALTON

Would you like to activate the possibility of storing 2-el.int. in memory? [y/N] y
How many MB to use for storing 2-el. integrals? 3072

-->Program will be installed with 3072 MB (402000000 words) used for storing 2-el. integrals

Maximum amount of work memory for dynamic allocations can be changed
at run time with the environment variable WRKMEM (in REAL*8 words = megabytes/8)
or by using the -M option to the run script: "dalton -M mb ..." (in megabytes).
We recommend at least 200 MB work memory,
larger for correlated calculations, but it should for maximum
efficiency NOT exceed available physical memory per CPU in parallel calculations.

How many MB to use as default for work memory (hit return for default of 1000 MB)?

-->Program will be installed with a default work memory of 1000 MB (131000000 words)

-->Current directory is /home/wuy/Dalton2011_release/DALTON

Use default ../bin as installation directory for DALTON binaries and scripts? [Y/n] Y

-->DALTON executable and script will be placed in /home/wuy/Dalton2011_release/bin directory

-->Default basis set directory will be /home/wuy/Dalton2011_release/DALTON/../basis/

Use this directory as default basis set directory? [Y/n] Y

I did not find /work, /scratch, /scr, or /temp. I will use /tmp

-->Job specific directories under $SCRATCH/$USER
-->will be used for temporary files when running DALTON

Use SCRATCH=/tmp as default root scratch space in "dalton" run script? [Y/n] n
Please enter default root scratch directory: /home/wuy/tmp

-->Creating Makefile.config ...
gfortran version 445 prc=x86_64
INFO: Compiling with 64-bit integers.
INFO: Make sure pre-compiled BLAS, MPI etc. libraries are also with 64-bit integers!!!

Proper 64-bit file access detected.

-->Creating the DALTON run-script in /home/wuy/Dalton2011_release/bin

The configuration of DALTON has finished succesfully.
Check compiler flags etc. in Makefile.config and run "make" to get executable.
[wuy@pc2 DALTON]$
这时会产生一个Makefile.config
下面是我的Makefile.config
[wuy@pc2 DALTON]$ cat Makefile.config
ARCH       = linux
#
#
CPPFLAGS    = -DVAR_GFORTRAN -DSYS_LINUX -DVAR_MFDS -D'INSTALL_WRKMEM=131000000' -D'INSTALL_MMWORK=1' -D_FILE_OFFSET_BITS=64 -DVAR_MPI -DGFORTRAN=445 -DVAR_INT64 -DIMPLICIT_NONE
F90          = mpif90
CC          = mpicc
LOADER       = mpif90
RM          = rm -f
FFLAGS       = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -fbacktrace -fdefault-integer-8
SAFEFFLAGS = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -fbacktrace -fdefault-integer-8
CFLAGS       = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -std=c99 -DRESTRICT=restrict -DFUNDERSCORE=1
INCLUDES    = -I../include
MODULES    = -J../modules
LIBS       = -L/home/wuy/atlas/lib -llapack -lcblas -lf77blas -latlas
INSTALLDIR = /home/wuy/chemsoft/Dalton2011_release/bin
PDPACK_EXTRAS = linpack.o eispack.o gp_zlapack.o gp_dlapack.o
GP_EXTRAS    =
AR          = ar
ARFLAGS    = rvs
# flags for ftnchek on Dalton /hjaaj
CHEKFLAGS  = -nopure -nopretty -nocommon -nousage -noarray -notruncation -quiet  -noargumants -arguments=number  -usage=var-unitialized
# -usage=var-unitialized:arg-const-modified:arg-alias
# -usage=var-unitialized:var-set-unused:arg-unused:arg-const-modified:arg-alias
#
default : dalton linuxparallel.x
SAFE_FFLAGS_for_ifort = $(FFLAGS)
#
# Parallel initialization
#
MPI_INCLUDE_DIR =
MPI_LIB_PATH =
MPI_LIB       =
#
#
# Suffix rules
# hjaaj Oct 04: .g is a "cheat" suffix, for debugging.
#             'make x.g' will create x.o from x.F or x.c with -g debug flag set.
#
.SUFFIXES : .F .F90 .c .o .i .g .s

.F.o:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -c $*.F

.F.i:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) -E $*.F > $*.i

.F.g:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(SAFEFFLAGS) -g -c $*.F

.F.s:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -S -g -c $*.F

.F90.o:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -c $*.F90

.F90.i:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) -E $*.F90 > $*.i

.F90.g:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(SAFEFFLAGS) -g -c $*.F90

.F90.s:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -S -g -c $*.F90

.c.o:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -c $*.c

.c.i:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -E $*.c > $*.i

.c.g:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -g -c $*.c

.c.s:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -S -g -c $*.c

从这Makefile.config中就可看出是用64位整数mpi编译，在CPPFLAGS中的-DVR_INT64，以及FFLAGS和SAFEFFLAGS中的-fdefault-integer-8。如果是32位整数mpi编译，需要去掉这些。
还有一点也是需要特别注意的是，在CPPFLAGS中-D'INSTALL_MMWORK=1'的INSTALL_MMWORK一定要小于2G，因为这与一些编译器支持的内存模式有关，要不然最后一步生成可执行文件时链接库会发生问题。这个当时也困惑了我两天。
用gfortran/gcc编译，可以参考我的Makefile.config。
修改完Makefile.config,开始编译。
[wuy@pc2 DALTON]$ make &> make.log &
有什么错误或其他的，可以看make.log中相应部分，也会有提示。
如果编译成功，会在../bin文件夹中生成dalton_mpi.x  dalton.x。
进入DALTON/test中进行测试
[wuy@pc2 test]$ ./TEST parallel
测试所有并行的例子，完成后会产生一个以时间为名的文件夹，里面有个TESTLOG，查看其最后几行，如果出现ALL TESTS ENDED PROPERLY! 恭喜你，编译的并行例子成功。
[wuy@pc2 test]$ ./TEST all
测试所有非并行的例子。同样，如果出现ALL TESTS ENDED PROPERLY!  为正确。
两个都出现ALL TESTS ENDED PROPERLY! 说明编译的非常成功。

5）编译LSDALTON
下面是我的Makefile.config
[wuy@pc2 LSDALTON]$ cat Makefile.config
ARCH       = linux
FMMDIR    = mm
#
#
CPPFLAGS    = -DSYS_LINUX -D_FILE_OFFSET_BITS=64 -D'INSTALL_BASDIR="/home/wuy/chemsoft/Dalton2011_release/basis"' -DGFORTRAN=445 -DVAR_LINSCA -DIMPLICIT_NONE
F77          = gfortran
F90          = gfortran
FLNK          = gfortran
CC          = gcc
RM          = rm -f
FFLAGS       = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -ffloat-store
F90OPTFLAGS = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -ffloat-store -I. -x f95-cpp-input -ffloat-store -fopenmp
SAFEFFLAGS    = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -ffloat-store
CFLAGS       = -march=x86-64 -O3 -ffast-math -funroll-loops -ftree-vectorize -std=c99 -DRESTRICT=restrict -DFUNDERSCORE=1 -ffloat-store -DUSE_UNDERSCORES
INCLUDES    =
LIBS          = -L/home/wuy/atlas/lib -lf77blas -latlas -L/usr/lib/gcc/x86_64-redhat-linux/4.4.4 -lgomp
INSTALLDIR    = /home/wuy/chemsoft/Dalton2011_release/bin
PDPACK_EXTRAS  = linpack.o eispack.o gp_zlapack.o gp_dlapack.o gp_zlapack.o
AR          = ar
ARFLAGS       =  rvs
#
default : linux.x
#
# Suffix rules C
#
.SUFFIXES : .F90 .f90 .F .o .c

.F90.o:
      $(F90) $(INCLUDES) $(CPPFLAGS) $(F90OPTFLAGS) -c $*.F90

.f90.o:
      $(F90) $(INCLUDES) $(CPPFLAGS) $(F90OPTFLAGS) -c $*.f90

.F.o:
      $(F77) $(INCLUDES) $(CPPFLAGS) $(FFLAGS) -c $*.F

.c.o:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -c $*.c
[wuy@pc2 LSDALTON]$
修改完Makefile.config,开始编译。
[wuy@pc2 LSDALTON]$ make &> make.log &
编译成功后，会在../bin中生成lsdalton.x。
同样需要对其进行测试。

2.使用ifort/icc, mkl, openmpi编译并行Dalton2011
1）现在icc也免费了，用intel这套编译器以及数学库编译是大盛其行。去http://software.intel.com/en-us/ ... ftware-development/ 注册获取license和相应的编译器和数学库。如果你是下载的最新ifort12编译器l_fcompxe_intel64_2011.7.256.tgz，就不需用下载mkl了，因为里面已包含最新的mkl数学库了。
   我使用的ifort/icc 11.1, mkl 10.2.5.035；刷新其相应环境变量，在自己用户的根目录下.bashrc中添加（当然也可以直接用命令刷新，使其没有离开登录界面生效），
source /opt/intel/Compiler/11.1/072/bin/ifortvars.sh intel64
source /opt/intel/Compiler/11.1/072/bin/iccvars.sh intel64
source /opt/intel/mkl/10.2.5.035/tools/environment/mklvarsem64t.sh
保存后退出（:wq），刷新环境变量；
[wuy@cluster ~]$ source .bashrc

2）使用ifort/icc编译64位整数的openmpi
[wuy@cluster tmp]$ ls
openmpi-1.4.3.tar.gz
[wuy@cluster tmp]$ tar -zxvf openmpi-1.4.3.tar.gz
[wuy@ cluster tmp]$ cd openmpi-1.4.3
[wuy@ cluster tmp]$ ./configure --prefix=/home/wuy/mpi/intel/openmpi-1.4.3 CXX=icpc CC=icc F77=ifort FC=ifort FFLAGS=-i8 FCFLAGS=-i8
[wuy@pc2 tmp]$ make all install &> make.log &
用ifort/icc编译64位整数的openmpi，需要在FFLAGS和FCFLAGS选项中添加-i8。
在自己用户的根目录下.bashrc中添加openmpi的环境变量
[wuy@ cluster tmp]$ cd $HOME
[wuy@ cluster ~]$ vi .bashrc
在此文件中添加：
#set for openmpi-1.4.3
export PATH=/home/wuy/mpi/intel/openmpi-1.4.3/bin:$PATH
export LD_LIBRARY_PATH=/home/wuy/mpi/intel/openmpi-1.4.3:$LD_LIBRARY_PATH
export LD_LIBRARY_PATH=/home/wuy/mpi/intel/openmpi-1.4.3/lib:$LD_LIBRARY_PATH
export OMPI_MPIF77="ifort"
export OMPI_MPIFC="ifort"
export OMPI_MPICC="icc"
export OMPI_MPICXX="icc"
#end
保存后退出（:wq），刷新环境变量；
[wuy@ cluster ~]$ source .bashrc
[wuy@ cluster ~]$ which mpif90
~/mpi/intel/openmpi-1.4.3/bin/mpif90
这时说明就可以使用openmpi了。那如何知道我们编译的是64位整数的openmpi呢？
[wuy@ cluster ~]$ ompi_info -a | grep 'Fort integer size'
   Fort integer size: 8
得到是Fort integer size: 8，说明是64位整数的openmpi；

注意：使用impi (intel mpi)时，用ompi_info -a | grep 'Fort integer size'得到的是Fort integer size: 4；并且在impi手册中有这两句话：“Do not use the –i8 option to compile MPI callback functions,” ; “The Fortran module supports 32-bit INTEGER size only.” 因而使用impi编译时，用32位整数编译，即去掉我下面说的CPPFLAGS中的-DVR_INT64，以及FFLAGS和SAFEFFLAGS中的-i8；使用MKL是用LIBS = -L$your_path_to_MKL -lmkl_intel_lp64 -lmkl_sequential -lmkl_core

3）编译DALTON
由于前面比较详细的介绍了gfortran/gcc编译，相应步骤可以参见；
在这里我仅列出我的Makefile.config,以及一些解释；
[wuy@cluster DALTON]$ cat Makefile.config
ARCH       = linux
#
#
CPPFLAGS    = -DVAR_IFORT -DSYS_LINUX -DVAR_MFDS -D'INSTALL_WRKMEM=1310000000' -D'INSTALL_MMWORK=1' -D_FILE_OFFSET_BITS=64 -DVAR_MPI -DVAR_INT64 -DIMPLICIT_NONE
F90          = mpif90
CC          = mpicc
LOADER       = mpif90
RM          = rm -f
FFLAGS       = -g -O3 -xSSE4.2 -ip -w -fpp -assume byterecl -i8
SAFEFFLAGS = -g -O1 -w -fpp -assume byterecl -i8
CFLAGS       = -g -O3 -xSSE4.2 -ip -restrict -DRESTRICT=restrict
INCLUDES    = -I../include
MODULES    = -module ../modules
LIBS = -L/opt/intel/mkl/10.2.5.035/lib/em64t -Wl,--start-group /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_intel_ilp64.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_sequential.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_core.a -Wl,--end-group -lpthread
INSTALLDIR = /home/wuy/chemsoft/Dalton2011_release/bin
PDPACK_EXTRAS = linpack.o eispack.o gp_dlapack.o gp_zlapack.o
GP_EXTRAS    =
AR          = ar
ARFLAGS    = rvs
# flags for ftnchek on Dalton /hjaaj
CHEKFLAGS  = -nopure -nopretty -nocommon -nousage -noarray -notruncation -quiet  -noargumants -arguments=number  -usage=var-unitialized
# -usage=var-unitialized:arg-const-modified:arg-alias
# -usage=var-unitialized:var-set-unused:arg-unused:arg-const-modified:arg-alias
#
default : dalton linuxparallel.x
SAFE_FFLAGS_for_ifort = $(SAFEFFLAGS)
#
# Parallel initialization
#
MPI_INCLUDE_DIR =
MPI_LIB_PATH =
MPI_LIB       =
#
#
# Suffix rules
# hjaaj Oct 04: .g is a "cheat" suffix, for debugging.
#             'make x.g' will create x.o from x.F or x.c with -g debug flag set.
#
.SUFFIXES : .F .F90 .c .o .i .g .s

.F.o:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -c $*.F

.F.i:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) -E $*.F > $*.i

.F.g:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(SAFEFFLAGS) -g -c $*.F

.F.s:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -S -g -c $*.F

.F90.o:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -c $*.F90

.F90.i:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) -E $*.F90 > $*.i

.F90.g:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(SAFEFFLAGS) -g -c $*.F90

.F90.s:
      $(F90) $(INCLUDES) $(MODULES) $(CPPFLAGS) $(FFLAGS) -S -g -c $*.F90

.c.o:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -c $*.c

.c.i:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -E $*.c > $*.i

.c.g:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -g -c $*.c

.c.s:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -S -g -c $*.c
这里我用的是至强CPU，因而FFLAGS和CFLAGS使用的是-xSSE4.2；可以根据自己的cpu调整选项。从这Makefile.config也可看出是用64位整数mpi编译，在CPPFLAGS中的-DVR_INT64，以及FFLAGS和SAFEFFLAGS中的-i8。如果是32位整数mpi编译，需要去掉这些。
还有一点也是需要特别注意的是，在CPPFLAGS中-D'INSTALL_MMWORK=1'的INSTALL_MMWORK一定要小于2G，因为这与一些编译器支持的内存模式有关，要不然最后一步生成可执行文件时链接库会发生问题。这个当时也困惑了我两天。

在此，说明下加载mkl库，
use this lib line for MKL (2010/2011 version; 32-bit integers == default; non-threaded MKL):
LIBS = -L$your_path_to_MKL -lmkl_intel_lp64 -lmkl_sequential -lmkl_core
MKL (2010/2011 version; 64-bit integers == non-default; non-threaded MKL)
LIBS = -L$your_path_to_MKL -lmkl_intel_ilp64 -lmkl_sequential -lmkl_core
MKL (2010/2011 version; 64-bit integers == non-default; threaded MKL with gfortran as f90 compiler)
LIBS = -Wl,--start-group -lmkl_gf_ilp64 -lmkl_intel_thread -lmkl_core -Wl,--end-group -liomp5 –lpthread

上面用的是动态链接库，并且动态链接库也有很多优点（编译的执行文件小；可实现进程之间的资源共享；将一些程序升级变得简单，等等）。尽管动态链接有这么多好处，但不知道是我系统问题还是怎么的，一些测试居然说找不到动态链接库（我用ldd明显看到是加载了的，并且刷新了相应变量）。因此，尽管动态链接好处多，最后我还是改为静态链接了。如：LIBS = -L/opt/intel/mkl/10.2.5.035/lib/em64t -Wl,--start-group /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_intel_ilp64.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_sequential.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_core.a -Wl,--end-group –lpthread

测试等参考gfortran编译。

4）编译LSDALTON
我的Makefile.config
ARCH       = linux
FMMDIR    = mm
#
#
CPPFLAGS    = -DSYS_LINUX -D_FILE_OFFSET_BITS=64 -D'INSTALL_BASDIR="/home/wuy/chemsoft/Dalton2011_release/basis"' -DVAR_LINSCA -DIMPLICIT_NONE
F77          = ifort
F90          = ifort
FLNK          = ifort
CC          = icc
RM          = rm -f
FFLAGS       = -O3 -xSSE4.2 -ip -w
F90OPTFLAGS = -O3 -xSSE4.2 -ip -w -fpp1 -openmp
SAFEFFLAGS    = -O2 -w
CFLAGS       = -O3 -xSSE4.2 -ip -restrict -DRESTRICT=restrict -DUSE_UNDERSCORES
INCLUDES    =
LIBS          =  -L/opt/intel/mkl/10.2.5.035/lib/em64t -Wl,--start-group /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_intel_ilp64.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_sequential.a /opt/intel/mkl/10.2.5.035/lib/em64t/libmkl_core.a -Wl,--end-group -lpthread -Vaxlib -Wl,-rpath=/opt/intel/Compiler/11.1/072/lib/intel64 -lguide -lpthread
INSTALLDIR    = /home/wuy/chemsoft/Dalton2011_release/bin
PDPACK_EXTRAS  = linpack.o eispack.o gp_dlapack.o gp_zlapack.o
AR          = ar
ARFLAGS       =  rvs
#
default : linux.x
#
# Suffix rules C
#
.SUFFIXES : .F90 .f90 .F .o .c

.F90.o:
      $(F90) $(INCLUDES) $(CPPFLAGS) $(F90OPTFLAGS) -c $*.F90

.f90.o:
      $(F90) $(INCLUDES) $(CPPFLAGS) $(F90OPTFLAGS) -c $*.f90

.F.o:
      $(F77) $(INCLUDES) $(CPPFLAGS) $(FFLAGS) -c $*.F

.c.o:
      $(CC) $(INCLUDES) $(CPPFLAGS) $(CFLAGS) -c $*.c

致谢：
首先感谢吴水星师兄在linux服务器以及计算机知识方面的启蒙及教导，感谢温世正师兄在编译器等方面的使用的启蒙以及编译过程中的帮助，也感谢宝德陈齐旺工程师在编译过程中的帮助！


                                                                                                                              吴勇
                                                                                                                  于2011/10/30 19:18 pm

回复此楼

1楼 2011-11-10 19:11:00

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

lihb734

铁杆木虫 (职业作家)

QC强帖: 2
应助: 132 (高中生)
金币: 7495.4
帖子: 3107
在线: 1177.3小时
虫号: 448403

★★★★★ 五星级,优秀推荐

感谢楼主分享如此详细的编译过程。

赞一下

回复此楼

2楼2011-11-10 21:53:22

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

gmy1990

荣誉版主 (著名写手)

★★★★★ 五星级,优秀推荐

好东西呀，向楼主学习啦

赞一下

回复此楼

3楼2011-11-10 22:33:43

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

xuhu_11

金虫 (职业作家)

应助: 14 (小学生)
金币: 1570
帖子: 4411
在线: 477.6小时
虫号: 653595

★★★★★ 五星级,优秀推荐

好东西--领教了

回复此楼

5楼2011-11-11 08:40:37

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

liuy062

金虫 (小有名气)

应助: 0 (幼儿园)
金币: 2492.7
帖子: 188
在线: 342.2小时
虫号: 1106877

★★★★★ 五星级,优秀推荐

太强大了，就是看不懂，哈哈

赞一下

回复此楼

7楼2011-11-11 08:53:24

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

carlwang8866

新虫 (初入文坛)

应助: 0 (幼儿园)
金币: 2
帖子: 30
在线: 22.6小时
虫号: 580590

★★★★★ 五星级,优秀推荐

我用自已电脑，ubuntu系统，cpu是６４位的，但系统用32 位的，需要注意什么吗，照做可以吗？

赞一下

回复此楼

8楼2011-11-11 21:32:33

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

wuy069

铁杆木虫 (正式写手)

应助: 20 (小学生)
金币: 7921.9
帖子: 506
在线: 549.1小时
虫号: 760723

引用回帖:

8楼: Originally posted by carlwang8866 at 2011-11-11 21:32:33:
我用自已电脑，ubuntu系统，cpu是６４位的，但系统用32 位的，需要注意什么吗，照做可以吗？

建议用64位系统；可以用ubuntu自带的gfortran/gcc；如果是用intel编译器编译，用32位就行，我pdf中带颜色的字体多注意下就行。

赞一下

回复此楼

9楼2011-11-12 07:53:56

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

honeyman

铁杆木虫 (正式写手)

应助: 2 (幼儿园)
金币: 6972.3
帖子: 917
在线: 148.7小时
虫号: 402810

★★★★★ 五星级,优秀推荐

楼主的帖子真是经典！要是不顶都对不起自己的良心！

赞一下

回复此楼

12楼2011-12-07 19:24:59

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

wangxn06

金虫 (正式写手)

应助: 2 (幼儿园)
金币: 576.7
帖子: 509
在线: 250.5小时
虫号: 1156835

★★★ 三星级,支持鼓励

这些东西哪里能学到，现在是什么不知道就google什么？大家介绍一下经验吧

赞一下

回复此楼

13楼2011-12-08 22:04:17

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

quantum999

金虫 (著名写手)

应助: 15 (小学生)
金币: 2146.3
帖子: 1426
在线: 198.2小时
虫号: 41283

★★★★★ 五星级,优秀推荐

狂顶！

老为编译发愁！

赞一下

回复此楼

14楼2011-12-14 11:49:41

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

迷茫的小飞侠

金虫 (正式写手)

应助: 5 (幼儿园)
金币: 757.4
帖子: 359
在线: 157.9小时
虫号: 1375147

★★★★★ 五星级,优秀推荐

太强了

回复此楼

16楼2012-03-06 16:46:45

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

席月调琴

新虫 (初入文坛)

应助: 0 (幼儿园)
金币: 110.5
帖子: 12
在线: 11.6小时
虫号: 415029

★★★★★ 五星级,优秀推荐

嫩是救世主

回复此楼

18楼2012-03-06 17:00:50

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

一声叹息010

木虫 (小有名气)

应助: 0 (幼儿园)
金币: 1552.1
帖子: 91
在线: 110.8小时
虫号: 1502781

★★★★★ 五星级,优秀推荐

顶一下，感谢分享！楼主是真正的科研人,实干者,致敬

赞一下

回复此楼

21楼2012-11-07 10:14:21

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

liuyuan11

禁虫 (初入文坛)

本帖内容被屏蔽

22楼2013-07-11 00:06:35

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

nwnustu

木虫 (著名写手)

应助: 5 (幼儿园)
金币: 1717.5
帖子: 1172
在线: 423.5小时
虫号: 27188

★★★★★ 五星级,优秀推荐

受益匪浅，感谢，感谢！！！！！！！！

赞一下

回复此楼

34楼2019-01-01 01:43:11

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

简单回复

abdoman4楼

2011-11-11 08:26 回复

三星好评感谢分享！

xuhu_116楼

2011-11-11 08:45 回复

顶一下，感谢分享！

yunnanyan10楼

2011-11-29 20:34 回复

五星好评顶一下，感谢分享！

lyjnliuxia11楼

2011-12-07 19:05 回复

五星好评

tephoon7815楼

2011-12-30 10:32 回复

五星好评顶一下，感谢分享！

迷茫的小飞侠17楼

2012-03-06 16:57 回复

顶一下，感谢分享！

liuzhengjun042719楼

2012-03-07 11:03 回复

五星好评顶一下，感谢分享！

wozecheng20楼

2012-09-12 16:28 回复

五星好评顶一下，感谢分享！

physics777823楼

2013-12-26 12:12 回复

五星好评顶一下，感谢分享！

xpyq4gjyyq624楼

2014-04-27 13:40 回复

五星好评顶一下，感谢分享！

quantum99925楼

2014-04-27 15:20 回复

顶一下，感谢分享！

wangocean126楼

2014-08-12 08:08 回复

五星好评顶一下，感谢分享！

quantum99927楼

2014-08-19 21:46 回复

顶一下，感谢分享！

yhy911028楼

2014-09-24 17:08 回复

五星好评顶一下~

小范范198929楼

2014-12-18 21:03 回复

五星好评顶一下，感谢分享！

dapashi30楼

2015-10-13 14:41 回复

五星好评顶一下，感谢分享！

furyrock31楼

2016-01-21 22:05 回复

五星好评顶一下，感谢分享！

wangyan693032楼

2016-02-21 12:39 回复

五星好评顶一下，感谢分享！

pompy_yang33楼

2018-03-29 18:11 回复

五星好评顶一下，感谢分享！

相关版块跳转我要订阅楼主 wuy069 的主题更新

返回列表

☆ 无星级 ★ 一星级 ★★★ 三星级 ★★★★★ 五星级

普通表情龙兔虎猫高级回复 (可上传附件)

最具人气热帖推荐 [查看全部]		作者	回/看	最后发表

[找工作] 售SCI一区T0P文章，我:8.O.55.1.O54,科目全,可伽急 +3	cqwQDCxMcL3I 2026-09-29	4/200	2026-09-30 16:33 by Z9YWQ5EAO3qp
[考研] 售SCI一区文章，我:8O5.5.1.O5.4,科目全,可伽急 +3	cqwQDCxMcL3I 2026-09-29	6/300	2026-09-30 16:14 by Z9YWQ5EAO3qp
[找工作] 售SCI一区T0P文章，我:8.O.55.1.O54,科目全,可伽急 +4	ZYXdhzDAy9ZX 2026-09-28	4/200	2026-09-29 16:54 by yCO1Ll7aHtsw
[考博] 售SCI一区文章，我:8.O.55.1.O.54,科目齐全,可伽急 +4	ZYXdhzDAy9ZX 2026-09-28	4/200	2026-09-29 16:47 by yCO1Ll7aHtsw
[考研] 售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急 +3	ZYXdhzDAy9ZX 2026-09-28	4/200	2026-09-29 16:37 by etmYJ6d2rquH
[博后之家] 售SCI-T0P文章，我:8O.5.5.1.O.54,科目齐全,可+急 +3	ZYXdhzDAy9ZX 2026-09-28	3/150	2026-09-29 16:30 by etmYJ6d2rquH
[硕博家园] 售SCI文章，我:8O.5.5.1O.54,科目全,可十急 +3	ZYXdhzDAy9ZX 2026-09-28	3/150	2026-09-29 16:03 by etmYJ6d2rquH
[考博] 售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急 +6	GDBe8tDZqE8z 2026-09-28	6/300	2026-09-29 14:41 by etmYJ6d2rquH
[硕博家园] 售SCI一区T0P文章，我:8O.55.1.O.5.4,科目齐全,可+急 +3	GDBe8tDZqE8z 2026-09-28	3/150	2026-09-29 14:30 by etmYJ6d2rquH
[考研] 售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急 +3	CfXuS1rDhLYN 2026-09-28	3/150	2026-09-29 14:24 by etmYJ6d2rquH
[博后之家] 售SCI一区T0P文章，我:8.O.55.1.O54,科目全,可伽急 +6	IDs3scOF0tjC 2026-09-28	7/350	2026-09-29 14:07 by etmYJ6d2rquH
[博后之家] 售SCI一区文章，我:8.O.551.O.5.4,科目全,可伽急 +3	IDs3scOF0tjC 2026-09-28	3/150	2026-09-29 13:56 by etmYJ6d2rquH
[公派出国] 售一区SCI文章T0P，我:8O.551.O54,科目全,可十急 +4	IDs3scOF0tjC 2026-09-28	5/250	2026-09-29 13:50 by etmYJ6d2rquH
[考研] 售一区SCI文章T0P，我:8O.551.O54,科目全,可十急 +3	tqUTOxClQUMF 2026-09-28	3/150	2026-09-29 09:59 by JzYBbHIXWSrW
[教师之家] 售一区SCI文章T0P，我:8O.551.O54,科目全,可十急 +4	GDBe8tDZqE8z 2026-09-28	4/200	2026-09-29 09:49 by JzYBbHIXWSrW
[找工作] 售SCI一区文章，我:8.O.551.O.5.4,科目全,可伽急 +3	ZYXdhzDAy9ZX 2026-09-28	3/150	2026-09-29 06:28 by ZvyPK8n6Nfki
[硕博家园] 售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急 +3	CfXuS1rDhLYN 2026-09-28	4/200	2026-09-28 22:55 by ez6fGg9abYaj
[公派出国] 售SCI一区文章，我:8O5.5.1.O5.4,科目全,可伽急 +4	IDs3scOF0tjC 2026-09-28	4/200	2026-09-28 22:55 by ez6fGg9abYaj
[找工作] 售SCI文章，我:8O.5.5.1O.54,科目全,可十急 +3	IDs3scOF0tjC 2026-09-28	5/250	2026-09-28 22:32 by ez6fGg9abYaj
[考研] 售一区SCI文章T0P，我:8O.551.O54,科目全,可十急 +3	IDs3scOF0tjC 2026-09-28	4/200	2026-09-28 18:51 by 9lS3ad5oOymn

24小时热门版块排行榜

[资源] Dalton2011并行编译详记

» 收录本帖的淘帖专辑推荐

» 猜你喜欢

» 本主题相关价值贴推荐，对您同样有帮助:

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★ 三星级,支持鼓励

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐

★★★★★ 五星级,优秀推荐