#!/bin/bash
########################################################################
# SUN Grid Engine job wrapper
# parallel job on opteron queue
########################################################################
#$ -N urs
#$ -pe mpich2 10-100
#$ -q wp4
#$ -j y
#$ -M haule@physics.rutgers.edu
#$ -m e
#$ -v WIEN_DMFT_ROOT,LD_LIBRARY_PATH
########################################################################
# DON'T remove the following line!
source $TMPDIR/sge_init.sh
########################################################################
export WIEN_DMFT_ROOT=/home/haule/dmft_w2k/bin
export PYTHONPATH=/home/haule/dmft_w2k/bin
export SCRATCH="."
export WIENROOT=/home/haule/wien
export SMPD_OPTION_NO_DYNAMIC_HOSTS=1

source /etc/profile.d/ifortvars.sh
source /opt/intel/mkl/9.0/tools/environment/mklvarsem64t.sh

echo "/opt/mpich2/intel/10.1/bin/mpiexec -env LD_LIBRARY_PATH /opt/intel/mkl/9.0/lib/em64t -port $port  -np $NSLOTS -machinefile $TMPDIR/machines" > mpi_prefix.dat

echo "$SGE_O_WORKDIR" > workdir.dat
echo "$jobdir" > jobdir.dat

#rcp -r rupc06:$SGE_O_WORKDIR/ksum $HOME/$jobdir/
#rcp -r rupc04:$SGE_O_WORKDIR/ksum /parallel/$jobdir/

#rcp -r rupc06:$SGE_O_WORKDIR/imp.? $WORK/$jobdir/

#python ./run_dmft.py > wnohup.dat 2>&1
/opt/mpich2/intel/10.1/bin/mpiexec -env LD_LIBRARY_PATH /opt/intel/mkl/9.0/lib/em64t -port $port  -np $NSLOTS -machinefile $TMPDIR/machines ./dmftopt > wnohup.dat 2>&1