SFTP Unix Script con claves pub / priv

He escrito un script que usa sftp para obtener archivos. El problema que tengo es que todavía me está pidiendo una contraseña. Antes de decir que mi clave ssh pub / priv está mal configurada, cuando hago un sftp desde la consola no tengo que ingresar mi contraseña. Creo que puedo tener el guión equivocado. Por favor aconsejame.

Problema: SFTP sin contraseña funciona en la consola pero no en el script

(SFTP uName @ host) en la línea de comando conecta y carga sftp

Script pide contraseña

FTPSERVER='server'
USER='uName'
FILEPATH='Path'
FILE1='File.txt'

#SFTP pull to local directory, uses ssh with public key placed on username's .ssh folder
sftp $USER@$FTPSERVER <<EOF
cd $FILEPATH
get $FILE1
bye
EOF