Cómo interpretar "pérdida" y "precisión" para un modelo de aprendizaje automático

Cuando entrené mi red neuronal con Theano o Tensorflow, informarán una variable llamada "pérdida" por época. ¿Cómo debo interpretar esta variable? Una pérdida mayor es mejor o peor, o ¿qué significa para el rendimiento final (precisión) de mi red