WP_Query - Ordenar resultados por metavalor

He revisado y no he visto una respuesta que funcione hasta el momento. Tengo un WP_Query con los siguientes argumentos:

$args = array(
    'post_status' => 'publish',
    'post_type' => 'listing',
    'meta_key' => 'client_feedback_score',
    'orderby' => 'client_feedback_score',
    'order' => 'DESC'
        );

$query = new WP_Query($args);

Quiero ordenar los resultados por el campo de publicación personalizado 'client_feedback_score', de menor a mayor. Pero esto no parece funcionar ... ¿Alguien puede señalarme en la dirección correcta?

EDITAR (RESUELTO):

Gracias a la respuesta de Milo, aquí está el código de trabajo para ordenar por un metavalor numérico:

$args = array(
            'post_status' => 'publish',
            'post_type' => 'listing',
            'meta_key' => 'client_feedback_score',
            'orderby' => 'meta_value_num',
            'order' => 'DESC'
        );

orderbydebe ser meta_value_num, o meta_valueno, el nombre de la clave. Ver los parámetros de orden WP_Query .