Certificado SSL autofirmado no válido: "Falta el nombre alternativo del sujeto"

Recientemente, Chrome dejó de funcionar con mis certificados SSL autofirmados y cree que no son seguros. Cuando miro el certificado en la DevTools | Securitypestaña, puedo ver que dice Falta el nombre alternativo del sujeto El certificado de este sitio no contiene una extensión de nombre...