¿Cómo dar de baja mi firma electrónica para que dejen de facturar mis socios?

Hola. Le presté mi nombre a mi hermano para una sociedad SA de CV.

Yo soy el representante legal desde hace 30 años y también facturo como persona física la verdad ya le pedí por las buenas que me saque de esa empresa pero son puras evasivas y no le importa el problema es que su contador se quedó con las claves del SAT y todo yo ingenuamente le ayudé.

Ahora él sigue renovando mi firma electrónica por Internet sin mi consentimiento ¿cómo puedo hacer para dar de baja la firma electrónica de esa empresa y que deje de facturar sin que esto se vaya a una auditoria o me afecte como persona física? ya que por las buenas no entiende tengo que hacerlo así.

Gracias