Ejemplo

public class ClassA {
public void methodA {

//...
System.exit(0);
}

Solución
Lance una RuntimeException en su lugar.

public class ClassA {
public void methodA throws RuntimeException {

//...
throw new RuntimeException();
}