扁案換法官“違憲”?台司法部門:純屬臆測