有可能让语音识别器更快吗?

5
我正在开发一个使用Android SpeechRecognizer的应用程序。我只是用它来做一些简单的事情。我点击一个按钮,SpeechRecognizer开始监听,然后我从所说的话中得到了一些结果。
很容易吧?问题是我需要让SpeechRecognizer更快。我的意思是,我点击我的按钮,我说“你好”,SpeechRecognizer需要3-4秒才能返回可能的结果数组。我的问题是:
有没有可能让SpeechRecognizer更快地返回结果? 或者减少关闭监听意图并开始处理所听内容的时间? 还有其他方法可以比这个更好地完成任务吗?
我查看了库并找到了以下三个参数:
EXTRA_SPEECH_INPUT_MINIMUM_LENGTH_MILLIS: 我们停止听到语音后,认为输入完成所需的时间。
EXTRA_SPEECH_INPUT_COMPLETE_SILENCE_LENGTH_MILLIS 语音的最小长度。
EXTRA_SPEECH_INPUT_POSSIBLY_COMPLETE_SILENCE_LENGTH_MILLIS 我们停止听到语音后,认为输入可能完成所需的时间。
我已经尝试了所有这些参数,但它们似乎都不起作用,或者我没有正确使用它们。这是我的代码:
public class MainActivity extends Activity {
private static final String TIME_FORMAT = "%02d:%02d:%02d";
private final String TAG = "MainActivity";

private StartTimerButton mSpeakButton;
private CircleProgressBar mCountdownProgressBar;
private CountDownTimer mCountDownTimer;
private TextView mTimer;
private int mRunSeconds = 0;
private SpeechRecognizer mSpeechRecognizer;
private Intent mSpeechRecognizerIntent;
private boolean mIsListening = false;

@Override
protected void onCreate(Bundle savedInstanceState) {
    super.onCreate(savedInstanceState);
    setContentView(R.layout.activity_main);
    mRunSeconds = 0;
    mTimer = (TextView) findViewById(R.id.timerText);
    mCountdownProgressBar = (CircleProgressBar) findViewById(R.id.progressBar);
    mSpeechRecognizer = SpeechRecognizer.createSpeechRecognizer(this);
    mSpeechRecognizerIntent = new Intent(RecognizerIntent.ACTION_RECOGNIZE_SPEECH);
    mSpeechRecognizerIntent.putExtra(RecognizerIntent.EXTRA_LANGUAGE_MODEL,
            RecognizerIntent.LANGUAGE_MODEL_FREE_FORM);
    mSpeechRecognizerIntent.putExtra(RecognizerIntent.EXTRA_CALLING_PACKAGE,
            this.getPackageName());

//          mSpeechRecognizerIntent.putExtra(RecognizerIntent.EXTRA_SPEECH_INPUT_MINIMUM_LENGTH_MILLIS,
//                1000);
//        mSpeechRecognizerIntent.putExtra(RecognizerIntent.EXTRA_SPEECH_INPUT_COMPLETE_SILENCE_LENGTH_MILLIS,
//                1000);
//        mSpeechRecognizerIntent.putExtra(RecognizerIntent.EXTRA_SPEECH_INPUT_POSSIBLY_COMPLETE_SILENCE_LENGTH_MILLIS,
//                1000);

    SpeechRecognitionListener listener = new SpeechRecognitionListener();
    mSpeechRecognizer.setRecognitionListener(listener);
    mSpeakButton = (StartTimerButton) findViewById(R.id.btnSpeak);
    mSpeakButton.setReadyState(false);
    mSpeakButton.setOnClickListener(new View.OnClickListener() {

        @Override
        public void onClick(View v) {
            if (mSpeakButton.isReady()) {
                if (!mIsListening)
                    mSpeechRecognizer.startListening(mSpeechRecognizerIntent);
            } else
                mSpeakButton.setReadyState(true);
        }
    });

}     

@Override
public boolean onCreateOptionsMenu(Menu menu) {
    // Inflate the menu; this adds items to the action bar if it is present.
    return true;
}

public void onSpeechResults(ArrayList<String> matches) {
    for (String match : matches) {

        match = match.toLowerCase();
        Log.d(TAG, "Got speech: " + match);

        if (match.contains("go")) {
            //Do Something
            mSpeechRecognizer.stopListening();
        }
        if (match.contains("stop")) {
            //Do Something
            mSpeechRecognizer.stopListening();
        }
    }
}

protected class SpeechRecognitionListener implements RecognitionListener
{

    @Override
    public void onBeginningOfSpeech()
    {
        //Log.d(TAG, "onBeginingOfSpeech");
    }

    @Override
    public void onBufferReceived(byte[] buffer)
    {

    }

    @Override
    public void onEndOfSpeech()
    {
        //Log.d(TAG, "onEndOfSpeech");
    }

    @Override
    public void onError(int error)
    {
        mSpeechRecognizer.startListening(mSpeechRecognizerIntent);

        //Log.d(TAG, "error = " + error);
    }

    @Override
    public void onEvent(int eventType, Bundle params)
    {

    }

    @Override
    public void onPartialResults(Bundle partialResults)
    {
        ArrayList<String> matches = partialResults.getStringArrayList(SpeechRecognizer.RESULTS_RECOGNITION);
        for (String match : matches) {
            match = match.toLowerCase();
            Log.d(TAG, "onPartialResults : " + match);
        }
    }

    @Override
    public void onReadyForSpeech(Bundle params)
    {
        Log.d(TAG, "onReadyForSpeech"); //$NON-NLS-1$
    }

    @Override
    public void onResults(Bundle results)
    {
        //Log.d(TAG, "onResults"); //$NON-NLS-1$
        ArrayList<String> matches = results.getStringArrayList(SpeechRecognizer.RESULTS_RECOGNITION);
        onSpeechResults(matches);
        // matches are the return values of speech recognition engine
        // Use these values for whatever you wish to do
    }

    @Override
    public void onRmsChanged(float rmsdB)
    {
    }
}}

不行,考虑使用更灵活的识别器。 - Nikolay Shmyrev
你能给我一些关于其他可用的识别器的建议吗? - Francisco Durdin Garcia
1个回答

2

是的,可以缩短关机前的延迟时间。

您无法更改Google认为用户发言结束时的静默时间。之前使用的EXTRA_SPEECH_*参数似乎最多只能偶尔工作,或者根本不起作用。

您可以使用部分结果来检测所需的单词或短语,然后手动关闭识别服务。

以下是如何执行此操作的示例:

public boolean isHelloDetected(@NonNull final Context ctx, @NonNull final Locale loc, @NonNull final Bundle results) {

        boolean helloDetected = false;

        if (!results.isEmpty()) {

            final String hello = ctx.getString(R.string.hello);

            final ArrayList<String> partialData = results.getStringArrayList(SpeechRecognizer.RESULTS_RECOGNITION);

                /* handles empty string bug */
            if (partialData != null && !partialData.isEmpty()) {
                partialData.removeAll(Collections.singleton(""));

                if (!partialData.isEmpty()) {
                    final ListIterator<String> itr = partialData.listIterator();

                    String vd;
                    while (itr.hasNext()) {
                        vd = itr.next().toLowerCase(loc).trim();

                        if (vd.startsWith(hello)) {
                            helloDetected = true;
                            break;
                        }
                    }
                }
            }

            if (!helloDetected) {
                final ArrayList<String> unstableData = results.getStringArrayList("android.speech.extra.UNSTABLE_TEXT");

                    /* handles empty string bug */
                if (unstableData != null && !unstableData.isEmpty()) {
                    unstableData.removeAll(Collections.singleton(""));

                    if (!unstableData.isEmpty()) {
                        final ListIterator<String> itr = unstableData.listIterator();

                        String vd;
                        while (itr.hasNext()) {
                            vd = itr.next().toLowerCase(loc).trim();

                            if (vd.startsWith(hello)) {
                                helloDetected = true;
                                break;
                            }
                        }
                    }
                }
            }
        }

        return helloDetected;
    }

每次从onPartialResults()接收到内容时都需要运行此方法。
如果返回true,则需要在主线程上调用stopListening()(可能通过new Handler(Looper.getMainLooper()).post(...)。
请注意,一旦关闭了识别器,您在onResults()中接收到的后续和最终结果可能不包含"hello"。因为该单词可能只被分类为不稳定的。
您需要编写其他逻辑来防止在检测到"hello"后再使用detectHello()(否则将重复调用stopListening())-一些简单的布尔标记可以解决这个问题。
最后,使用Collections.singleton("")删除空字符串是内部bug报告的一部分,在此处复制详细信息,使用ListIterator可能过于复杂,仅使用一个简单的for循环就足够了。
祝你好运。

嗨@brandall!我昨天已经将“EXTRA_PARTIAL_RESULTS”添加到我的Intent中了。我只想捕捉一个特定的单词,所以它运行得很好。不管怎样,“EXTRA_SPEECH_*”是什么意思?你能告诉我更多吗?只是为了尝试改进我的解决方案。我将您的答案标记为正确,因为您找到了与我相同的解决方案!谢谢。顺便问一下,您知道是否可以在不静音整个AudioStream的情况下消除可怕的哔哔声吗? - Francisco Durdin Garcia
1
很高兴你解决了这个问题 - 在上面的例子中,使用不稳定的部分结果也可以加快速度。 EXTRA_SPEECH_INPUT_POSSIBLY_COMPLETE_SILENCE_LENGTH_MILLIS 和其他一些东西不能正确地工作(并非所有时间都是如此),因此不能依赖它们。目前没有办法除了通过AudioStream来静音蜂鸣声 - Google极不可能更改这一点以防止“连续识别服务”的滥用。考虑使用PocketSphinx来代替。 - brandall
目前我将使用Google SpeechRecognizer服务。我没有学习过太多的PocketSphinx,但我读到它不是很精确,在这种情况下,我需要尽快获得一个单词的识别。 无论如何,当我的应用程序完成时,我会尝试一下。看看我能否提供更好的服务。非常感谢@brandall! - Francisco Durdin Garcia

网页内容由stack overflow 提供, 点击上面的
可以查看英文原文,
原文链接