Siri Kit (речь в текст) отключение моего TTS (текст в речь) iOS

Я пытаюсь запустить Text To Speech (AVSpeechSynthesizer) вместе с Speech To Text из Siri Kit, но я застрял с этим.

Мой TTS работает отлично, пока я не запустил код для выполнения STT, после этого мой TTS больше не работает. Я отлаживал код и во время выполнения кода ошибок не возникало, но мой текст не преобразуется в речь. Я думаю, что каким-то образом мой STT отключает выходной микрофон, и поэтому TTS больше не преобразует текст в речь, ну, это всего лишь теория. Опс: мой TTS перестает работать, но мой STT работает отлично

Какие-нибудь советы?

Вот мой код viewController:

@IBOutlet weak var microphoneButton: UIButton!

//text to speech
let speechSynthesizer = AVSpeechSynthesizer()

//speech to text
private var speechRecognizer: SFSpeechRecognizer!

private var recognitionRequest: SFSpeechAudioBufferRecognitionRequest?
private var recognitionTask: SFSpeechRecognitionTask?
private var audioEngine = AVAudioEngine()

@IBAction func textToSpeech(_ sender: Any) {

    if let word = wordTextField.text{

        if !speechSynthesizer.isSpeaking {


            //get current dictionary
            let dictionary = fetchSelectedDictionary()

            //get current language
            let language = languagesWithCodes[(dictionary?.language)!]

            let speechUtterance = AVSpeechUtterance(string: word)
                speechUtterance.voice = AVSpeechSynthesisVoice(language: language)
                speechUtterance.rate = 0.4
             //speechUtterance.pitchMultiplier = pitch
             //speechUtterance.volume = volume
                speechSynthesizer.speak(speechUtterance)

        }
        else{
            speechSynthesizer.continueSpeaking()
        }

    }
}

@IBAction func speechToText(_ sender: Any) {

    if audioEngine.isRunning {
        audioEngine.stop()
        recognitionRequest?.endAudio()
        microphoneButton.isEnabled = false
        microphoneButton.setTitle("Start Recording", for: .normal)
    } else {
        startRecording()
        microphoneButton.setTitle("Stop Recording", for: .normal)
    }

}

func startRecording() {

    if recognitionTask != nil {
        recognitionTask?.cancel()
        recognitionTask = nil
    }

    let audioSession = AVAudioSession.sharedInstance()
    do {
        try audioSession.setCategory(AVAudioSessionCategoryRecord)
        try audioSession.setMode(AVAudioSessionModeMeasurement)
        try audioSession.setActive(true, with: .notifyOthersOnDeactivation)
    } catch {
        print("audioSession properties weren't set because of an error.")
    }

    recognitionRequest = SFSpeechAudioBufferRecognitionRequest()

    guard let inputNode = audioEngine.inputNode else {
        fatalError("Audio engine has no input node")
    }

    guard let recognitionRequest = recognitionRequest else {
        fatalError("Unable to create an SFSpeechAudioBufferRecognitionRequest object")
    }

    recognitionRequest.shouldReportPartialResults = true

    recognitionTask = speechRecognizer?.recognitionTask(with: recognitionRequest, resultHandler: { (result, error) in

        var isFinal = false

        if result != nil {

            self.wordTextField.text = result?.bestTranscription.formattedString
            isFinal = (result?.isFinal)!
        }

        if error != nil || isFinal {
            self.audioEngine.stop()
            inputNode.removeTap(onBus: 0)

            self.recognitionRequest = nil
            self.recognitionTask = nil

            self.microphoneButton.isEnabled = true
        }
    })

    let recordingFormat = inputNode.outputFormat(forBus: 0)
    inputNode.installTap(onBus: 0, bufferSize: 1024, format: recordingFormat) { (buffer, when) in
        self.recognitionRequest?.append(buffer)
    }

    audioEngine.prepare()

    do {
        try audioEngine.start()
    } catch {
        print("audioEngine couldn't start because of an error.")
    }

    wordTextField.text = "Say something, I'm listening!"
}

}

Источник

2 ответа

Решение

Эта строка:

try audioSession.setMode(AVAudioSessionModeMeasurement)

это, вероятно, причина. Это может привести к тому, что громкость будет уменьшена настолько, что звучит так, будто она выключена. Пытаться:

try audioSession.setMode(AVAudioSessionModeDefault)

и посмотреть, если это работает.

Источник

Возможно, поскольку ваша аудиосессия находится в режиме записи, у вас есть 2 решения, во-первых, вам нужно установить для try audioSession.setCategory(AVAudioSessionCategoryRecord) значение AVAudioSessionCategoryPlayAndRecord (это будет работать), но более понятным способом было бы получить отдельную функцию для произнесения чего-либо, а затем установите для вашей AVAudioSessionCategory значение AVAudioSessionCategoryPlayback

Надеюсь, это помогло.

Источник
Другие вопросы по тегам