Создание AVAudioPCMBuffer с помощью AVAudioRecorder

Вместе с iOS 10 Apple выпустила новый фреймворк, который распознает речь. Данные могут быть переданы в эту структуру либо путем добавления AVAudioPCMBuffers, либо путем указания URL-адреса файла m4a. В настоящее время распознавание речи работает с использованием первого, но это возможно только после того, как кто-то закончит, а не в режиме реального времени. Вот код для этого:

let audioSession = AVAudioSession.sharedInstance()
var audioRecorder:AVAudioRecorder!;
var soundURLGlobal:URL!;

function setUp(){
    let recordSettings = [AVSampleRateKey : NSNumber(value: Float(44100.0)),
                          AVFormatIDKey : NSNumber(value: Int32(kAudioFormatMPEG4AAC)),
                          AVNumberOfChannelsKey : NSNumber(value: 1),
                          AVEncoderAudioQualityKey : NSNumber(value: Int32(AVAudioQuality.medium.rawValue))]

    let fileManager = FileManager.default()
    let urls = fileManager.urlsForDirectory(.documentDirectory, inDomains: .userDomainMask)
    let documentDirectory = urls[0] as NSURL
    let soundURL = documentDirectory.appendingPathComponent("sound.m4a")
    soundURLGlobal=soundURL;


    do {
        try audioSession.setCategory(AVAudioSessionCategoryPlayAndRecord)
        try audioRecorder = AVAudioRecorder(url: soundURL!, settings: recordSettings)
        audioRecorder.prepareToRecord()
    } catch {}
}

function start(){
    do {
        try audioSession.setActive(true)
        audioRecorder.record()
    } catch {}
}

function stop(){
    audioRecorder.stop()
    let request=SFSpeechURLRecognitionRequest(url: soundURLGlobal!)
    let recognizer=SFSpeechRecognizer();
    recognizer?.recognitionTask(with: request, resultHandler: { (result, error) in
        if(result!.isFinal){
            print(result?.bestTranscription.formattedString)
        }
    })

}

Я пытаюсь преобразовать это, но не могу найти, где взять AVAudioPCMBuffer.

Спасибо,


swift ios10
person B Person    schedule 21.06.2016    source источник

Ответы (1)


arrow_upward
1
arrow_downward

хорошая тема.

привет Б человек

вот тема с решением Tap Mic Input Using AVAudioEngine in Swift

см. лекцию Wwdc 2014 502 - AVAudioEngine на практике захват микрофона => за 20 минут создать буфер с кодом касания => за 21,50

вот быстрый код 3

@IBAction func button01Pressed(_ sender: Any) {

    let inputNode = audioEngine.inputNode
    let bus = 0
    inputNode?.installTap(onBus: bus, bufferSize: 2048, format: inputNode?.inputFormat(forBus: bus)) {
        (buffer: AVAudioPCMBuffer!, time: AVAudioTime!) -> Void in

            var theLength = Int(buffer.frameLength)
            print("theLength = \(theLength)")

            var samplesAsDoubles:[Double] = []
            for i in 0 ..< Int(buffer.frameLength)
            {
                var theSample = Double((buffer.floatChannelData?.pointee[i])!)
                samplesAsDoubles.append( theSample )
            }

            print("samplesAsDoubles.count = \(samplesAsDoubles.count)")

    }

    audioEngine.prepare()
    try! audioEngine.start()

}

остановить звук

func stopAudio()
    {

        let inputNode = audioEngine.inputNode
        let bus = 0
        inputNode?.removeTap(onBus: bus)
        self.audioEngine.stop()

    }
person myUser    schedule 14.04.2017
comment
Привет, я думаю, что автор спрашивал, как использовать AVAudioRecorder, а не AVAudioEngine. - person Patrik Vaberer; 10.01.2019