Я пытаюсь создать декодер в Android для проекта, опубликованного https://github.com/rraval/pied-piper Они уже создали декодер на питоне, на питоне это было довольно просто с помощью пакета numpy, а вот на джаве у меня туго. Шаги, используемые в python, включают:
def dominant(frame_rate,chunk):
w=numpy.fft.fft(chunk)
numpy.fft.fftfreq(len(chunk))
peak_coeff = numpy.argmax(numpy.abs(w))
peak_freq = freqs[peak_coeff]
return abs(peak_freq * frame_rate) # in Hz
Приведенный выше код возвращает частоту аудиоданных в кусках [].
Я пытаюсь создать код Android, который реализует ту же логику. Моя работа на данный момент представлена ниже:
public class MicReadThread3 extends Thread {
static final int HANDSHAKE_START_HZ = 8192;
static final int HANDSHAKE_END_HZ = 8192 + 512;
static final int START_HZ = 1024;
static final int STEP_HZ = 256;
static final int BITS = 4;
static final int FEC_BYTES = 4;
static final int sample_size=8;
boolean callBack_done=false;
private static final int AUDIO_SOURCE = MediaRecorder.AudioSource.MIC;
private static final int SAMPLE_RATE = 44100; // Hz
private static final int ENCODING = AudioFormat.ENCODING_PCM_16BIT;
private static final int CHANNEL_MASK = AudioFormat.CHANNEL_IN_MONO;
private static final int BUFFER_SIZE = AudioRecord.getMinBufferSize(SAMPLE_RATE, CHANNEL_MASK, ENCODING);
private static final int blockSize=BUFFER_SIZE;
public MicReadThread3(){
setPriority(Thread.MAX_PRIORITY);
}
@Override
public void run(){
System.out.println("Buffer Size : "+BUFFER_SIZE);
AudioRecord audioRecord=null;
double dom;
byte[] buffer=new byte[blockSize];
short[] bufferShort =new short[blockSize];
audioRecord = new AudioRecord(AUDIO_SOURCE, SAMPLE_RATE, CHANNEL_MASK, ENCODING, BUFFER_SIZE);
audioRecord.startRecording();
while(true){
audioRecord.read(buffer, 0, blockSize);
dom = dominant(SAMPLE_RATE, buffer);
System.out.println("Dominant="+dom);
if(match(dom,HANDSHAKE_START_HZ)){
System.out.println("Found Handshake start freq :"+dom);
}
if(match(dom,HANDSHAKE_END_HZ)){
System.out.println("Found Handshake end freq :"+dom);
}
}
}
public boolean match(double freq1, double freq2) {
return Math.abs(freq1 - freq2) < 20;
}
public double dominant(int frame_rate, byte[] chunk){
int len=chunk.length;
double[] waveTransformReal=new double[len];
double[] waveTransformImg=new double[len];
for(int i=0;i<len;i++){
waveTransformReal[i]=chunk[i];
}
Fft.transform(waveTransformReal,waveTransformImg);
//Calculating abs
double[] abs=new double[len];
for(int i=0;i<len;i++) {
abs[i] = (Math.sqrt(waveTransformReal[i] * waveTransformReal[i] + waveTransformImg[i] * waveTransformImg[i]));
}
int maxIndex=0;
for(int i=0;i<len;i++) {
if (abs[i] > abs[maxIndex])
maxIndex = i;
}
//frame_rate is sampling freq and len is no. of datapoints
double dominantFrequency=(maxIndex*frame_rate)/len;
return dominantFrequency;
}
}
Класс, который я использую для получения Fft, можно найти по приведенной ниже ссылке: https://www.nayuki.io/res/free-small-fft-in-multiple-languages/Fft.java
Я должен напечатать доминирующую частоту, если она равна частотам рукопожатия.
Но когда я печатаю значения, я получаю просто значения нежелательной частоты, такие как 1000,42050,2000,...
В python код был в порядке, но в Android становится все сложнее... Пожалуйста, помогите, мой проект должен быть представлен на следующей неделе. Это только часть моего проекта, мы отстаем из-за этой проблемы! Спасибо заранее.
