Получение вероятности классификации для новых аудиофайлов?

#python #audio #keras #classification

#питон #Аудио #keras #классификация

Вопрос:

Я использую алгоритм CNN для прогнозирования классификации звука в новом образце набора аудиоданных. Недавно я изменил код, чтобы получить вероятность каждого класса (70% гитары, 25% скрипки и т.д.) Для каждого аудиофайла, но я получаю эту ошибку:

 TypeError                                 Traceback (most recent call last)
e:Machine LearningPro_04_audio_classpredict_draft.py in 
     60                         help='threshold magnitude for np.int16 dtype')
     61     args, _ = parser.parse_known_args()
---> 62     make_prediction(args)
     63 

e:Machine LearningPro_04_audio_classpredict_draft.py in make_prediction(args)
     39         X_batch = np.array(batch, dtype=np.float32)
     40         y_pred = model.predict(X_batch)
---> 41         print('Predicted class: {}'.format(classes[y_pred]))
     42         results.append(y_pred)
     43     #np.save(os.path.join('logs', args.pred_fn), np.array(results))

TypeError: only integer scalar arrays can be converted to a scalar index
 

Я попробовал несколько разных решений, но не смог пройти мимо этого. Есть ли какой-нибудь способ, которым я могу получить вероятности классов для новых аудиофайлов?

Код, который я использую:

 
def make_prediction(args):

model = load_model(args.model_fn,
    custom_objects={'STFT':STFT,
                    'Magnitude':Magnitude,
                    'ApplyFilterbank':ApplyFilterbank,
                    'MagnitudeToDecibel':MagnitudeToDecibel})
wav_paths = glob('{}/**'.format(args.src_dir), recursive=True)
wav_paths = sorted([x.replace(os.sep, '/') for x in wav_paths if '.wav' in x])
classes = sorted(os.listdir(args.class_src_dir))
labels = [os.path.split(x)[0].split('/')[-1] for x in wav_paths]
le = LabelEncoder()
y_true = le.fit_transform(labels)
results = []

for z, wav_fn in tqdm(enumerate(wav_paths), total=len(wav_paths)):
    rate, wav = downsample_mono(wav_fn, args.sr)
    mask, env = envelope(wav, rate, threshold=args.threshold)
    clean_wav = wav[mask]
    step = int(args.sr*args.dt)
    batch = []

    for i in range(0, clean_wav.shape[0], step):
        sample = clean_wav[i:i step]
        sample = sample.reshape(-1, 1)
        if sample.shape[0] < step:
            tmp = np.zeros(shape=(step, 1), dtype=np.float32)
            tmp[:sample.shape[0],:] = sample.flatten().reshape(-1, 1)
            sample = tmp
        batch.append(sample)
    X_batch = np.array(batch, dtype=np.float32)
    y_pred = model.predict(X_batch)
    print('Predicted class: {}'.format(classes[y_pred]))
    results.append(y_pred)

#np.save(os.path.join('logs', args.pred_fn), np.array(results))
if name == 'main':

parser = argparse.ArgumentParser(description='Audio Classification Training')
parser.add_argument('--model_fn', type=str, default='models/conv2d.h5',
                    help='model file to make predictions')
parser.add_argument('--pred_fn', type=str, default='y_pred',
                    help='fn to write predictions in logs dir')
parser.add_argument('--src_dir', type=str, default='predict',
                    help='directory containing wavfiles to predict')
parser.add_argument('--class_src_dir', type=str, default='clean',
                    help='directory containing wavfiles to predict')                   
parser.add_argument('--dt', type=float, default=1.0,
                    help='time in seconds to sample audio')
parser.add_argument('--sr', type=int, default=16000,
                    help='sample rate of clean audio')
parser.add_argument('--threshold', type=str, default=20,
                    help='threshold magnitude for np.int16 dtype')
args, _ = parser.parse_known_args()

make_prediction(args)
 

Ответ №1:

Я думаю classes , что это a List , а не a Numpy array . Таким образом, вы не можете использовать для него индексацию массива ( classes[y_pred] ) .

Попробуйте это:

    classes_array = np.array(classes)
   print('Predicted class: {}'.format(classes_array[y_pred]))
 

Или используйте for loop подобное:

 for i in y_pred:
    print('Predicted class: {}'.format(classes[i]))