|
Сравнение кодеров: результаты слепых тестов (ABX)
|
|
|
Audiophile
|
Дата: Вторник, 12 Марта 2013, 15:04 | Сообщение #1
|
|
Группа: Администраторы
Сообщений: 1274
Статус: Оффлайн
|
Хочу объединить наши усилия и, организовав правильный подход к вопросу, сделать некоторые наблюдения касаемо качества кодирования различных кодеров.
В этой теме приглашаю выкладывать свои результаты слепых ABX тестов кодеков на самом различном музыкальном материале.
Инструкции к проведению ABX теста
Ваш отчет должен содержать:
1. Лог плагина ABX Comparator. Результаты с вероятностью ошибки >1% не принимаются. Минимальное количество проходов/угадываний - 7/7. Рекомендуемое количество проходов - 16.
2. Название и версию консольного кодера.
3. Параметры, использованные при кодировании музыкального материала.
4. Параметры использованные при декодировании (использование ReplayGain, настройки ReplayGain, подробное описание DSP, если они включены, и их настроек).
5. Информацию об оборудовании: звуковая карта, интерфейс вывода, усилитель/ресивер, акустика/наушники.
6. Комментарии к субъективным ощущениям во время прослушивания (в случае положительного результата конечно же).
7. Музыкальный фрагмент, на котором Вы уловили различия (не более 30 секунд).
|
|
|
  
|
|
|
Audiophile
|
Дата: Понедельник, 23 Марта 2015, 22:02 | Сообщение #31
|
|
Группа: Администраторы
Сообщений: 1274
Статус: Оффлайн
|
sergbill, усталость, возможно. Негативный результат не означает, что файлы не различаются по звучанию - только, что вы не смогли в данном тесте их уверенно различить.
Советую проверить биткомпаратором, а потом вычитанием одного их другого (2.44 vs 2.47).
|
|
|
|
|
|
User
|
Дата: Пятница, 27 Марта 2015, 19:13 | Сообщение #32
|
|
Группа: Проверенные
Сообщений: 120
Статус: Оффлайн
|
Для тех, кто не верил, что защиту в новой версии ABX тестера можно обойти. В очередном ABX'е якобы смог найти разницу между lossless и OPUS 500 kbit/s
Код foo_abx 2.0 report
foobar2000 v1.3.7
2015-03-27 20:44:00
File A: battle.flac
SHA1: 2f405a24581e9c32222cba016ec983e821103983
Gain adjustment: +1.56 dB
File B: battle.opus
SHA1: fb00fb68bad6ebdf3dd0bca6aab29fbdcbd9e9a1
Gain adjustment: +1.56 dB
Output:
DS : Primary Sound Driver
Crossfading: NO
20:44:00 : Test started.
20:45:40 : 01/01
20:46:50 : 02/02
20:47:00 : 03/03
20:47:51 : 04/04
20:49:20 : 05/05
20:50:48 : 06/06
20:50:58 : 07/07
20:51:56 : 08/08
20:53:05 : 09/09
20:53:15 : 10/10
20:54:42 : 11/11
20:54:52 : 12/12
20:55:51 : 13/13
20:56:01 : 14/14
20:56:09 : 15/15
20:56:52 : 16/16
20:56:52 : Test finished.
----------
Total: 16/16
Probability that you were guessing: 0.0%
-- signature --
6a4312c0db0fdd46e30d7555e2cec977da4dbb48
Вот треки, которые "сравнивались". Можете проверить SHA1 чексуммы, они совпадут. Также проверить и сам лог - он будет корректным.
Стандарт качества - 44100 кГц, 16 бит хватит для всех. Однако никто не затачивал музыку под ваше воспроизводящее оборудование и под ваши вкусы.
Сообщение отредактировал User - Суббота, 28 Марта 2015, 07:49
|
|
|
|
|
|
Audiophile
|
Дата: Четверг, 30 Апреля 2015, 11:01 | Сообщение #33
|
|
Группа: Администраторы
Сообщений: 1274
Статус: Оффлайн
|
WavPack lossy @ 200 kbps
Код wavpack 4.70 -b200 -m -i -q -hh -x6 tydi-meet_me_in_kyoto_658kbps.wav 1.wv
Xonar Essence STX + Technics RP-8801
Цитата foo_abx 2.0 report
foobar2000 v1.3.8
2015-04-30 10:54:56
File A: tydi-meet_me_in_kyoto_658kbps.wav
SHA1: 0cd0625fa935492c8d7a6a3c75d755c7c7a9c3a6
File B: 1.wv
SHA1: bd088042b45a8562c896c30a8e4b43e96c1c17c3
Used DSPs:
Resampler (SoX)
Output:
ASIO : Xonar Essence STX ASIO(64)
Crossfading: NO
10:54:56 : Test started.
10:55:17 : 01/01
10:55:23 : 02/02
10:55:31 : 03/03
10:55:36 : 04/04
10:55:49 : 05/05
10:55:56 : 06/06
10:56:01 : 07/07
10:56:05 : 08/08
10:56:12 : 09/09
10:56:17 : 10/10
10:56:23 : 11/11
10:56:31 : 12/12
10:56:31 : Test finished.
----------
Total: 12/12
Probability that you were guessing: 0.0%
-- signature --
32a0fac7cc92ca5da86b635dc4e90370766b940b
https://audiophilesoft.com/misc....to.flac
Отчётливый фоновый шум примерно с пятой секунды.
|
|
|
|
|
|
Rollinnn
|
Дата: Суббота, 20 Августа 2016, 22:26 | Сообщение #34
|
|
Группа: Эксперты
Сообщений: 1461
Статус: Оффлайн
|
lame 3.99.5 -V2
Код foo_abx 2.0.2 report
foobar2000 v1.3.9
2016-02-05 00:45:08
File A: 06. Decay.wav
SHA1: cba5e5ef89e8cac065e6f3350d07bfcdc4b4ac50
File B: 06. Decay.mp3
SHA1: d080bc2bab36dd2c3215a42103eb8784e4ac0d9c
Output:
WASAPI (event) : Интерфейс SPDIF (4- DR.DAC2 DX USB), 24-bit
Crossfading: NO
00:45:08 : Test started.
00:46:26 : 01/01
00:46:39 : 02/02
00:47:24 : 03/03
00:48:01 : 04/04
00:48:16 : 05/05
00:48:35 : 06/06
00:49:19 : 07/07
00:49:50 : 08/08
00:50:22 : 09/09
00:50:40 : 10/10
00:51:17 : 11/11
00:51:32 : 12/12
00:51:46 : 13/13
00:52:13 : 14/14
00:52:29 : 15/15
00:52:45 : 16/16
00:52:45 : Test finished.
----------
Total: 16/16
Probability that you were guessing: 0.0%
-- signature --
abe6b62c99637af9bdc68246a36bbf590e43225b
lame 3.99.5 -S --noreplaygain -V 2
без replaygain, без DSP
Dr.Dac2 DX->Sennheiser HD 380
На первом же ударе барабана в mp3 слышен посторонний присвист.
https://yadi.sk/d/9ukrYQzOoK9sh
Добавлено (20 Августа 2016, 22:26)
---------------------------------------------
Opus libopus 1.1.2 ~128kbps
Код foo_abx 2.0.2 report
foobar2000 v1.3.10
2016-08-20 22:12:41
File A: 06. Decay.wav
SHA1: a7e9731a27f379c013452a48a70e730be1ba1d01
File B: 06. Decay.opus
SHA1: bef23ca44c72b0a132a0d849bcb46e753c108120
Used DSPs:
Resampler (SoX)
Output:
WASAPI (event) : Интерфейс SPDIF (4- DR.DAC2 DX USB), 24-bit
Crossfading: NO
22:12:41 : Test started.
22:13:04 : 01/01
22:13:28 : 02/02
22:13:40 : 03/03
22:14:11 : 04/04
22:14:25 : 05/05
22:14:31 : 06/06
22:14:52 : 07/07
22:14:58 : 08/08
22:15:06 : 09/09
22:15:24 : 10/10
22:15:34 : 11/11
22:15:44 : 12/12
22:15:44 : Test finished.
----------
Total: 12/12
Probability that you were guessing: 0.0%
-- signature --
59302c20bed88e3885a15114097667493c93c976
Dr.Dac2 DX->Sennheiser HD 380
То же самое, что и с mp3 VBR V2.
Хочу заметить, что, если исходный файл, с которым производится сравнение не в 48 кГц, то тестить opus без ресемплера - не комильфо. Т.к. фубар декодирует opus в 48 кГц, и может статься, что звуковая карта на разных частотах работает по-разному или при переключении частот даёт заметный щелчок.
https://yadi.sk/d/dwxEMjabuMj32
Сообщение отредактировал Rollinnn - Суббота, 20 Августа 2016, 22:48
|
|
|
|
|
|
Audiophile
|
Дата: Вторник, 17 Октября 2017, 20:01 | Сообщение #35
|
|
Группа: Администраторы
Сообщений: 1274
Статус: Оффлайн
|
Семпл из композиции, которую нашел r3n4m3
Opus 1.2.1 64-bit - b 128
Цитата foo_abx 2.0.4 report
foobar2000 v1.3.16
2017-10-17 18:53:44
File A: 02_the_riddler_hide_and_seek.flac
SHA1: 1a20bc53d5148ff9963086ba454129a5ed86a676
File B: 02_the_riddler_hide_and_seek.opus
SHA1: 053283c5c0b788992fa714c5f1a33ca8a559e405
Used DSPs:
Resampler (SoX)
Output:
WASAPI (event) : Динамики (ASUS Xonar Essence STX Audio Device), 24-bit
Crossfading: NO
18:53:44 : Test started.
18:54:00 : 01/01
18:54:09 : 02/02
18:54:18 : 03/03
18:54:31 : 04/04
18:54:36 : 05/05
18:54:42 : 06/06
18:55:06 : 07/07
18:55:24 : 08/08
18:55:36 : 09/09
18:55:48 : 10/10
18:55:53 : 11/11
18:56:00 : 12/12
18:56:12 : 13/13
18:56:24 : 14/14
18:56:42 : 15/15
18:57:00 : 16/16
18:57:00 : Test finished.
----------
Total: 16/16
Probability that you were guessing: 0.0%
-- signature --
1de44eee0e1cc68079d95f9cd2efba0ae0108d45
На фоне слышны высокочастотные искажения (баланс ВЧ у кодированного аудио будто бы больше).
|
|
|
|
|
|
kvark48
|
Дата: Пятница, 21 Декабря 2018, 16:07 | Сообщение #36
|
|
Группа: Проверенные
Сообщений: 50
Статус: Оффлайн
|
Семпл из поста выше.
Opus 1.3 64-bit (libopus 1.3, libopusenc 0.2.1)
--quiet --bitrate 200 --ignorelength - %d
DSP: Resampler SoX 48000 Hz
Наушники: koss ur20
Первые 3 секунды: шум 5-10 кГц
foo_abx 2.0.5 report
foobar2000 v1.4.1
2018-12-21 13:27:48
File A: 02_the_riddler_hide_and_seek.flac
SHA1: 040347cf00829b119dfc5ba9c3e8ef19a1b20f5b
Gain adjustment: -8.79 dB
File B: 02_the_riddler_hide_and_seek.opus
SHA1: e0dc31435d5d14c19162ec14726bdad1b2bfc1e0
Gain adjustment: -8.78 dB
Used DSPs:
Resampler (SoX)
Output:
WASAPI (event) : Динамики (Realtek High Definition Audio), 24-bit
Crossfading: NO
13:27:48 : Test started.
13:28:06 : 00/01
13:28:17 : 01/02
13:28:28 : 02/03
13:28:38 : 03/04
13:28:51 : 04/05
13:29:06 : 05/06
13:29:15 : 06/07
13:29:24 : 07/08
13:29:31 : 08/09
13:29:38 : 09/10
13:29:47 : 10/11
13:29:55 : 11/12
13:30:06 : 12/13
13:30:13 : 13/14
13:30:22 : 14/15
13:30:30 : 15/16
13:30:30 : Test finished.
----------
Total: 15/16
Probability that you were guessing: 0.0%
-- signature --
b1a2a6c5642d17e67a2a356d1dd3951378f8392fДобавлено (23 Декабря 2018, 15:58)
---------------------------------------------
Тоже что и выше но с выключенным встроенным ресемплером Speex.
flac->wav 32bit float, DSP: SoX Resampler 0.8.5 - 48000 Hz
Opus 1.3 64-bit (libopus 1.3, libopusenc 0.2.1)
Код opusenc --bitrate 200 02_the_riddler_hide_and_seek_32bit_float_48kHz.wav 02_the_riddler_hide_and_seek_48kHz.opus
DSP: нет
Наушники: koss ur20
Первые 3 секунды: аналогичный шум
Как не крути а на данный момент Опус 1.3 - лидер среди лоси-кодеков. (ИМХО)
Код foo_abx 2.0.5 report
foobar2000 v1.4.1
2018-12-23 12:56:44
File A: 02_the_riddler_hide_and_seek_32bit_float_48kHz.wav
SHA1: 6ab626469a8a72c2dd548412f42016b58487e97e
Gain adjustment: -8.79 dB
File B: 02_the_riddler_hide_and_seek_48kHz.opus
SHA1: bcbe6a4e8bf35acc5b896805b4ba03a9be43b7b0
Gain adjustment: -8.78 dB
Output:
WASAPI (event) : Динамики (Realtek High Definition Audio), 24-bit
Crossfading: NO
12:56:44 : Test started.
12:56:59 : 01/01
12:57:10 : 02/02
12:57:19 : 03/03
12:57:27 : 04/04
12:57:35 : 05/05
12:57:43 : 06/06
12:57:59 : 07/07
12:58:06 : 08/08
12:58:16 : 09/09
12:58:23 : 10/10
12:58:28 : 11/11
12:58:35 : 12/12
12:58:44 : 13/13
12:58:51 : 14/14
12:58:59 : 15/15
12:59:06 : 16/16
12:59:06 : Test finished.
----------
Total: 16/16
Probability that you were guessing: 0.0%
-- signature --
0a6e782eb6083ca4a8d716a0824d72bfdfed426d
|
|
|
|
|
|
swagenis228
|
Дата: Понедельник, 21 Января 2019, 13:04 | Сообщение #37
|
|
Группа: Проверенные
Сообщений: 6
Статус: Оффлайн
|
Used DSPs:
Advanced Limiter, Graphic Equalizer
Output:
ASIO : ASIO4ALL v2
Crossfading: NO
14:51:34 : Test started.
14:53:36 : 01/01
14:53:43 : 02/02
14:53:48 : 03/03
14:53:53 : 04/04
14:54:00 : 05/05
14:54:05 : 06/06
14:54:11 : 07/07
14:54:16 : 08/08
14:54:21 : 09/09
14:54:25 : 10/10
14:54:28 : 11/11
14:54:34 : 12/12
14:54:34 : Test finished.
----------
Total: 12/12
Probability that you were guessing: 0.0%
-- signature --
ec813b90625f9f8b3507977c3438bccd01000dea
ASIO4ALL показывает разную частоту. всплывает при проигрывании
у влак 44100
у опус 48000
resempler(sox)mod2 не помогает
Сообщение отредактировал swagenis228 - Понедельник, 21 Января 2019, 13:06
|
|
|
|
|
|
Rollinnn
|
Дата: Понедельник, 21 Января 2019, 19:02 | Сообщение #38
|
|
Группа: Эксперты
Сообщений: 1461
Статус: Оффлайн
|
Цитата swagenis228 (  ) ASIO4ALL показывает разную частоту. всплывает при проигрывании
у влак 44100
у опус 48000
resempler(sox)mod2 не помогает
Сообщение отредактировал Rollinnn - Понедельник, 21 Января 2019, 19:03
|
|
|
|
|
|
m14u
|
Дата: Среда, 03 Апреля 2019, 23:00 | Сообщение #39
|
|
Группа: Проверенные
Сообщений: 53
Статус: Оффлайн
|
На гидрогене интересный тест. Сравнили mp3 cbr и opus. Причём, у опусов битрейт вдвое меньше, нежели mp3.
|
|
|
|
|
|
Rollinnn
|
Дата: Суббота, 10 Августа 2019, 17:44 | Сообщение #40
|
|
Группа: Эксперты
Сообщений: 1461
Статус: Оффлайн
|
Opus 1.3.1 --bitrate 200 --vbr
Dr.Dac2 DX->Sennheiser HD 380
Достаточно первой секунды. В оригинале слышен некий присвист, который в opus'е становится заметно тише.
Оригинал в 48 кГц, поэтому без DSP
https://www.dropbox.com/s....ip?dl=1
Код foo_abx 2.0.6c report
foobar2000 v1.5 beta 9
2019-08-10 17:35:20
File A: 06. Decay==0.flac
SHA1: 0672c87dcd975930caadb0b16f4d9912e66cd8ba
File B: 06. Decay----.opus
SHA1: 332df42a040e04fe809d7022c536b60981aca972
Output:
WASAPI (event) : Интерфейс SPDIF (5- DR.DAC2 DX USB), 24-bit
Crossfading: NO
17:35:20 : Test started.
17:35:44 : 01/01
17:36:20 : 02/02
17:36:32 : 03/03
17:36:40 : 04/04
17:36:51 : 05/05
17:37:03 : 06/06
17:37:11 : 07/07
17:37:18 : 08/08
17:37:39 : 09/09
17:38:08 : 10/10
17:38:26 : 11/11
17:38:34 : 12/12
17:38:34 : Test finished.
----------
Total: 12/12
p-value: 0.0002 (0.02%)
-- signature --
f97a9a7e168b5c85c6cdfb8b352901bcd3450d1c
Сообщение отредактировал Rollinnn - Суббота, 10 Августа 2019, 17:46
|
|
|
|
|
