fxsaber #: AskBid-вариант используется в 99% случаев. Наверное, имеется смысл сделать Light-вариант библиотеки, где выкинуть все проверки других вариантов, включая TickItems.
TickItems проверяется 1 раз на блок данных в 10000 тиков. Ускорение ничтожное может быть. Не стоит трат времени.
Поиск ячейки в массиве - долго. А там всего 6 математических операций, которые очень быстро работают...
У меня было еще 5 вариантов с чтением по 2 и 4 бита, все медленнее до 10%, но размер файла был до 30% меньше (85мб место 116).
Думаю, что замедление именно из за поиска в массиве и чтения.
Например тут
fl=Arr2ToUchar (m,r);//flag 2 бита => 1 байт за 4 тика заполняется
dt=ArrToUchar(m,r);
if(dt<229){this.tp+=dt; if((fl&1)>0){this.bp+=Arr4ToChar (m,r);}if(fl>1){this.ap+=Arr4ToChar (m,r);}}//1,5 или 2 байта всего на самые часто встречающиеся тики
файл был 101мб, но медленнее того, что сейчас на 6%.
Целый день на эксперименты потратил. Думаю - достаточно.
fxsaber #: Вроде, не хватает данных о количестве тиков в блоке. Сейчас непонятно, сколько выделять под MqlTick[] при разжатии.
Каждый блок по 10000 тиков сжимается до любого размера, потом этот же блок разжимается ровно до 10000 тиков. Между блоками при записи в файл записывается метка с размером блока.
Используется один и тот же MqlTick Ticks[10000];
Размер тоже влияет на скорость. 100 и 1000000 медленнее. Остановился в выборе на 10000.
Каждый блок по 10000 тиков сжимается до любого размера, потом этот же блок разжимается ровно до 10000 тиков. Между блоками при записи в файл записывается метка с размером блока.
Увидел это.
int ticks_per_block=200000;
Получается, что нужно выделять количество блоков * 10000. А количество блоков сразу в массиве можно посчитать по смещениям.
Для авторизации и пользования сайтом MQL5.com необходимо разрешить использование файлов Сookie.
Пожалуйста, включите в вашем браузере данную настройку, иначе вы не сможете авторизоваться.
Вы вошли в аккаунт. Двухфакторная аутентификация отключена. Настройте её заново и отсканируйте новый QR-код или продолжите с отключённой двухфакторной аутентификацией.
Супер-круто!
Можно по аналогии попробовать.
Предполагаю, что Ваш побитовый вариант медленнее, потому что идет принудительный переход ushort->uint. А при делении и остатке перехода нет.
Как и из первых тестов использование & дало замедление 2% по самым быстрым вариантам
Вот сравнение по 3 запуска
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1830 MB/s
Decompress performance: 32.0 Ticks (millions)/sec.
Decompress performance criterion: 414.0
Correct = true
Ticks: 4039748
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1827 MB/s
Decompress performance: 31.9 Ticks (millions)/sec.
Decompress performance criterion: 413.2
Correct = true
Ticks: 4039748
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1849 MB/s
Decompress performance: 32.3 Ticks (millions)/sec.
Decompress performance criterion: 418.2
Correct = true
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1783 MB/s
Decompress performance: 31.2 Ticks (millions)/sec.
Decompress performance criterion: 403.2
Correct = true
Ticks: 4039748
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1764 MB/s
Decompress performance: 30.8 Ticks (millions)/sec.
Decompress performance criterion: 399.0
Correct = true
Ticks: 4039748
Compressed size: 18729685
Decompressed ticks: 4039748
Decompress performance: 1808 MB/s
Decompress performance: 31.6 Ticks (millions)/sec.
Decompress performance criterion: 408.9
Correct = true
Тестировал этот вариант и тот что в коде
AskBid-вариант используется в 99% случаев. Наверное, имеется смысл сделать Light-вариант библиотеки, где выкинуть все проверки других вариантов, включая TickItems.
TickItems проверяется 1 раз на блок данных в 10000 тиков. Ускорение ничтожное может быть. Не стоит трат времени.
Такие конструкции должны быстрее работать через switch.
Проверял. Два if()else if()else быстрее или так же. Потому и заменил swith на if
На самом деле можно избавиться от вычитания из 255. И обойтись одним switch на 27 значений.
Такие конструкции должны быстрее работать через switch.
dt имеет смысл сделать uchar, сейчас long.
Если заменить, то требуется 3 преобразования в int тут
dt=f%3
u=(f/3)%3;
dt=(f/9)%3;
вместо 1 сейчас.
Думаю работу с компрессором закончил. Надо на другие вещи переключаться.
Еще предложение.
Еще предложение.
Поиск ячейки в массиве - долго. А там всего 6 математических операций, которые очень быстро работают...
У меня было еще 5 вариантов с чтением по 2 и 4 бита, все медленнее до 10%, но размер файла был до 30% меньше (85мб место 116).
Думаю, что замедление именно из за поиска в массиве и чтения.
Например тут
Целый день на эксперименты потратил. Думаю - достаточно.
Такие конструкции должны быстрее работать через switch.
Проверил еще раз. Все таки switch медленнее. По 4 запуска
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3573 MB/s
Decompress performance: 62.4 Ticks (millions)/sec.
Decompress performance criterion: 927.5
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3745 MB/s
Decompress performance: 65.5 Ticks (millions)/sec.
Decompress performance criterion: 972.3
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3740 MB/s
Decompress performance: 65.4 Ticks (millions)/sec.
Decompress performance criterion: 970.9
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3746 MB/s
Decompress performance: 65.5 Ticks (millions)/sec.
Decompress performance criterion: 972.5
Correct = true
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3500 MB/s
Decompress performance: 61.2 Ticks (millions)/sec.
Decompress performance criterion: 908.6
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3531 MB/s
Decompress performance: 61.7 Ticks (millions)/sec.
Decompress performance criterion: 916.6
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3713 MB/s
Decompress performance: 64.9 Ticks (millions)/sec.
Decompress performance criterion: 963.9
Correct = true
Ticks: 4039748
Compressed size: 16316996
Decompressed ticks: 4039748
Decompress performance: 3657 MB/s
Decompress performance: 63.9 Ticks (millions)/sec.
Decompress performance criterion: 949.3
Correct = true
Вроде, не хватает данных о количестве тиков в блоке. Сейчас непонятно, сколько выделять под MqlTick[] при разжатии.
Каждый блок по 10000 тиков сжимается до любого размера, потом этот же блок разжимается ровно до 10000 тиков. Между блоками при записи в файл записывается метка с размером блока.
Используется один и тот же MqlTick Ticks[10000];
Размер тоже влияет на скорость. 100 и 1000000 медленнее. Остановился в выборе на 10000.
Каждый блок по 10000 тиков сжимается до любого размера, потом этот же блок разжимается ровно до 10000 тиков. Между блоками при записи в файл записывается метка с размером блока.
Получается, что нужно выделять количество блоков * 10000. А количество блоков сразу в массиве можно посчитать по смещениям.