Cистема для сортировки данных DeepSort от компании Samsung Electronics заняла первое место на соревновании Sort Benchmark, известном как «Чемпионат мира» в области сортировки данных. Превзойдя конкурентные решения ведущих технологических компаний и исследовательских институтов, система от Samsung смогла проанализировать и реорганизовать 3.7 TБ данных за 60 секунд. Это более чем в два раза превышает предыдущий рекорд в 1,5 ТБ по результатам теста производительности MinuteSort Benchmark, который является отраслевым стандартом объема сортировки данных в минуту.

«Миллиарды людей во всем мире продолжают генерировать огромный объем данных, – комментирует Юхан Ли (Juhan Lee), вице-президент Samsung Electronics Software Center в Сеуле. – И поэтому расширение возможностей решений для обработки данных является ключевой задачей в стратегии развития услуг нового поколения для современных потребителей, в том числе сервисов, связанных с Интернетом вещей и диджитал-категорией Здоровье и Фитнес. Система DeepSort и другие инновационные решения, которые в настоящее время находятся в стадии разработки, станут той основой, благодаря которой мы можем полностью реализовать потенциал подобных услуг».

Система DeepSort была испытана в сетевой среде, состоящей из 384 серверов. Для того, чтобы более точным образом оценить реальную производительность системы, на протяжении всего испытания использовались умеренные параметры аппаратного и программного обеспечения. Например, такие параметры, как количество серверов, объем памяти 64 Гб и вычислительная мощность 2,1 ГГц каждого из серверов, были значительно ниже по сравнению с параметрами, используемыми основными конкурентами Samsung в соревновании Sort Benchmark 2014. В то же время, вместо значительно более быстрых твердотельных накопителей (SSD), для теста были использованы жесткие диски (HDD).

Рекордная производительность DeepSort обусловлена точной настройкой ряда ключевых элементов для ускорения скорости обработки данных, которая происходит в течение всего процесса сортировки. В числе прочего, это предотвращение дополнительного времени ожидания для серверов с более высокой нагрузкой в первую очередь благодаря распределению нагрузки между всеми серверами, обеспечение одновременности процессов обработки, передачи и хранения данных вследствие способности системы параллельно обрабатывать несколько тысяч потоков, а также минимизация времени буферизации в серверных HDD благодаря максимальному использованию кэш-памяти.

Как ожидается, система DeepSort, совместно разработанная Samsung’s Software Center в Корее и Samsung Research America (SRA) в Силиконовой долине (США), будет внедрена в ряде сервисов и мобильных приложений Samsung, включающих функции поиска.
Успех DeepSort произошел на фоне сосредоточенности компании Samsung на инновациях в области программного обеспечения. В развитие этой инициативы компания вложила значительные финансовые и профессиональные ресурсы с привлечением более 40000 разработчиков.