XTX Markets открыла исходный код файловой системы TernFS для распределённого хранения крупных неизменяемых файлов
Алгоритмическая торговая компания XTX Markets, оперирующая более чем 650 петабайтами данных для прогнозов цен и торговых алгоритмов, открыла исходный код собственной файловой системы TernFS для распределённого хранения крупных неизменяемых файлов.Решение TernFS спроектировано для создания распределённого хранилища, охватывающего несколько территориально разделённых датацентров и способного хранить до десятков эксабайт данных, триллионов файлов и сотен миллиардов каталогов, с которыми могут одновременно взаимодействовать миллионы клиентов.
Всё это работает на стандартном оборудовании и обычных сетях Ethernet.Исходный код проекта TernFS написан на языках С++ и Go и опубликован на GitHub под лицензией GPLv2.
habr.com