У меня есть несколько машин, обрабатывающих большие объемы текстовых данных (100 ГБ), которые индексируются в RocksDB. Машины предназначены для балансировки нагрузки и работают на тех же данных. Когда я добавляю новые машины, я хочу скопировать базу данных по сети с существующей машины как можно быстрее.
Есть ли элегантный способ сделать резервную копию RocksDB по сети? я прочитал https://github.com/facebook/rocksdb/wiki/How-to-backup-RocksDB но для этого потребуется вдвое больше дискового пространства: сначала для резервного копирования в локальную файловую систему, прежде чем его можно будет скопировать по сети. Я также должен был бы иметь дело, например, с rsyncing файлы.
Задача ещё не решена.
Других решений пока нет …