DigitalOcean's object storage, Spaces, is randomly slow on retrieving small files
We switched from a custom block storage solution to DigitalOcean's object storage and I'm kind of disappointed in the speed.
Is there anyway we could retrieve objects asynchronously? Also some objects that are around 50 KB can take from 57 ms to 3 seconds... Is this normal for object storage solutions or is this just an issue with DigitalOcean?
Update from DigitalOcean:
After battling with support for the past week, I finally got an acceptable response:
"Our Spaces team are aware of some possible performance bottlenecks and are working on addressing those." - Mike G., Platform Support Advocate
I did notice, a day after I submitted a support request (2017-12-18 ), the average speed was 0.74 seconds (with an avg. file size of 78.6 KB) before the NYC3 storage went down. Now it's at 0.42 seconds with an avg. file size of 88.48 KB, tested on 2017-12-20.
1) Хранилище объектов не предназначено для обработки рабочей нагрузки, для которой вы должны его использовать. Короче говоря: поиски K / V на основе хеша никогда не достигнут производительности блочного устройства, «немедленного» поиска через адресацию LBA.
https://cloudstore.interoute.com/knowledge-centre/library/object-storage-use-cases
2) Digital Ocean - это просто система хранения @ # $ ^ E% ^ #! Отбросьте его, как будто он горячий, и замените его оборудованием COTS в сочетании с Ceph.
случайно медленно, удачи в устранении проблем с производительностью хранилища объектов - Цифровой океан может задушить вас, общедоступная конечная точка хранилища объектов ... общедоступна. Это также может зависеть от вашего прокси-сервера или интернет-провайдера, в любом случае я не ожидал, что он будет таким же производительным, как решение для хранения пользовательских блоков. Хранилище объектов - это "достаточно быстрая" система "ключ-значение"