Никакая идея, что продолжается здесь, но добавило новый узел Riak к кластеру и не фиксировала изменений. Новый узел взял 0% кластерного членства, в то время как первый узел в кластере растет с более чем 37%-м членством. Вот график:
================================= Membership ==================================
Status Ring Pending Node
-------------------------------------------------------------------------------
valid 37.5% 25.0% 'riak@prod-riak-08'
valid 17.2% 25.0% 'riak@prod-riak-09'
valid 25.0% 25.0% 'riak@prod-riak-10'
valid 20.3% 25.0% 'riak@prod-riak-11'
valid 0.0% 0.0% 'riak@prod-riak-12'
Тем временем похоже, что некоторые данные недоступны. Какая-либо идея, что продолжается? Использование Riak 1.4.8.
Новый журнал riak-12:
2014-06-24 09:00:11.142 [info] <0.347.0>@riak_kv_entropy_manager:perhaps_log_throttle_change:826 Changing AAE throttle from 10 -> 0 msec/key, based on maximum vnode mailbox size 53 from 'riak@prod-riak-09'
2014-06-24 09:02:41.150 [info] <0.347.0>@riak_kv_entropy_manager:perhaps_log_throttle_change:826 Changing AAE throttle from 0 -> 10 msec/key, based on maximum vnode mailbox size 319 from 'riak@prod-riak-10'
2014-06-24 09:02:56.152 [info] <0.347.0>@riak_kv_entropy_manager:perhaps_log_throttle_change:826 Changing AAE throttle from 10 -> 0 msec/key, based on maximum vnode mailbox size 1 from 'riak@prod-riak-10'
Оказывается, в Риаке это странная проблема с балансировкой данных. В основном, риак-08 всё ещё восстанавливался из узла, который был удалён из кластера (падал, не поднимался).
После снижения лимита передачи риак-админ 30
всё начало нормализовываться с постоянной скоростью. Примерно через час Riak затем перебалансировал данные обратно в riak-12:
================================= Membership ==================================
Status Ring Pending Node
-------------------------------------------------------------------------------
valid 25.0% 18.8% 'riak@prod-riak-08'
valid 25.0% 18.8% 'riak@prod-riak-09'
valid 25.0% 18.8% 'riak@prod-riak-10'
valid 25.0% 25.0% 'riak@prod-riak-11'
valid 0.0% 18.8% 'riak@prod-riak-12'