26/график/система/рандомные падения

[enterfaza]

@Alex Sh. сборка 395, уже неделю график показывает рандомные падение/восстановление системы, как будто теряется связь с облаком, такая картинка только с контроллером (у экстендеров все нормально) и причем если сначала зайти потом выйти и потом снова зайти на экран контроллера, то падение системы на графике частенько бывает отличает по времени (см. скрин ниже), но никаких обрывов соединения в это время не наблюдается, в логе ошибок тоже нет

перед тем как задавать вопросы оператору, хотелось бы убедиться, что на стороне облака все гуд

в вэбе облака проверял, падения на графике имеются

[Alex Sh.]

@enterfaza Вас опередил юзер с англоязычного форума:

Причина в облаке, будет исправлена в ближайшее время. Провайдер не виноват.

 

[enterfaza]

8 минут назад, Alex Sh. сказал:

Вас опередил юзер с англоязычного форума:

я просто не сразу панику поднимаю, выжидаю какое-то время)

[Alex Sh.]

@enterfaza По словам нашего бэкенд-разработчика баг пофикшен. Если вы все еще видите такое поведение, можно сразу поднимать панику.

[enterfaza]

@Alex Sh. ок

[enterfaza]

@Alex Sh. у меня воспроизводится снова, пару дней не было

[enterfaza]

@Alex Sh. все ещё продолжается

еще замечено расхождение с рмм и приложением по времени начиная с 10:53 до 10:57, непонятно кому верить

Edited October 25, 2021 by enterfaza

[Alex Sh.]

1 час назад, enterfaza сказал:

все ещё продолжается

Сможете сориентировать, какого числа, в какое время были нулевые показания CPU/MEM?
Мы смотрели ваш акк, с роутера кратковременно переставали идти некоторые данные, но не CPU/MEM - эти шли стабильно.
 

1 час назад, enterfaza сказал:

расхождение с рмм и приложением по времени начиная с 10:53 до 10:57, непонятно кому верить

Приложение не смогло бы придумать данные на месте отсутствующих. Поэтому, в вашем примере склонен считать, что приложение показывает правильно, а RMM не получил/потерял часть данных.

[enterfaza]

8 минут назад, Alex Sh. сказал:

Сможете сориентировать, какого числа, в какое время были нулевые показания CPU/MEM?

вот, минувшая пятница 13:06

скрин был сделан сразу

 

[enterfaza]

@Alex Sh. снова было падение, 25.10 в 16:01 но уже на экстендер/этаж 1

ещё из наблюдений, заметил что падение только в приложении, а в вэб облака все ок, и причём если перезайти в приложении на экран устройства в котором было зафиксировано падение, то уже график без падений, значит что-то с приложением

[enterfaza]

@Alex Sh. через пару минут повторилось в 16:19, в вэб облака все чисто

ещё из наблюдений, на самом деле все рандомно если перезаходить на экран, бывает три раза перезайдешь и падение на графике будет, а на четвёртый раз их уже нет, но на пятый—снова есть 

[enterfaza]

@Alex Sh. снова падение в приложении в 21:02, но в этот раз в вэб на бэкэнде тоже

на скринах видно, что падение рандомно если зайти и сразу перезайти на экран, одно и тоже же время в момент захода/перезахода на скрине отметил

[Alex Sh.]

Посмотрели, в 16:01 от экстендера, и в 21:02 от роутера кратковременно не приходили данные о цпу/мем.
Можно сделать такие выводы:
- Пакеты либо потерялись в дороге, либо не были присланы с роутера. Они шлются без гарантии доставки, поэтому тут сложно сказать точнее. Критичного в потере пары пакетов для работы нет. Бэкенд отрабатыает полученные данные корректно.
- Графики в веб и в приложении используют усредненные значения, чувствительность к таким кратковременным скачкам может быть разная, отсюда и отличия.
Стоит привести их к единому виду.
 

[enterfaza]

6 минут назад, Alex Sh. сказал:

Посмотрели, в 16:01 от экстендера, и в 21:02 от роутера кратковременно не приходили данные о цпу/мем.
Можно сделать такие выводы:
- Пакеты либо потерялись в дороге, либо не были присланы с роутера. Они шлются без гарантии доставки, поэтому тут сложно сказать точнее. Критичного в потере пары пакетов для работы нет. Бэкенд отрабатыает полученные данные корректно.
- Графики в веб и в приложении используют усредненные значения, чувствительность к таким кратковременным скачкам может быть разная, отсюда и отличия.
Стоит привести их к единому виду.
 

сегодня на экстендере снова потеря в 10:04, раньше этого не было

с чего могло начаться?нестабильность оператора?

[enterfaza]

9 минут назад, Alex Sh. сказал:

Графики в веб и в приложении используют усредненные значения, чувствительность к таким кратковременным скачкам может быть разная, отсюда и отличия.

значит отличия графика в приложении в одно и тоже время (если перезаходить) могут быть вызваны из-за чувствительности к скачкам?

[Alex Sh.]

В 26.10.2021 в 10:35, enterfaza сказал:

с чего могло начаться?нестабильность оператора?

Проблема не массовая, так что вряд ли у нас на хостинге. Вероятно, ваш оператор. Либо сам роутер не отправляет.

 

В 26.10.2021 в 10:40, enterfaza сказал:

значит отличия графика в приложении в одно и тоже время (если перезаходить) могут быть вызваны из-за чувствительности к скачкам?

Да, получается так.

[enterfaza]

@Alex Sh. сборка 408

что-то просадки на контроллере в графике уже раздражать начинают, каждый час обязательно одна-две просадки будут до 0%, инет в это время есть и не падает, на экстендерах просадок нет тоже так как соединение и инет от контроллера не теряется, просаживает только контроллер, а если перезаходить на экран то график ведёт себя постоянно рандомно, то есть просадки то нет

что-то с этим нужно делать, раньше этого не было, хоть вероятность проблемы в контроллере и не исключаю, но посмотрите ещё раз, может что-то можно с этим сделать

Edited December 10, 2021 by enterfaza

[enterfaza]

@Alex Sh. сейчас вот зашёл на экран контроллера, просадок на графике нет, хотя минут 5 назад было в 9:22

[Alex Sh.]

@enterfaza Где-то через неделю планируется апдейт на сервере, который потенциально должен улучшить ситуацию со сглаживанием графиков на кратковременных просадках в пару потерянных пакетов. Предлагаю немного подождать и потом по факту сравнить.

[enterfaza]

@Alex Sh. в статистике видны пропуски пакетов, не понятно кого винить, запущена прямая трансляция, затыков нет, все работает без обрывов и буферизации, запускал проверку пинга, потерь тоже нет, но на графиках и в статистике рисует такие провалы, толи роутер толи облако, провайдера винить не могу пока, так как потоки трансляций без потерь

[enterfaza]

@Alex Sh. пропуски, много пропусков, запущено iptv

склоняюсь все же к проблеме сервера, на котором мой коннект

до создания этой темы (она создалась после глобального падения облака) все рисовалось стабильно на графиках и в статистике

[enterfaza]

со статистикой больше не актуально

за графиками буду наблюдать

[enterfaza]

44 минуты назад, enterfaza сказал:

со статистикой больше не актуально

не, опять теряется трафик

графики цп/память вроде без падений, пока что

[enterfaza]

и снова трафик в статистике дорисовал пустые промежутки, от чего график стал ровным и без дыр

не знаю что думать, все больше склонен винить облако, тем более раз планировались работы на нем

Edited December 22, 2021 by enterfaza

[enterfaza]

и опять пропуск трафика, в общем есть как есть

[enterfaza]

@Alex Sh. вот что рисует график клиента, на котором запущен поток

а вот что рисует общая статистика

[Alex Sh.]

@enterfaza Подтверждаю, есть проблемы с графиками. И есть некое решение, которое будет применено ближе к НГ, поскольку для этого сперва необходимо закончить другие процедуры на серверах. Так что пока ждем.

[enterfaza]

В 22.12.2021 в 12:27, enterfaza сказал:

графики цп/память вроде без падений, пока что

@Alex Sh. график цп/память проработал пару дней ровно и снова стал падать

28/411

[enterfaza]

В 24.12.2021 в 10:03, Alex Sh. сказал:

@enterfaza Подтверждаю, есть проблемы с графиками. И есть некое решение, которое будет применено ближе к НГ, поскольку для этого сперва необходимо закончить другие процедуры на серверах. Так что пока ждем.

если были улучшения до нг, то мне не помогло, график трафика так и продолжает пропускать пакеты, особенно это проявляется на клиенте, можно наблюдать большой скачок трафика сразу после пропуска, как будто график пытается дорисовать пропущенные пакеты, но промахивается и добавляет не в пустое место

график системы цп/память перестал падать

Edited January 11, 2022 by enterfaza

[Alex Sh.]

Сейчас ситуация уже должна быть лучше, чем в конце прошлого года, но работы не окончены, планируется еще ряд действий, после которых, надеюсь, проблема уйдет полностью.

[enterfaza]

27 минут назад, Alex Sh. сказал:

Сейчас ситуация уже должна быть лучше, чем в конце прошлого года, но работы не окончены, планируется еще ряд действий, после которых, надеюсь, проблема уйдет полностью.

ситуация действительно стала лучше, чем была

в основном паления только на клиенте, на самом устройстве почти всегда хорошо

тогда подождём ещё правок