Загрузка ЦП 100% при загрузке торрентов, ПО 3.7.3

[bigpu]

Нашел идентичную проблему не в /ru ветке:

В силу того, что на нее никто не ответил и она повторяется у меня, продублировал сюда.

Версия ПО - 3.7.3, Kenetic DSL - загрузка процессора под 100%, веб интерфейс не открыть в момент закачки торрента, если открыт, обновляется с большой задержкой, интерфейс Трансмиссион ремоут едва обновляет данные, с огромной задержкой, подвисает, скорость закачки скачет в широких пределах, вплоть до 0, закачка даже 2Gb занимает более часа, при скорости инета 100Мбит. Подобное повторяется на нескольких различных закачках. Self-test могу предоставить, если необходим.

[Unfaithful]

На 1810 загрузка процессора при испытаниях максимум что я видел 70, а так в основном 30-45%
оперативка доходит до 210/256  максимум, в основном ниже 

[Le ecureuil]

33 минуты назад, bigpu сказал:

У меня забивает не оперативку, а проц под 100%. Да, роутер 2010

Ну лимиты подкручены так, чтобы реально ОЗУ не сжиралось до упора.

Это сложно объяснить, но сейчас ОС так устроены, что они не могут использовать всю память на 100% до конца. CPU могут, а ОЗУ - нет. Если им позволить все сожрать, то крэши начнутся в непредсказуемых местах: прикладной софт не умеет правильно обрабатывать отказы в выделении памяти, начинается жуткая фрагментация кучи, и в конце концов ядро не сможет даже свои внутренние нужды обработать. Плюс ядро будет постоянно обрабатывать page fault и искать "кого бы выкинуть", оттого недостаток памяти сперва выглядит как нагрузка на CPU.

Попробуйте отключить zram и выделить swap-раздел на диске. Если у вас есть диск внешний, то предпочтительнее иметь swap на нем. zram включен по-умолчанию для тех, у кого нет диска (таких большинство).

[MDP]

Это всё из-за приверженности архитектуры фон Неймана!!! )))))

[Unfaithful]

Выделил я ещё «немного» времени на тестирование.

Раз журнал не пишет про ошибки на диске, а они на самом деле есть, теряется пространство на дисках куда были назначены закачки, я сделал вывод о том, что система не определяет такой тип ошибок и соотв. не говорит о них.

Выучив все Команды Chkdsk, я добрался до сути, роутер ломает маппинг диска, настолько тонко он это делает, что сам этого не понимает и некоторые команды того же chkdsk пишут что всё ок, не говоря уже об обычной проверке диска на ошибки средствами сервиса hdd.

В общем я вернул себе на всех разделах потерянное пространство, вылизал диски от ошибок и прочих проблем с маппингом и потерянных файлов (или как там правильно?!)

После данной процедуры оказалось, что торрент недельной давности у меня весит 0 байт, позавчерашний торрент вместо 42 гб весит пару сотен кб. Transmission после включения этого не понял, и показывал полные размеры и загруженность 100%, ну я удалил эти два торрент файла с удалением файлов с диска.

Теперь отображение объема дискового пространство в вэбе роутера и вэбе transmission одинаково. Отлично , пора тестировать закачку торрента на 71,5гб. 

Погнали: 3.7.0 загрузка летит, скорость аж 10 мб/сек местами. Интерфейсы летают, ничего не виснет. Загрузка по памяти 40-65% , процессор 35-45%. 
   Но музыка играла приблизительно до 25% закачки и потом скорость начала сваливаться, график в вэбе роутера опять похож на шипы спины динозавра, в общем вернулись к истокам этой темы. Журнал чистый !!! Загрузки процессора и памяти увеличились, но не критично чтобы ловить какие-то проблемы. Вэб transmission стал загружаться долго и сам практически не обновляется. Если прям сейчас перезагрузить бы роутер, диск требовал бы проверки (ИМХО, Ванга итд)

Не хочу рвать паузой закачку и перезагружать роутер для чистоты эксперимента ибо в последних версиях постановка торрента на паузу грозит почти всегда ошибками загрузок и прочей прелестью, подожду до завтра, пусть докачается и отнесу этот раздел на проверку. Интересно, раз вся закачка поламалась, будут ли ошибки ))) И результат сканирования обнародую. 

Ошибки находятся с помощью chkdsk, но лучше делать сначала /scan , потому что он на одном из разделов у меня запросил /spotfix.

А так по лайту /f должен найти и поправить, по жести /r ну и /b совсем для курящих.

[krass]

1 час назад, Unfaithful сказал:

А так по лайту /f должен найти и поправить, по жести /r ну и /b совсем для курящих.

о как) а я сразу ввожу эти ключики ( да, понимаю...что  это дольше времени займет)

P.S. Плюсом скоро все команды изучите 

Edited December 7, 2021 by krass

[KYTECHNGAMING]

18 hours ago, Le ecureuil said:

It is hard to say. I had some ideas at first, but judging by what was in the support, there is no reproducibility of the results, even after I disabled some of the components under suspicion. Torrenting is a very "random" thing, today there are fat feasts and lychees, and in an hour there are no more - and the test will end up under suspicion.

The question is actually the following ( @yerebakan already wrote about it): can you confirm that when you remove ntce as a component from the system, everything will be normalized?

Hello there,

As a result of tests consisting of 4-5 steps, maybe 2-3 times, the latest point reached by Keenetic TR R&D is about speed limits.

In the last tests I shared under this topic, the absence of IntelliQos when returning to 3.6.12 and the absence of ntce when I returned to 3.7.0 gave the same result.

Then I re-enabled NTCE and ran some speed-limited tests again. It was a long step-by-step process. Only at the end of the day with the settings I use constantly; ie no speed limit, ntce on, swap on, zram on etc.... i'm back to torrent downloading smoothly.

Spoiler

Torrent is seriously one of the most demanding and resource consuming components on the device. Many of us use it as our main torrent hub. The main purpose of this component, in my opinion; being able to download a file while outside without the need for a computer. I don't think it would be right to use it like a seedbox, since using it as a Seeder for a special tracker will be stuck on the disk reading limit even at high connection speed. From now on, I will use the component more appropriately. Some people in Turkey are trying to use it like Qnap. It is important to remember the main purpose of each tool.

Here's what got me thinking, I took my device out of the box and set it up, I never reset it. During an update, I wondered if there was a pile of accumulation or if at least deleting and reinstalling the components fixed the errors we couldn't see.

There was also a user on a Turkish forum recently who couldn't access DLNA after relocating his TV. Even with router-ip:8200 it could not get results. However, on some devices, he could watch and listen to his broadcasts via DLNA. I suggested uninstalling the component and reinstalling it. Problem solved. Similarly, while I can reach DLNA status, my DLNA connection icon in Windows has been disappearing and coming back from time to time for the last 2-3 versions. I haven't tried deleting and reinstalling the component. Hopefully I will switch to Peak DSL. I couldn't find the opportunity for 2 months.

Best regards to the Keenetic Family,

[keshun]

Таже петрушка с торентом. Даже установил новый диск, на определенных закачках начинается этот светофор. Диск по мнению роутера нормальный, но стоит его размонтировать и воткнуть в ПК, винда сразу предлагает его восстанавливать, ну и если перезагрузить роутер диск будет в красном статусе. Торрент показан что скачан, запустишь проверку файлов, оказывается 30% не докачено и опять по кругу с таким же логом.

[Le ecureuil]

Кто-нибудь может на ext4 проверить? Надо отделить проблемы с ntce и проблемы ФС, иначе мы закопаемся.

[Unfaithful]

1 минуту назад, Le ecureuil сказал:

проблемы с ntce

Компонент ntce не установлен у меня, а вот у yerebakan неоднозначно тестирование окончено, как по мне. 

[bigpu]

8 минут назад, Le ecureuil сказал:

Кто-нибудь может на ext4 проверить?

Без проблем, какой алгоритм проверки?

[Le ecureuil]

53 минуты назад, bigpu сказал:

Без проблем, какой алгоритм проверки?

Взять диск с ext4 и попробовать на последней доступной 3.7 воспроизвести проблемы при скачивании торрента.

[bigpu]

9 минут назад, Le ecureuil сказал:

Взять диск с ext4 и попробовать на последней доступной 3.7 воспроизвести проблемы при скачивании торрента.

Zram, swap  не критично?

[Le ecureuil]

50 минут назад, bigpu сказал:

Zram, swap  не критично?

Это лучше оставить как в предыдущих тестах, чтобы было максимально похоже.

[bigpu]

2 минуты назад, Le ecureuil сказал:

Это лучше оставить как в предыдущих тестах, чтобы было максимально похоже.

Хорошо, сегодня протестирую

[Unfaithful]

Добрался до роутера.

Пауза всех торрентов, отмантирование дисков. Проверка раздела куда качался торрент. С функцией /scan делает запрос на /spotfix (том поврежден). После spotfix, сделал /f , так же были исправлены ошибки.

Затем проверил как успешно я скачал торрент , из 72гб я скачал 0байт. Отличный результат.

 

[bigpu]

6 часов назад, Le ecureuil сказал:

Кто-нибудь может на ext4 проверить? Надо отделить проблемы с ntce и проблемы ФС, иначе мы закопаемся.

протестировал:

EXT4+ZRAM+SWAP - те же яйца только в профиль

EXT4+SWAP - немного лучше, но периодически в приложении и морде роутер недоступен, скорость закачки тоже падает до 500КБ

EXT4+SWAP+ no ntce - все хорошо, стабильные 2-3МБ по закачке, в приложении и морде роутер доступен.

Могу тоже самое протестировать с NTFS

Edited December 8, 2021 by bigpu

[Unfaithful]

1 час назад, bigpu сказал:

стабильные 2-3МБ

Какая скорость провайдера ?

[r777ay]

16 минут назад, Unfaithful сказал:

Какая скорость провайдера ?

Судя из поста ТС, 100Мбит

[Unfaithful]

Тогда 2-3 мб просто можно написать. Слово стабильно тут не подходит, либо раздающих нет, либо проблемы с этими 100 мбит, либо роутер.

если уж проверять фс, то нагрузить бы роутер. 

[bigpu]

11 минуту назад, Unfaithful сказал:

Тогда 2-3 мб просто можно написать. Слово стабильно тут не подходит, либо раздающих нет, либо проблемы с этими 100 мбит, либо роутер.

если уж проверять фс, то нагрузить бы роутер. 

Подходит тут стабильно, так как больше нет просадок до ноля, отвала морды и Трансимшн ремоут. Правда считаете, что я выбрал закачки с малым числом сидов и не проверил их же на ББ? За ограничения скорости закачки торрентов не забыли? Подскажу - Keenetic DSL (KN-2010): 5 Мбайт/с. Глупо ожидать на практике теоретического максимума, при условии что и 4МБ периодически показывает.

Edited December 8, 2021 by bigpu

[r777ay]

Проявляется это "Безумие" в плане HDD error при плотной нагрузке: У себя замечал, ставим (сезон) полностью, ждем "пика" по скорости, начинаем попутно удалять крупную раздачу в месте с файлом/ми, опа приплыли, как-то так.

[r777ay]

@Unfaithful @bigpu Вы походу о разном 🙂 : один про HDD,  другой про CPU.

[bigpu]

Только что, r777ay сказал:

другой про CPU.

да я пока еще помню о чем мой собственный кейс)))

[r777ay]

4 минуты назад, bigpu сказал:

да я пока еще помню о чем мой собственный кейс)))

🙂👍

[Unfaithful]

Я про нагрузку, у меня 2-3 мб качало (накачало аж на 0 байт) уже с повреждениями фс. Конечно с последующим угасанием.

9 минут назад, bigpu сказал:

да я пока еще помню о чем мой собственный кейс)))

Ничего не понятно , но на всякий 🙂👍🏻

[r777ay]

1 минуту назад, Unfaithful сказал:

Я про нагрузку, у меня 2-3 мб качало (накачало аж на 0 байт) уже с повреждениями фс. Конечно с последующим угасанием.

Такая-же хня.

[Le ecureuil]

12 часа назад, bigpu сказал:

протестировал:

EXT4+ZRAM+SWAP - те же яйца только в профиль

EXT4+SWAP - немного лучше, но периодически в приложении и морде роутер недоступен, скорость закачки тоже падает до 500КБ

EXT4+SWAP+ no ntce - все хорошо, стабильные 2-3МБ по закачке, в приложении и морде роутер доступен.

Могу тоже самое протестировать с NTFS

Это на 2010?

[bigpu]

21 минуту назад, Le ecureuil сказал:

Это на 2010?

Именно

 

[Le ecureuil]

9 минут назад, bigpu сказал:

Именно

 

Хорошо. Пока я вижу только рекомендацию отключать zram и включать настоящий swap на этих устройствах при использовании торрента. Остальное все как и ожидалось.

Думаю, в итоге мы сделаем автоотключение zram при монтировании раздела swap.

[bigpu]

2 минуты назад, Le ecureuil сказал:

Хорошо. Пока я вижу только рекомендацию отключать zram и включать настоящий swap на этих устройствах при использовании торрента. Остальное все как и ожидалось.

Думаю, в итоге мы сделаем автоотключение zram при монтировании раздела swap.

а что делать с ntce, с которым опять же, проблематично юзать Трансмишн? Да и хрен с ним, с этим анализатором трафика, на худой конец, что с QoS, который теперь привязан к ntce?