Режется скорость Rsync

[CH1PSET]

Здравствуйте, подскажите пожалуйста, борюсь уже пару недель с проблемой падания скорости при синхронизации qnap и freenas через службу Rsync. Проблема заключается в том, что при старте синхронизации через некоторое время (от 1 до 3 мин) падает скорость с 80МБ/с до 10. Причем ставил и Free4Nas и FreeNAS симптомы одинаковые. Заметил, что когда скорость высокая, процессор на FreeNAS работает на 100%, как только падает на 10%, сразу падает скорость. Не пойму что на это влияет. При прямом копировании на шару с Qnap на FreeNas скорость сохраняется неограниченно. Значит дело в службе. Сервером является FreeNas. Может кто сталкивался с подобным?

 

[mav@]

В какую сторону идет копирование? Не может ли быть что источник просто упирается в сики дисков на куче мелкий файлов?

 

[CH1PSET]

В качестве сервера FreeNAS. С qnap идет копирование. В качестве копирования выбраны большие образы бекапов, мелких файлов нет.

 

[Mihalich]

Оперативки на фринасе достаточно? И что за проц?
И что с дисковой подсистемой на фринасе?

 

[CH1PSET]

Платформа Intel(R) Core(TM)2 CPU 6320 @ 1.86GHz
Память 4062MB

4 жестких диска самсунг по 1Тб в софтовом рейде 0.

 

[Mihalich]

8 GB of RAM is the absolute minimum requirement.

Полагаю дело в этом. Но тут и проц так себе.
Я правильно понял, что у вас 4 диска в страйпе без резервирования? И они подключены напрямую в мат.плату?

 

[CH1PSET]

Сомневаюсь, что дело в этом, что на Free4Nas, что тут используется макс 30% от всего объема. + версия у меня 9, там на 1тб реком. по 1гб опер.

 

[Mihalich]

Если используется 30%, то что-то работает не правильно.
Ладно, переведу специально вас:

8 ГБ ОЗУ-это абсолютный минимум.

+ 1 ГБ на каждый терабайт

 

[mav@]

При объеме памяти менее 4GB ZFS отключает speculative prefetch, что может серьезно повлиять на скорость последовательных операций. Попробуй проверить vfs.zfs.prefetch_disable и если оно влючилось -- выключить через loader tunable.

 

[CH1PSET]

Если используется 30%, то что-то работает не правильно.
Ладно, переведу специально вас:

+ 1 ГБ на каждый терабайт

Я все же не считаю, что дело в оперативной памяти, выбрал именно 4Гб по совету товарища, у которого стоит на работе тот же Free4Nas и также с 4 гб, проблем со скоростью у него нет.

При объеме памяти менее 4GB ZFS отключает speculative prefetch, что может серьезно повлиять на скорость последовательных операций. Попробуй проверить vfs.zfs.prefetch_disable и если оно влючилось -- выключить через loader tunable.

Выключил, не помогло.. Сначала после перезагрузки 15 мин копировалось нормально, подумал что сработало, но сейчас повторно запустил репликацию, и опять через 30 сек упала до 10мб. Снова перезагрузил, запустил, опять упала через 30 сек. Через 10 мин снова запустил, уже 5 мин стабильно держит скорость.. Что так влияет понять не могу. Еще заметил, что
При нормальной скорости
1)Загрузка процессора 60-80%
2)Оперативная память 480 Мб
3)Скорость отдачи от Free4Nas 3мб

Как скорость падает, все показатели тоже падают..

Приложил скрины с qnap в двух состояниях.

Code:

 

[Mihalich]

Ну если у вас одна и та же проблема сохраняется в разных ОС, то по моему очевидно, что дело в железе или вообще в qnap. Попробуйте сделать репликацию со своего компа на freenas и с qnap на свой комп.
Using advanced features like software RAID 5 and enabling lots of functions may need more RAM (4GB or greater). - а у вас, на секундочку, страйп из 4 дисков, с чего вы решили, что ваша система сможет на таких скоростях работать?
For using ZFS, we do recommend a absolute minimum of 8GB RAM. - это с рекомендаций к NAS4Free.

 

[CH1PSET]

Поставил еще 8 Гб оперативки.. ситуация не изменилась.

 

[Mihalich]

Попробуйте сделать репликацию со своего компа на freenas и с qnap на свой комп.

И желательно воткнуться напрямую в фринас, что бы исключить локалку из цепочки и ещё очень редко, но бывает сетевуху штормит, стоит попробовать с другой сетевой картой.
А prefetch сейчас в каком состоянии?
И какая у вас версия фринаса всё-таки?