от Mateev » 17 Фев 2018, 12:51
Ами аз плотвах 400TB около месец и половина на повече от 40 компютъра. Ако си купил SMR дискове, а това вероятно е така, то тогава нищо не може да се направи с тяхната скорост на запис. Те просто си записват с 10-12 MB/с и това е. Ако при тебе е само с 2-5 MB/s, значи нещо не си направил верните настройки.
В общия случай трябва да търсиш баланс в даденостите на твоя хардуер. Ако процесорите ти генерират много на брой нонцета, но дисковете не смогват да ги запишат - тогава трябва да увеличиш броя на паралелно плотвани дискове. Трябва обаче да има достатъчно RAM за всеки един плотващ процес - например по 2, по 4 или дори по 6-8GB.
Има и друга алтернатива:
1. Купи си по един хубав бърз диск на всеки един компютър и плотвай на него. Например SSD 1TB или в най-лошия случай VMR диск със 7200 RPM и голям вътрешен кеш.
2. Плотвай на по-малки по размер файлове и когато се плотнат, копирай ги върху бавните дискове.
3. Това е единствения възможен начин върху бавните дискове да се записва с максимално възможната за тяхната технология скорост.
Аз имам 2 сървъра с по 64 ядра и с RAID масиви от високоскоростни SAS дискове с по 15 000 RPM. Плотването при тях вървеше с огромна скорост - с по 36 000 Nonce-та в секунда. Дисковете успяваха да поемат тази скорост на плотване. На единия компютър имаше и 1TB SSD, който също успяваше да поема скороста на Nonce-тата. Плотвах на по-малки по размер файлове (с по 1,2 или 5 милиона Nonce-та във файл). След това през мрежата (1 Gb) копирах файловете по други компютри. Паралелно вървеше както плотването, така и копирането на вече плотнатите файлове. Това беше начина, по който си плотнах част от дисковете. Другата част я плотнах като натоварих около 50 компютъра, всеки от които плотваше съществуващи локални дискове от по-бързите. И въпреки цялата тази организация плотвах повече от 1 месец.
Сега като се замисля, за твоя случай може би ще е най-добре да си купиш по един еднотерабайтов SSD на компютър, да плотваш на него и след това да прехвърляш файловете по бавните дискове. За да не висиш денонощно пред компютъра, трябва да автоматизираш процеса с BAT файл - плотване на по-малък файл, местене на друг диск, плотване, местене, плотване, местене и т.н. докато се напълнят всички бавни дискове, които предварително трябва да си ги монтирал на компютъра и да си ги форматирал с 64k клъстер.
Последна промяна
Mateev на 18 Фев 2018, 00:34, променена общо 2 пъти