Chia остановился процесс засеивания

Chia остановился процесс засеивания

Предисловие:

В телеграмм канале Chia Blockchain Russia, где мы активно обсуждаем chia-фермерство, часто задают вопросы и обращаятся с рядом ошибок:
1. Какие участки лучше засеивать
2. Почему у меня так долго засеивается участок
3. Почему у меня не двигается засеивание
и многие другие.
Все они появляются вследствие неправильного засеивания!
Как правильно и почему — смотрите ниже.

Немного теории:

Как не посмотри, а ажиотаж почему то охватил не всю компьютерную сферу (и это очень странно). Да сам фарминг не требовательный, но только фарминг!
Засеивание участков, которые потом используются при фарминге очень даже требовательны. Объясню в 2 словах и распишу по пунктам:
Самый маленький плот К32 требует:

1. 4 Гб ОЗУ (в мануале 3770 Мб), но на 100% не разу не видел задейстивованные.
2. 360 Гб для временных фалов на ssd (в мануале требуется 239Гб), но по факту (и тут ниже я Вам скриншот пруф приложу) в разные стадии плотинга требуется разное количество временного места и пиковый размер 360Гб!
3. 1 поток от ядра (в мануале рекомендуется 2), но по факту чем больше потоков, тем эффективнее плотится
4. частота процессора. Да товарищи, именно частота процессора, чем выше частота, тем бодрее плотинг!

Для К33:

1. 8 Гб ОЗУ (в мануале 7400 Мб)
2. 700 Гб для временных фалов на ssd (в мануале требуется 521Гб), но по факту в разные стадии плотинга требуется разное количество временного места и пиковый размер 700Гб.
3. и 4. пункты везде одинаковые

Итак, делаем выводы:

• Важно ядро (от него зависит максимальное количество участков, которые мы можем сеять одновременно, и частота влияет на скорость засева)
• Оперативная память (ограничивает количество паралельных засевов)
• Объем SSD (от этого зависит какие плоты вы сможете сеять и сколько

Конфигурация ПК (минималка):

Вот вам живой пример для плотинга
Домашний ПК:
1. i5 6 ядер (12 потоков)
2. 8 Гб ОЗУ
3. SSD SATA 500Гб (НЕ с операционной системой!)
4. HDD 1тб

Итак, смотрим и оцениваем данные:
1. 12 потоков (значит обсалютный максимум 12 паралельных засевов, но ведь нужно еще резрв оставить под работу ОС, скажем 2 потоков хватит, итого осталось 10 паралельных засевов)
2. 8 Гб ОЗУ (значит 2 паралельных сазева К32 либо 1 засев К33)
3. 500Гб SSD (значит хватает всего на 1 засев К32)
4. HDD 1Тб (хватит на 9 участков к32 либо 4 К33)
Проссумировали результаты: вуаля, понимаем что можем сеять всего 1 участок К32, а следовательно выставляем настройки как на скриншоте ниже!

Источник

CHIA -Технические настройки, наблюдения и возможные пути оптимизации.

CHIA. Технические настройки, наблюдения и возможные пути оптимизации.

Дано
Processor: Intel Pentium G4560 3.5GHz (2c/4t)
Matherboard: ASUS ROG STRIX Z270F GAMING
RAM: 2x8GB Crucial Ballistix (XMP 2400 MHz)
SSD под винду: WD Green 120GB (2,5″ SATA)
NVMe под плоттинг: Silicon Power 1000GB (U.2)
HDD (в кол-ве N штук) под фарминг: Toshiba X300 8TB (3,5″ SATA)
Файл подкачки: 16GB

Кратко про свои эксперименты
Как видно, характеристики не самые впечатляющие. Собиралось все из того, что было + покупалось новое в самом начале хайпа монеты. После установки мастер-ноды была долгая синхронизация (о ней чуть дальше) + производилась проверка жизнеспособности системы. Естественно, начиналось все с одного плота и без каких-либо доп. настроек. Проверялось потребление памяти, ресурсов и энергопотребления. И вот спустя пару десятков проверок и несколько десятков часов исследований нарисовалась следующая картина. Ниже приведена выборка разного рода попыток для наглядности (указывается средний Total time для одного плота).

Сделанные выводы
1) Как видно, увеличение кол-во потоков даже на 4-х поточном (но 2-х ядерном) стареньком процессоре дает выигрыш при засеивании. В моем случае почти в 10%, но при этом процессор загружен на 99% всегда. Если бы это были честные 4 ядра, то выигрыш был бы больше. Но тут есть нюанс — если проц всегда загружен на 99%, то он потом может «захлебнуться» и завершить все процессы chia (и дочерние тоже), что чревато простоями и пересеиванием. У меня такое случалось раз в 3 дня где-то. Возможно причина была в старой версии блокчейна (сейчас уже перешел на 1.1.4) или еще в чем-то, но если проц загружен не на максималку, то проблем не наблюдалось. Тут уж каждый сам для себя решает.
2) Уменьшение бакетов (BUCKETS) в два раза практически не дает какого-либо выигрыша в скорости, но (. ) уменьшает кол-во операций перезаписи на вашем SSD/NVMe в 2 раза (более подробно в пункте «Немного про опыт других фермеров»)! Т.е. при уменьшении бакетов ваш SSD/NVMe будет жить дольше (хотя бы в первой фазе), но и объема памяти при этом нужно больше. В теории можно подобрать кол-во бакетов ровно столько, сколько памяти RAM (или около того), дабы сократить чрезмерную перезапись. При этом можно сделать адекватный файл подкачки, чтобы Windows жила нормальной жизни (за владельцев Mac/Linux ничего не могу сказать), но это сократит ресурс SSD под винду.
3) Скоростная память (с низкими задержками) очень важна и особенно важна, когда кол-во бакетов меньше стандартных 128. В первой фазе все вычисления производятся в оперативной памяти. Тут довольно простая арифметика. Чем выше скорость, тем больше данных можно записать в память или считать из памяти за единицу времени. Чем ниже тайминги (задержки), тем меньше процессору нужно времени, чтобы обращаться к памяти.
4) Увеличение частоты процессора дает прирост. Правда в моем случае он весьма скромный — всего лишь около 2%-3%. Возможно это совокупоность разгона частоты процессора и памяти, ну или же просто стабильная погрешность (нет) после переразгрузки рига. Проверить на другом железе, к сожалению, нет возможности. Скорее всего именно поэтому у многих обзорщиков на современных ПК (вроде AMD Ryzen 5900x) не удается получить хорошей скорости плоттинга при увеличении потоков, т.к. при увеличении потоков тот же Ryzen, например, сбрасывает частоты кардинально, дабы уложиться в потребление и теплопакет. Плюс никто из обзощиков не указывает при какой частоте и при каких таймингах работает у них память. Что ж, можно залочить на определенном урове разгон процессора, сделать адекватное охлаждение, увеличить допустимое потребление процессором, купить шустрее память и т.д.
5) Ну и естественно пункты 3 и 4 не будут играть большой роли (именно в многопоточном плоттинге), если ваш SSD/NVMe также не вытягивает по скорости. В моей конфигурации какой-нибудь диск с громким названием вроде EVO 980 Pro Mega Super FX будет просто бесполезен, зато он точно не будет узким местом.
6) Внимательно относитесь к единицам измерения chia. Т.е. наши привычные KB, MB и GB — это не то же самое, что и KiB, MiB и GiB. Например, 3250MiB = 3407.872MB, а 6500MiB = 6815.744MB. В GUI-программе chia мы указываем именно MiB! Вот тут есть калькулятор: https://www.gbmb.org/mib-to-mb
7) Ну и тут все как с майнингом на видеокартах. Сначала долго подбираешь оптимальные комплектующие и оптимальные настройки, а потом это все работает на тебя. Единственный момент — гораздо больше узлов для настройки.

Немного про опыт других фермеров
Вот тут https://thechiafarmer.com/2021/04/21/optimizing-plotters-in-windows один фермер рассказывает, что он оптимизировал свою систему (Ryzen 5900x 12c/24t, 32GB RAM . MHz, 6x2TB NVMe 3200MBs/2900MBs) таким образом, что она засеивает 12 плотов каждые 8 часов. В двух словах: на такой системе он засеивает параллельно 12 участков k=32 в 2 потока при 128 бакетах, при этом выделяет каждому участку всего (. ) 2400MB (2288.82MiB) памяти. И все ок. Тут есть одна хитрость: если не хватает памяти для US (uniform sort), то выполняется QS (quick sort). QS выполняется дольше, чем US, поэтому некоторые операции (и фазы в итоге) могут длиться несколько дольше. Если же памяти не хватает и для QS, то плоттить вообще не получится! У этого фермера с таким подходом все выполняется с QS, но дольше (хотя за счет хорошего проца и памяти разница не сильно велика). В теории он для QS мог оставить только 1625MiB (в реальности нужно где-то 1700MiB-1750MiB), т.к. максимальное значение US при 128 бакетах ровно 3250MiB, а QS, в свою очередь, ровно 1625MiB (ровно в 2 раза меньше). Т.е. у каждого из нас есть еще пространство для оптимизаций. И небольшое отступление — иногда процесс chia сам выполняет принудительно QS (видимо по свом каким-то алгоритмам), но этого не стоит пугаться, т.к. потребление памяти в этот момент обычно минимальное. И да — выводы про бакеты были взяты у этого фермера По крайней мере, он заявлял, что при 256 бакетах нагрузка операций чтения/записи на диски возрастает значительно ¯\_(ツ)_/¯
Важный момент: если вы в chia программе указали 3250MiB (например, для плоттинга при 128 бакетах), то реально выделено будет чуть меньше (видимо часть памяти резервируется еще под что-то) и сортировка все равно будет вывалиться в QS

Немного про отложенное засеивание
Можно поставить на поток (например, 50 плотов подряд) даже на малых объемах SSD и эффективность будет гораздо выше. Самое главное — это определить длину первой фазы (т.к. именно она работает в многопотоке и потребляет больше всего процессорного времени и памяти, а остальное время уходит на работу с дисками). Т.е. берем обычное засеивание одного плота в 2 потока (в идеале смотрим еще и большее кол-во потоков), прогоняем цикл и смотрим логи. Например, в моем случае для 2 потоков первая фаза (Time for phase 1) длится около 15700 секунд (261 минут). Весь же процесс занимает (Total time) около 32800 секунд (547 минут). Т.е. имея в своем распоряжении 1 TB можно спокойно ставить засеивание 30 плотов с отложенным запуском на 265 минут (т.е. лучше накинуть 3-5 минут сверху от завершения первой фазы) и засеивание будет происходит равномерно, как на конвеере. Не забываем про QS и US, иначе время может быть больше. В Windows PowerShell, по всей видимости, можно тоже смело ставить отложенное засеивание.
Самым же эффективным лично у меня оказалось засеивание 1 плота в 4 потока при 64 бакетах и выделением 6750 MiB (хотя нужно было указать чуть больше, чтобы сортировка не вывалилась в QS). Но, к сожалению, отложено плоттить таким образом не получится, т.к. первая фаза занимает 160 минут, а общее время выполнения 375 минут + не остается провессорного пространства… 1 плот в 3 потока тоже ок (173 минуты под первую фазу и общее время 389 минут) + 1 поток всегда свободен, но и тут плоттить не получится нормально. Т.е. у меня можно нормально отложено сеять только 1 плот в 2 потока (сейчас как раз проверяю этот момент).

Немного про максимальное засеивание HDD
Вот тут https://plot-plan.chia.foxypool.io есть калькулятор максимального засеивания. Т.е. указываете свой реальный объем диска и он показывает, как эффективно (т.е. каким кол-вом k32, k33 и k34) с максимально занятым местом можно его засеять. В моем случае HDD носит гордое значение 8TB, но реально в Windows доступно 7.27TB (ну знаете все эти 1TB=1000GB, хотя реально 1TB=1024GB), поэтому следует указать реальное значение объема. Соответственно, программка предлагает мне засеять 40*k32 и 13*k33 с эффективностью использования дискового пространства в 99.98% (. ) или же 66*k32 с эффективностью 98.81% (тоже неплохо).

Немного про синхронизацию
Когда только запустил мастер-ноду синхронизация шла около суток (+/-). Естественно, я задался вопросом, а почему так. Изначально грешил на WI-FI свисток, по которому подключен риг к сети, но все оказалось одновременно и просто, и сложно. Как оказалось, необходимо адекватное кол-во подключений к нодам пиров (peers), интродюсеров (introducers) и синкноды (syncnodes). Итак, что нужно делать, если запускаешь ноду в первый раз (да и вообще после перезапуска ПК или самой ноды тоже полезно)? Первое — это необходимо добавить хотя бы одну ноду интродюсера. Второе — добавить синкноду (можно даже первым пунктом). Третье — это вручную добавить публичные и актуальные ноды пиров. Понятное дело, что главный процесс сам перебирает ноды и пытается к ним подключиться, но делает это очень долго. Поэтому лучше слегка помочь. В графической программе CHIA жмем кнопку «CONNECT TO OTHER PEERS» на вкладке «FULL NODE» (самая верхняя вкладка) и добавляем ручками по списку. Лично я сразу добавил европейскую ноду интродюсера, синкноду и пяток пиров.
Список нод интродюсеров тут: https://github.com/Chia-Network/chi…sues—Port-8444#speed-up-connecting-to-nodes
Список нод для синхронизации: https://github.com/Chia-Network/chia-blockchain/issues/3732
Список актуальных нод пиров тут (обновляется каждый час): https://chia.keva.app
Адрес синкноды тут (возможно есть и другие адреса): https://chiafactory.com/guides/cant-sync-chia-node
Важный момент: иногда добавление пиров вручную происходит не с первого и даже не со второго раза, поэтому лучше сделать несколько попыток подключения к каждому пиру.

Установка часового пояса
Если сделано все возможное, но синхронизация не идет, то необходимо проверить корректно ли установлен ваш часовой пояс и время. Если некорректно, то выставлен как нужно и перезапускаем главный процесс chia.

Открытие порта 8444
Важным пунктом является открытие порта 8444. Изначально CHIA — это распределенная сеть (ака торрент). Общественные ноды, к которым вы подключаетесь, это ноды таких же работяг, как и вы. В свою очередь вы, как участник, тоже должны раздать свою ноду коллегам по цеху и тогда все будет ок. В оригинальном описании сказано, что это якобы поможет быстрее устанавливать соединения пиров с вами, а вы свою очередь быстрее присоединитесь как к самим пирам, так и к пирам пиров и т.д. (вот такой вот каламбур). Подробнее тут: https://github.com/Chia-Network/chia-blockchain/wiki/Resolving-Sync-Issues—Port-8444
Так что не забудьте открыть доступ на уровне роутера. У меня TP-Link и к нему есть куча инструкций и понятных описаний. Если же на уровне роутера все открыто, но доступа нет, то смело звоните/пишите провайдеру. Если провайдер не может открыть нужный порт, то можно попытаться воспользоваться услугами другого провайдера. У моего провайдера порт закрыт, а чтобы открыть нужен выделенный IP-адрес, который стоит сколько-то денег в месяц
Проверить доступность порта можно тут https://portchecker.co и тут https://2ip.ru/check-port/?port=8444

Если понравился пост и ждешь дальнейших исследований, то можно и отблагодарить:
XCH: xch1rrctcts0njzd6unpmtc5pe27k58y36w5pz45lldk0vyy0xle2zvst4jwly
ETH: 0x41e4623382bd23ef92c0a7f00745d9b7d1838613
ETC: 0x25f4b6298b6aabdf24d584b572bdb21d75181c85
BTC: 1JpkuqXsE9keXGPW8CoCdXvzCUp45UBzS5
Буду очень признателен!

Источник

Майнинг Chia — учимся быстро засевать или 3 способа плотинга

В сети наблюдается лютый хайп нового метода майнинга. Разберемся как оптимально начать майнинг на жестких дисках и стоит ли?

Прежде всего замечу, что существует ТРИ (!) принципиальных способа т.н. засева винчестеров участками, которые в перспективе якобы могут принести доход.

Об этих способах засева или плотинга HDD подробнее чуть ниже.

Чем больше участков, каждый из которых занимает 108Gb — тем выше получить CHIA coin на свой баланс. На 1-е мая 2021-го один участок дает приблизительное время выигрыша 6 лет. Таким образом, чтобы что-то получилось в обозримое время нужно иметь многие сотни участков, т.е. хотя бы 50-100 Тб засеянных посевных площадей.

Не ГИГАБАЙТ — а ТЕРАБАЙТ. То есть 7-8 винчестеров по 12Тб, например. Причем дальше все хуже, т.к. объем сети растет невероятными темпами!

Как и цены на накопители.

Все хомяки разом кинулись в магазины раскупать жесткие диски большого объема, в результате чего их просто не осталось ни по какой цене, а производители уже накинули цену вдвое. И это еще не предел! Я не удивлюсь, если скоро 8Тб HDD будет стоить свыше 1000$. Или 2000$…

Прикупив вожделенный винт на несколько терабайт незадачливый майнер прибежал домой в предвкушении наживы.

НО НЕ ТУТ ТО БЫЛО.

Оказывается, предварительно объем накопителя надо засеять участками и 1 такой цикл на среднестатистическом компьютере длится 2 дня.

Теперь считаем… Засеваем 0.1Тб за 2 дня, или 1Тб за 20 дней, а 10Тб за 200 дней. Двести дней, Карл! Это только чтобы начать майнить с одного HDD.

Вытрусив из карманом последние бабки все ринулись скупать быстрые твердотельные накопители SSD/nVME/PCI-E, ведь на твердотельниках процесс засева идет гораздо быстрее.

Во-первых, требуется 340Гб временных файлов на диске, т.е. SSD 256Гб не очень подходят. Следует брать 1Тб.

Во-вторых, для каждого засева требуется минимум 2 потока CPU и 4Гб ОЗУ, так что много одновременно не получится.

ПЕРВОЕ ВПЕЧАТЛЕНИЕ

Немного поигравшись наступает шок. Помимо серьезной технической подготовки требуется реально мощный компьютер, много оперативы, куча портов и танцы с бубном вокруг процесса засевания накопителей. Так как же быстро засеять участок на HDD плотом CHIA ??

Мало того — домашние SSD попросту не рассчитаны на такую нагрузку и начинают дымить, а заявленный ресурс работы исчерпывается уже просто через пару недель.

дорогое получается удовольствие, тем более что сервисы станут отказывает в ремонте накопителей с исчерпанным ресурсом записи )))

ТРИ МЕТОДА ПОСЕВА ПЛОТОВ CHIA

Метод №1

Берем ёмкий SSD, например, на 1Тб. Ставим 3 потока со смещением 30 минут, чтобы они одновременно на пике не переполнили 1Тб своими 3*340Гб данными и сливаем готовый участок на ёмкий HDD. Процесс требует:

CPU RYZEN 5/ Core i7-6700/XEON 2630v2
32Gb DDR3/4 многоканально
SSD nVME 1Tb со скоростью около 2Гб/с
HDD 4Tb или выше.

Ожидаемая скорость составит около 8-10ч. Таким образом вы сможете сеять около 8 участков в сутки.

Метод №2

Не мудрствуя лукаво мы просто подключаем 10 HDD к нашему компу и одновременно засеваем на них же самих. Долго, зато сразу много. Но есть одно но…

2-3 потока и 4-6Гб ОЗУ на один процесс умножаем на 10, и получаем требование в 24 потока и 64Гб минимум.

То есть подойдет процессор минимум RYZEN 9 3900 и 64Гб или же хотя бы Core i9-9900K с натяжкой.

Счастливые обладатели 6-ядерного хлама идут гулять.

Таким образом можно сеять 10+ участков CHIA в сутки.

Метод №3

Гораздо более счастливые обладатели мощных компьютеров с объемом оперативы свыше 256Гб могут радикально решить вопрос.

Для этого следует разметит RAM-disk прямо в объеме оперативной памяти используя, например, программу ImDisk.

Скорость такого диска получается фантастической и на компьютере с восьмиканальной DDR3 ECC 1866MHz PC3L скорость засева составила 3.5ч

Причем, если позволяет объем, то можно это делать параллельно.

Через RAM-диск можно засевать 8-20 участков в сутки, при этом не насилуя ни винчестеры, ни тем более SSD.

ВЫВОДЫ

• • майнинг на HDD может быть выгоден, а может и не быть )))
  • минимальная рентабельность составит около 50$ за CHIA для опытных
  • не следует влезать с объемом менее десятков Tb
  • имеет смысл начинать при скорости засева хотя бы 20-30 раз в сутки
  • существует 3 принципиальных метода засева (плотинга) винчестеров: через SSD, параллельно на HDD и в объеме оперативной памяти
  • засев плотов через бытовые SSD — самый неэффективный и дорогой метод
  • Для эффективного плотинга требуется мощный компьютер с большим количеством современных портов (SATA/nVME/PCI-E), десятки быстрых ядер и сотни Гб оперативки.

ПОДПИСЫВАЙТЕСЬ НА НАШ КАНАЛ В youtube, ЧТОБЫ БЫТЬ В КУРСЕ.

Источник