[IlyaAS1]

Привет, в связи с крайне медленным автоимпортом рук в ХМ2 думаю менять систему. Для этого хотелось бы узнать ваши показатели автоимпорта рук.
Автоимпорт критичен так как приходит онлайн майнинг, который необходим как воздух для успешного тейбл селекта.

У меня автоимпорт: в среднем 1 рука/сек

Скрытый текст:

ручной импорт: около 200 рук/сек

Скрытый текст:

О системе вкратце
WIn8.1
Проц DualCore AMD Athlon 64 X2, 2300 MHz (11.5 x 200) 4400+
Память 4 ГБ DDR2-800 DDR2 SDRAM
Накопитель SSD Silicone Power 60GB

Поделитесь пожалуйста вашей скорость ручного и автоматического импорта и какая у вас система. Для того что бы узнать скорость автоимпорта нужно зайти во вкладку Hand importing затем Import history и напротив import source Auto, по аналогии ручной импорт - напротив import source File

В целом на сайте ХМ2 и Трекера пишут что для хорошей производительности необходимо как минимум intel core i5 лучше i7 и от 8 гб оперативки, так же SSD накопитель. Мне необходимо ~40 рук сек (примерно пик) автоимпорта и тут вопрос, будет ли достаточно решения проблемы путем приобретения i5 средней цены или же будет достаточно начального i7 или же без топового решения тут не обойтись, хотелось бы конечно узнать ответ так как цена железа отличается в разы...

[Kotofeyich]

Я думаю, что опрос тебе не очень поможет. Между обычным импортом и автоимпортом есть существенная разница. Поэтому, собственно, и скорость у них отличается на порядки. Автоимпорт происходит циклами, через каждые 5 секунд происходит обработка файлов, записанных в папки румов за это время. Насколько я помню, на этот 5секундный цикл установлено программное ограничение в размере 100 раздач. С учётом паузы между циклами и этим ограничением, ты и близко к 40 в секунду не сможешь подобраться, как бы ни апгрейдил систему.

[IlyaAS1]

Сообщение от Kotofeyich

Я думаю, что опрос тебе не очень поможет. Между обычным импортом и автоимпортом есть существенная разница. Поэтому, собственно, и скорость у них отличается на порядки. Автоимпорт происходит циклами, через каждые 5 секунд происходит обработка файлов, записанных в папки румов за это время. Насколько я помню, на этот 5секундный цикл установлено программное ограничение в размере 100 раздач. С учётом паузы между циклами и этим ограничением, ты и близко к 40 в секунду не сможешь подобраться, как бы ни апгрейдил систему.

Не уверен что это действительно так. Разговаривал с человеком который занимается майнингом, у него автоимпорт около 200 рук/сек, по утверждению топовое железо, какое не уточнялось.

[Kotofeyich]

Ну если есть уверенность, что топовое железо сможет повысить имеющуюся скорость в 40 раз и преодолеет программное ограничение, то я не буду спорить. Я просто не очень разбираюсь в тонкостях майнинга. Надеюсь, кто-то более сведущий в этих вопросах сможет ответить более компетентно.

[Sauron]

у я можно сказать эксперд по этой части...прочел тонну мануалов.

в начале августа как раз покупал себе железо.


вот мой конфиг, вышел в 350$...хороший бюджетный вариант.

AMD Athlon II X4 750K 3.4GHz (Turbo up to 4.0GHz) 4Mb 2xDDR3-1866 FM2 OEM
Gigabyte Socket-FM2 GA-F2A75M-D3H A75 4xDDR3-1866 2xPCI-E(16+4) HDMI/DVI/DSub 8ch 6xSATA3 RAID 4xUSB3 GLAN mATX
Память DIMM DDR3 4096MBx2 PC10666 1333MHz Kingston [KVR1333D3N9K2/8G//KVR13N9S8K2/8G] Retail
SSD 2.5" SATA-3 120Gb OCZ Vertex 3.20 [VTX3-25SAT3-120G.20] SF-2281 (R550/W520MB/s) SyncNAND
DEEPCOOL GAMMAXX 300 (Al+Cu, 3 трубки, 900-1600 rpm, 18-21 dB(A)) PWM Socket LGA775/1155/1156/1366 K8/AM2/AM2+/AM3/FM1

[Sauron]

вот только что майнил за прошлый день, средняя скорость 260-270.
раньше скорость была около 400 рук в сек, сейчас просто база за 3 месяца.
майнинг за меся хавает за 6-8 часов, в сумме 16 часов с нотсами ноуткэдди.



проц привел в качестве примера. у него стандартная частота 3,4ггц, 4 ядра.
большую часть времени работает на частоте 1,3ггц, сам сбрасывает по задачам.
во время майнинга поднимает до 3,7 и то загрузка всего на 40%.
максимально может до 4ггц поднимать или 4,5ггц в разгоне.

[Sauron]

сейчас делает нотсы, пиковая загрузка проца 89%. и то до 4ггц не поднимает частоту, работает на 3,7.
я не помню как это функция называется, типо энергосбережения. она у всех новых цпу есть.

[Sauron]

Сообщение от IlyaAS1

В целом на сайте ХМ2 и Трекера пишут что для хорошей производительности необходимо как минимум intel core i5 лучше i7 и от 8 гб оперативки, так же SSD накопитель. Мне необходимо ~40 рук сек (примерно пик) автоимпорта и тут вопрос, будет ли достаточно решения проблемы путем приобретения i5 средней цены или же будет достаточно начального i7 или же без топового решения тут не обойтись, хотелось бы конечно узнать ответ так как цена железа отличается в разы...

но это не суть, вот самое важное.

работа с хм2 и постгре..это работа в базой Data Mining, Data Warehousing.
то есть основная работа, складирование инфы и обработка через отчеты.

для этих целей железо подбирается по таким приоритетам:
а) быстрая дисковая подсистема: ssd или рейд0 из обычных.
б) оперативная память, 8-16гб достаточно.
в) проц, многоядерный и как минимум 4 потока.

проц на самом последнем месте, он по факту нагружается только ноуткэдди на практике.
и отчетами в хм2 что тоже важно конечно. для этих целей сгодится любой 4ядерник или core i3.
можешь купить core i5 или 6 ядерник атлон типо fx6100. тогда вообще будет сказка.

но все-равно, самое главное это быстрый жесктий. то есть SSD!

я лично покупал систему с целью обработки алиасов по 1-2 миллиона рук.
каждый день обрабатываю отчетами, выборки по 5-20 регов в алиасе разными фильтрами.

кароче core i5 тебе хватит с избытком. я на картинках как раз показал как загружается проц за 70$.
даже его мощи хватает, он даже не на полную загружается.
но повторюсь, когда делаешь сложные отчеты из 1кк рук, мощный проц с ссд будут формировать статы и графики секунд за 5-20.
на прошлом двуядернике и обычном сата2 сигейте, я ждал простой график на 700к рук полторы минуты.

примерно так.
в целом, материнка+ссд+память+проц выйдет баксов в 500$ и все будет летать.

[Sauron]

у тебя же ссд сейчас, это уже хорошо. но в винде его настраивать надо.
отключать индексацию, гибернацию, форматирование и тд..почитай в инете.

если будешь ставить 8гб, тебе нужна будет 64 битная винда и такой же постгре.
у меня версия постгре x64 9.02 для вин7. это нужно чтобы все 8 гб система и посгре видели.
по факту больше 4гб хм2 не отжимал...хотя это можно сделать через тонкий конфиг.

сейчас ты можешь сделать оптимизацию для базы:
зайти в pgadmin3 и сделать вакуум как на картинке.

Скрытый текст:

еще зайди в папку с базой постгре и открой файл postgresql.conf блокнотом.
там примерно по середине будет logging_collector = on.
исправь на off, как на картинке и сохрани.

Скрытый текст:

потом зайди в папку pg_log в папке дата и все удали. перезагрузи комп.
папку pg_xlog не всдумай трогать!
чутка поможет. только не спрашивай что это такое$)

[IlyaAS1]

Сообщение от Sauron

у тебя же ссд сейчас, это уже хорошо. но в винде его настраивать надо.
отключать индексацию, гибернацию, форматирование и тд..почитай в инете.

если будешь ставить 8гб, тебе нужна будет 64 битная винда и такой же постгре.
у меня версия постгре x64 9.02 для вин7. это нужно чтобы все 8 гб система и посгре видели.
по факту больше 4гб хм2 не отжимал...хотя это можно сделать через тонкий конфиг.

сейчас ты можешь сделать оптимизацию для базы:
зайти в pgadmin3 и сделать вакуум как на картинке.

Скрытый текст:

еще зайди в папку с базой постгре и открой файл postgresql.conf блокнотом.
там примерно по середине будет logging_collector = on.
исправь на off, как на картинке и сохрани.

Скрытый текст:

потом зайди в папку pg_log в папке дата и все удали. перезагрузи комп.
папку pg_xlog не всдумай трогать!
чутка поможет. только не спрашивай что это такое$)

Спасибо, буду делать по твоему совету. Но для меня так же очень актуален вопрос по поводу скорости автоимпорта. Не мог бы ты протестить на своем компе? Для этого нужно сделать отдельную папку и вкинуть к примеру туда 30-60 файлов с майнингом и соотвественно поставить ее на автоимпорт. Как посмотреть скорость автоимпорта написал в первом посте. Буду очень благодарен