Версія даної теми для друку

Натисніть сюди для перегляду даної теми у оригінальному форматі

Розподілені обчислення в Україні _ Majestic12 _ Настройка ноды

Автор: Rilian Jan 29 2012, 22:51

В этом топике я расскажу как оптимально настроить ноду.

откиньтесь на спинку стула

Автор: nikelong Jan 29 2012, 22:57

Откатился. Шо дальше?

Автор: Rilian Jan 29 2012, 22:58

подожди пока ман скопируется на твой монитор smile.gif

Автор: Rilian Jan 29 2012, 23:14

буду писать тут

http://distributed.org.ua/wiki/ru:projects_majestic-12_node_setup

Автор: SASA_UA Feb 2 2012, 10:20

Можно для новичка объяснить следующее? HDD 15GB RAM 500MB Bandwidth limits 50/50 and sliders 100% (so it just use all available connection) 300 workers 75 open buckets 0 deepcrawl, 50 priority lower priority to archiving Archiving delay at 1

Автор: Rilian Feb 2 2012, 15:31

QUOTE(SASA_UA @ Feb 2 2012, 10:20) *

Можно для новичка объяснить следующее? HDD 15GB RAM 500MB Bandwidth limits 50/50 and sliders 100% (so it just use all available connection) 300 workers 75 open buckets 0 deepcrawl, 50 priority lower priority to archiving Archiving delay at 1

это заготовка - позже поправлю вики

какой у тебя доступный канал ?

Автор: SASA_UA Feb 3 2012, 11:34

У меня симметричный 1 Мбит. Правда 2 дня подряд выдаются ошибки типа SuperPeer rejected this bucket (that will be deleted now) with message: Attempt to write to work file failed as offset is greater than zero but file does not exist ИЛИ URLs received but file size does not match ХХХХХ locally, and ХХХХ remotely! Из настроек только ползунки на макс, все остальное по дефолту

Автор: Rilian Feb 3 2012, 12:00

SASA_UA, поставь кол-во воркеров 50, кол-во букетов - 20

deepcrawl buckets = 0
priority buckets = -1

остальное можешь не менять

если что - ставь TeamViewer, и пришли мне в ЛС номер сессии (9 цифр) и пароль - я посмотрю

Автор: Andrey Fenchenko Feb 8 2012, 23:14

Rilian,
А когда будет готов мануал по настройке маджа?
На триолане у меня почему-то хуже работает, чем на киевстаре.

Автор: Rilian Feb 9 2012, 12:33

тут появілась інфа что тріолан в кіеве не імеет своіх каналов, а орендует

А в Харькове у ніх своя оптіка

на работе завал -- надеюсь обновлю ман лібо седня вечером лібо на виходних

Автор: poring Mar 27 2013, 00:12

можно мануал по настройке на linux?

Автор: Rilian Mar 27 2013, 00:49

QUOTE(poring @ Mar 27 2013, 00:12) *

можно мануал по настройке на linux?


QUOTE
Поставил на VM Ubuntu. Нода запустилась. Но теперь пишет что нужно ввести в опциях регистрционные данные и т.п.
А я понять не могу где это. ведь оно у меня в терминале запустилось.


надо поправить config.xml

нода при запуске напишет тебе подсказку что нажимать чтобы запустить веб сервер. Насколько я помню это S

нажмешь, оно запустит локальный веб сервер, на порту 1088 по умолчанию

зайдешь в браузере на http://localhost:1088 и там в опциях можешь поменять настройки

Автор: poring Mar 29 2013, 22:14

Возникли вопросы:
Ubuntu 12.10
как запускать все ноды одним скриптом?
как запускать ноды без того что бы каждый раз нажимать "запустить в терминале" - ответ типа зайти в Правка-Параметры-Поведение и поставить галочку "запускать исполняемые текстовые файлы при открытии" не подходит.
Читал офф. форум и кто-то там поднимал эту тему, но теперь не могу найти эту тему.
Помогите пожалуйста.

з.ы. с проблемой артефактов на экране разобрался - оказывается по умолчанию использовал родние Убунтовские драйвера для nVidia. Поменял на тестирование драйвера производителя и все заработало.

Автор: Rilian Mar 30 2013, 00:05

poring,

я запускаю так. в терминале

cd /home/username/mj12/node1 ; rm nohup.out ; nohup ./run.sh &

после этого так как ты поставил &, то вывод перенаправляется прямо в терминал, но процесс при этом детачится

далее нажимаешь например cd , ENTER

копипастишь

cd /home/username/mj12/node2 ; rm nohup.out ; nohup ./run.sh &

итд

вообще я слышал что если ты все эти строки положишь в один sh скрипт и запустишь, то все будет ок

проблема в том что иногда ноды отваливаются. чтобы поднять ее заново надо смотреть ошибку тут

cd node...

tail -n 100 nohup.out

если все ок (нет повреждений базы итд)

то стартуешь заново nohup ./run.sh &

smile.gif

Автор: poring May 27 2023, 12:25

(Rilian @ Mar 30 2013, 01:05) *

poring,

я запускаю так. в терминале

cd /home/username/mj12/node1 ; rm nohup.out ; nohup ./run.sh &

после этого так как ты поставил &, то вывод перенаправляется прямо в терминал, но процесс при этом детачится

далее нажимаешь например cd , ENTER

копипастишь

cd /home/username/mj12/node2 ; rm nohup.out ; nohup ./run.sh &

итд

вообще я слышал что если ты все эти строки положишь в один sh скрипт и запустишь, то все будет ок

проблема в том что иногда ноды отваливаются. чтобы поднять ее заново надо смотреть ошибку тут

cd node...

tail -n 100 nohup.out

если все ок (нет повреждений базы итд)

то стартуешь заново nohup ./run.sh &

smile.gif


gnome-terminal --tab --title="V1-1" --command="bash -c 'cd ~/Desktop/v1-1; ./run.sh; $SHELL'" --tab --title="V1-2" --command="bash -c 'cd ~/Desktop/v1-2; ./run.sh; $SHELL'" --tab --title="V1-3" --command="bash -c 'cd ~/Desktop/v1-3; ./run.sh; $SHELL'" --tab --title="V1-4" --command="bash -c 'cd ~/Desktop/v1-4; ./run.sh; $SHELL'" --tab --title="V1-5" --command="bash -c 'cd ~/Desktop/v1-5; ./run.sh; $SHELL'" --tab --title="V1-6" --command="bash -c 'cd ~/Desktop/v1-6; ./run.sh; $SHELL'" --tab --title="V1-7" --command="bash -c 'cd ~/Desktop/v1-7; ./run.sh; $SHELL'"






_____________________________________________________________________________
gnome-terminal
--tab --title="V1-1" --command="bash -c 'cd ~/Desktop/v1-1; ./run.sh; $SHELL'"
--tab --title="V1-2" --command="bash -c 'cd ~/Desktop/v1-2; ./run.sh; $SHELL'"
--tab --title="V1-3" --command="bash -c 'cd ~/Desktop/v1-3; ./run.sh; $SHELL'"
--tab --title="V1-4" --command="bash -c 'cd ~/Desktop/v1-4; ./run.sh; $SHELL'"
--tab --title="V1-5" --command="bash -c 'cd ~/Desktop/v1-5; ./run.sh; $SHELL'"
--tab --title="V1-6" --command="bash -c 'cd ~/Desktop/v1-6; ./run.sh; $SHELL'"
--tab --title="V1-7" --command="bash -c 'cd ~/Desktop/v1-7; ./run.sh; $SHELL'"

Invision Power Board
© Invision Power Services