Допомога - Пошук - Користувачі - Календар
Доработка сайта проекта
Розподілені обчислення в Україні > Українські проекти розподілених обчислень > SLinCA (Scaling Laws in Cluster Aggregation) [завершено]
1, 2
SLinCA-Yuri
Добрый день, друзья!

Большое Вам спасибо за внимание к нашему проекту SLinCA (и особенно за замеченные недостатки).
Проект находится в тестовой стадии,
потому мы намеренно не привлекали внимание сторонних волонтеров-энтузиастов распределенных вычислений,
дабы не усложнять им жизнь нашими ошибками.
Однако проект все таки не удалось утаить от их и вашего ( cool2.gif ) внимания.

Несмотря на тестовый характер работы (пробуются разные режимы и параметры выполнения заданий),
уже получено большое количество предварительных данных.
Большое спасибо всем тем, кто принял участие в этой части нашей работы! worthy.gif
Некоторые из этих предварительных результатов уже опубликованы в научных изданиях и на научных конференциях.

В планах на ближайшее время:
IPB Image - постараемся устранить проблему с регистрацией команд (раньше этот функционал нас просто не интересовал); - DONE
IPB Image - более щадящее планирование воркюнитов (по требованиям ко времени выполнения и ресурсам);
IPB Image - расширение видов платформ и подключение других приложений;
IPB Image - информировать на популярном уровне о наших (а значит и ваших ) достижениях.

Будем рады регулярно получать ваши мнения и, особенно, критические замечания, которые позволили бы улучшить качество работы!

С уважением,
Юрий
gord [осторожно, хозяин добрый, но очень злая собака] imp kiev ua
Death
классно!

не забудьте включить экспорт статистики в хмлexcl.gif

nikelong
постараемся устранить проблему с регистрацией команд


Сразу переключу свои мощностя на Ваш проект.

не забудьте включить экспорт статистики в хмл

Дадада. Шоб было красиво, как тут:
https://distributed.org.ua/index.php?go=dis...puting_projects
Rilian
Юрий, У меня вопрос, если мы начнем кранчить сейчас, можно ли потом в ручном режиме будет перенести все очки в созданную команду украины, при переходе юзеров?

Это делается вручную в админ панели БОИНК сервера один раз. Список юзеров и очков предоставим

Этим вы бы сильно мотивировали пользователей начинать считать сейчас. За себя просто так считать особого смысла нет, а вот за себя и команду - очень хорошо

Спасибо за ответ
SLinCA-Yuri
Спасибо за советы! На будущей неделе будем исправлять замеченные вами недочеты и другие недостатки - возможно проект будет работать нестабильно.
Кое-что уже поправлено, но многое еще предстоит сделать (исправить глюки в управлении командами).
Например, сейчас воркюниты намеренно сделаны длинными в целях тестирования, но практика показывает, что это крайне неэффективно.
До 07 февраля буду "вне зоны досягаемости", но после продолжу диалог.
Надеемся на дальнейшее сотрудничество!
Death
команды включили, но пока не работают как надо.

кстати кроме экспорта статистики в хмл хорошо бы включить форум.

обратная связь от участников это оч. хорошо.
re_SET
SLinCA-Yuri, У меня к Вам вопрос. В проекте мной было замечено 2 вида заданий: аленькие (15-20) минут, и большие 30-50 часов на ядре 3 Ггц. прогресс заданий считается нормально до 50%, а дальше ждет 100. Так вот: если выключить клиент при просчете второй половины большого задания (ребут машины, приостановка проекта, переключение между заданиями), то это задание начинает считаться сначала. Замечено на всех клиентах под Win XP Win7 (включая x64).
Вопрос: Это особенность клиента? Просто терять на кваде 4 задания по 20 уже просчитанных часов на ядро - большие затраты времени и киловат((.
Rilian
http://dg.imp.kiev.ua/slinca/team_create_form.php

при создании команды выдает

Fatal error: Call to undefined function lookup_team_name() in /var/lib/boinc/slinca/project/html/user/team_create_action.php on line 30

SLinCA-Yuri, а почему нельзя просто взять последнюю версию сервера БОИНК ?
A1ex01
шота на сайте прожекта все новости за 2010 год...
SLinCA-Yuri
(Rilian @ Jan 27 2011, 22:49) *

http://dg.imp.kiev.ua/slinca/team_create_form.php

при создании команды выдает

Fatal error: Call to undefined function lookup_team_name() in /var/lib/boinc/slinca/project/html/user/team_create_action.php on line 30

Ок, thumbsup.gif спасибо, это тоже заметили.

(Rilian @ Jan 27 2011, 22:49) *

SLinCA-Yuri, а почему нельзя просто взять последнюю версию сервера БОИНК ?

Попробуем сделать это чуть позже и более глобально, поскольку при обновлении версии сервера были замечены более значительные глюки в других местах. blush.gif
SLinCA-Yuri
(A1ex01 @ Jan 27 2011, 23:22) *

шота на сайте прожекта все новости за 2010 год...

cool2.gif Спасибо, исправили!
SLinCA-Yuri
(Death @ Jan 27 2011, 17:13) *

команды включили, но пока не работают как надо.

Команды пока неработают (несовместимость версий разных компонентов - работаем над устранением).

(Death @ Jan 27 2011, 17:13) *

кстати кроме экспорта статистики в хмл хорошо бы включить форум.
обратная связь от участников это оч. хорошо.

Ок - спасибо!

(re_SET @ Jan 27 2011, 21:49) *

SLinCA-Yuri, У меня к Вам вопрос. В проекте мной было замечено 2 вида заданий: аленькие (15-20) минут, и большие 30-50 часов на ядре 3 Ггц. прогресс заданий считается нормально до 50%, а дальше ждет 100. Так вот: если выключить клиент при просчете второй половины большого задания (ребут машины, приостановка проекта, переключение между заданиями), то это задание начинает считаться сначала. Замечено на всех клиентах под Win XP Win7 (включая x64).
Вопрос: Это особенность клиента? Просто терять на кваде 4 задания по 20 уже просчитанных часов на ядро - большие затраты времени и киловат((.


Это верно - прогресс считается очень грубо - это известная нам проблема клиентской части.
Задача нелинейная и пока трудно спрогнозировать время выполнения на заключительных стадиях для разных входных параметров (потому тестируем радикально разные режимы).
Кроме того, реализация checkpoint (т.е. продолжение вычисления с прерванного места) не очень удачная сейчас - работаем над улучшением.
В скором времени (через 1-2 недели) попробуем исправить.
re_SET
SLinCA-Yuri, Ваша оперативность и отзывчивость радует! Разрешите от лица всей Украинской команды выразить благодарность! Так держать! cool2.gif
SLinCA-Yuri
(re_SET @ Jan 28 2011, 09:47) *

SLinCA-Yuri, Ваша оперативность и отзывчивость радует! Разрешите от лица всей Украинской команды выразить благодарность! Так держать! cool2.gif

Спасибо, будем стараться! Хотя на следующей неделе будет временное затишье - будем в отъезде.
nikelong
January 25, 2011, 21:00 GMT
We would like to thank Distributed Computing team of Ukraine, who paid attention to our project on testing stage even. We are trying to fix some problems (team management, translation, etc). We would be happy to get your advices and critics to improve our work!


Ой спасибо! blush.gif

И еще одно пожелание от меня: добавьте на морду сайта ссылку "сервер статус", которая ведет на статистику выдачи заданий.
Например как тут:
http://boinc.thesonntags.com/collatz/server_status.php

Очень часто бывает полезна информация Results ready to send для оценки "живости" проекта.
Death
http://dg.imp.kiev.ua/slinca/stats/

вот тут пока нет хмл файлов со статистикой, поэтому все стат сайты не могут её собирать.

включите пожалуйста экспорт статистики в xml

nikelong, ну какбе можно шапку уже заполнить )))))
nikelong

icon_trollface.png


SLinCA-Yuri,
Настройте в базе кодировку. А то на русском языке НЕ дало в шапку описание команды вставить. Онли инглиш.

Ну и бока с кодировкой вылазят когда сортируешь участников по ППД:
http://dg.imp.kiev.ua/slinca/team_members....credit&offset=0

nikelong, ну какбе можно шапку уже заполнить )))))


Фсьйо шо на сегодня доступно - внес в описание.

SLinCA-Yuri,
http://dg.imp.kiev.ua/slinca/user_profile/..._gallery_1.html
Ошибка. Ссылка не работает.


http://dg.imp.kiev.ua/slinca/user_profile/...le_country.html

Ошибка. Ссылка не работает.
Rilian
кодировку желательно _везде_ прописать UTF8, и в заголовках страниц (темплейте) тоже
nikelong
Народ!

Реквестирую перевод на русский чем занимается проект (пару абзацев для внесения ясности в шапку темы).
Ну или ткните линк где это описано (если уже есть)...
Death
хай собі робе...

https://distributed.org.ua/forum/index.php?...indpost&p=72963



кстати, обещаного три года ждут, но

EU project DEGISCO started!
June 01, 2010, 11:00 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) will continue its work under the new EU project DEGISCO (http://degisco.eu).

Successfully Finished Tests at XtremWeb infrastructure
March 19, 2010, 11:30 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) was successfully tested on EGEE computing resources at XtremWeb infrastructure at LAL (Orsay, France). Details will be reported later.

Successfully Finished Tests at CETA-CIEMAT test infrastructure
March 15, 2010, 10:00 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) was successfully tested on EGEE computing resources at CETA-CIEMAT test infrastructure. Details will be reported later.
Death
экспорт статистики в ХМЛ включите жеexcl.gif

поставил проект на паузу - снял - всё накрылось.
я не могу боинк не выключать по 24 часа.
tribal
Death, тож самое... пока не утихомирю вентилятор в БП комп на ночь выключаю... вобщем без чекпоинтов пока считать никак не получается ((
Death
нашол интересную ссылу

http://dg.imp.kiev.ua/slinca/performance.php
SLinCA-Yuri
(nikelong @ Jan 28 2011, 11:06) *

И еще одно пожелание от меня: добавьте на морду сайта ссылку "сервер статус", которая ведет на статистику выдачи заданий.
Например как тут:
http://boinc.thesonntags.com/collatz/server_status.php
Очень часто бывает полезна информация Results ready to send для оценки "живости" проекта.


Спасибо! Очень полезная информация!
Сделали, хотя сам сервер еще глючит в некоторых местах.
SLinCA-Yuri
(Death @ Jan 28 2011, 13:53) *

http://dg.imp.kiev.ua/slinca/stats/
вот тут пока нет хмл файлов со статистикой, поэтому все стат сайты не могут её собирать.
включите пожалуйста экспорт статистики в xml

Статистика реализована нестандартными средствами для отображения в виде графиков.
Попробуем привести к стандарту в ближайшее время. Спасибо за напоминание! thumbsup.gif

(Death @ Feb 1 2011, 16:35) *

экспорт статистики в ХМЛ включите жеexcl.gif
поставил проект на паузу - снял - всё накрылось.
я не могу боинк не выключать по 24 часа.


Просим извинить за неудобства из-за неккоректного чекпойнта!
Сейчас (на стадии тестирования) задания по 4-6 часов.
Пока решаем проблему с чекпойнтом.
Death
Статистика реализована нестандартными средствами для отображения в виде графиков.
Попробуем привести к стандарту в ближайшее время. Спасибо за напоминание!


2 минуты дела

в проекте есть файл config.xml

<boinc>
<config>
</config>
<daemons>
</daemons>
<tasks>

вставляете вот это

<task>
<output>
db_dump.out
</output>
<cmd>
db_dump -d 2 -dump_spec ../db_dump_spec.xml
</cmd>
<period>
2 hours
</period>
</task>

и всё должно работать

</tasks>
</boinc>

читать тут http://boinc.berkeley.edu/trac/wiki/DbDump
SLinCA-Yuri
(Death @ Jan 28 2011, 16:59) *

хай собі робе...

https://distributed.org.ua/forum/index.php?...indpost&p=72963



кстати, обещаного три года ждут, но

EU project DEGISCO started!
June 01, 2010, 11:00 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) will continue its work under the new EU project DEGISCO (http://degisco.eu).

Successfully Finished Tests at XtremWeb infrastructure
March 19, 2010, 11:30 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) was successfully tested on EGEE computing resources at XtremWeb infrastructure at LAL (Orsay, France). Details will be reported later.

Successfully Finished Tests at CETA-CIEMAT test infrastructure
March 15, 2010, 10:00 GMT
Application SLinCA (Scaling Laws in Cluster Aggregation) was successfully tested on EGEE computing resources at CETA-CIEMAT test infrastructure. Details will be reported later.


Спасибо - huh1.gif - актуализировали и поправили информацию по этому поводу.
Но все равно - Details will be reported later. - упорно анализируем данные st.gif

(Death @ Feb 9 2011, 18:37) *

Статистика реализована нестандартными средствами для отображения в виде графиков.
Попробуем привести к стандарту в ближайшее время. Спасибо за напоминание!


2 минуты дела

в проекте есть файл config.xml

<boinc>
<config>
</config>
<daemons>
</daemons>
<tasks>

вставляете вот это

<task>
<output>
db_dump.out
</output>
<cmd>
db_dump -d 2 -dump_spec ../db_dump_spec.xml
</cmd>
<period>
2 hours
</period>
</task>

и всё должно работать

</tasks>
</boinc>

читать тут http://boinc.berkeley.edu/trac/wiki/DbDump

У нас именно так и было настроено, но все равно большое спасибо за настойчивость дельных советов!
Похоже разобрались в чем дело: у нас конфликтовали два скрипта для обработки статистики с выдачей критической ошибки (из-за другой структуры папок и полномочий).
Сейчас проблема временно устранена вручную - просьба: проверьте корректность экспорта статистики.
Death
отписал на фришники, посмотрим смогут ли они импортнуть её.
ReMMeR
Death, SLinCA-Yuri, у меня все получилось втянуть
https://distributed.org.ua/index.php?go=dis...&in=testing#382

http://distributed.org.ua/index.php?go=distributed_computing_projects&in=testing#382
SLinCA-Yuri
(Death @ Feb 10 2011, 10:30) *

отписал на фришники, посмотрим смогут ли они импортнуть её.

Спасибо - worthy.gif
SLinCA-Yuri
(ReMMeR @ Feb 10 2011, 10:56) *

Death, SLinCA-Yuri, у меня все получилось втянуть
https://distributed.org.ua/index.php?go=dis...&in=testing#382

http://distributed.org.ua/index.php?go=distributed_computing_projects&in=testing#382


worthy.gif
Death
http://stats.free-dc.org/stats.php?page=proj&proj=sli

ждите пару тіщ хостов )))))))
nikelong
SLinCA-Yuri,
У меня еще есть идея: поставить у вас на главной странице ссылку на эту тему нашего форума.
Чтобы как минимум русскоговорящие юзеры рунета могли общатся и задавать вопросы.

Или, у меня еще есть идея, поглобальнее:
У вас форум до сих пор не прикручен и не работает.
Я создам отдельный подфорум здесь, по Вашему проекту, и На главной будет висеть ссылка "форум" ведущая к нам в наш раздел.

Думаю, эта идея получше, вопервых для популяризации распределенных вычислений, во вторых - легче находить ответы на вопросы (например, в смежных темах).
Ну а для англоговорящих визиторов будет ветка на английском (!)
Death
только напишем ОФИЦИАЛЬНЫЙ ФОРУМ. ))))))

на фришниках насколько помню хостился оффорум еона и соба.
nikelong
только напишем ОФИЦИАЛЬНЫЙ ФОРУМ. ))))))


Конечно, ведь на этом форуме появляется "живой" разработчик проекта.

)))
SLinCA-Yuri
(nikelong @ Feb 11 2011, 11:56) *

SLinCA-Yuri,
У меня еще есть идея: поставить у вас на главной странице ссылку на эту тему нашего форума.
Чтобы как минимум русскоговорящие юзеры рунета могли общатся и задавать вопросы.

Или, у меня еще есть идея, поглобальнее:
У вас форум до сих пор не прикручен и не работает.
Я создам отдельный подфорум здесь, по Вашему проекту, и На главной будет висеть ссылка "форум" ведущая к нам в наш раздел.

Думаю, эта идея получше, вопервых для популяризации распределенных вычислений, во вторых - легче находить ответы на вопросы (например, в смежных темах).
Ну а для англоговорящих визиторов будет ветка на английском (!)

Идея замечательная! Пока стандартный форум не работает, волонтеры смогут сходить сюда.
Ссылку поставили на стандартной страничке форума .
SLinCA-Yuri
(Death @ Feb 11 2011, 11:41) *

есть предложение - объявить конкурс на логотип )))))

если есть желание - пусть кто-то из админов напишет на форуме.

Что ни пост, так идеи - одна лучше другой. cool2.gif
Давайте наша группа популярно и кратко сформулирует идею(и) исследований и выложим здесь (на будущей неделе).
Определимся со скромным призом... shuffle.gif
А вы сможете организовать что-то типа приема вариантов и голосовалки?
Rilian
QUOTE(SLinCA-Yuri @ Feb 11 2011, 13:15) *

Определимся со скромным призом... shuffle.gif
А вы сможете организовать что-то типа приема вариантов и голосовалки?

да, запросто!

Nikelong: вообще надо бы подфорум открыть для проекта и поставить его рядом с магнетизмом
nikelong
Что ни пост, так идеи - одна лучше другой.

Ну сорри, это хоть и второй украинский БОИНК проект (в хронологическом порядке), но чувствую что станет первым по категории взаемодействие "кранчеры" <---> "организаторы".

А вы сможете организовать что-то типа приема вариантов и голосовалки?

Голосовалку - запросто !

Nikelong: вообще надо бы подфорум открыть для проекта и поставить его рядом с магнетизмом

Щяс этим и займусь (!)
SLinCA-Yuri
Постепенно устраняем недостатки с неполной локализацией сайта на русский и украинский (!) языки.
st.gif
Выбор языка на страничке проекта.
По умолчанию он определяется установками браузера.
Поскольку не вся стандартная терминология переведена на русский (и украинский, тем более),
то будем рады вашей постоянной критике и предложениям по улучшению перевода.
Death
а экспорт статистики как часто происходит?

сколько вот тут вставлено?
<period>
2 hours
</period>

SLinCA - Project Overview
Last Checked : Fri Feb 11, 17:33:20 2011 EET
Data Updated : Fri Feb 11, 09:49:30 2011 EET
Current Time : Fri Feb 11, 18:04:11 2011 EE
ReMMeR
Death, лично у нас втягивается - раз в сутки.
mzhelo
Коллеги! Это не касается доработки именно сайта проекта, однако напишу здесь.
Тут такая маленькая проблемка образовалась, табличка статистики в подписи теперь выглядит крайне неаккуратненько angry2.gif :


SLinCA-Yuri, может быть стоит воспользоваться опытом проекта SIMAP и передавать на сайты статистики укороченное название проекта? Сделайте, пожалуйста, если Вас не затруднит.
P.S. И подкиньте ещё заданий!
SLinCA-Yuri
(mzhelo @ Feb 13 2011, 18:34) *

Коллеги! Это не касается доработки именно сайта проекта, однако напишу здесь.
Тут такая маленькая проблемка образовалась, табличка статистики в подписи теперь выглядит крайне неаккуратненько angry2.gif :


SLinCA-Yuri, может быть стоит воспользоваться опытом проекта SIMAP и передавать на сайты статистики укороченное название проекта? Сделайте, пожалуйста, если Вас не затруднит.
P.S. И подкиньте ещё заданий!


Спасибо! Сделано:
название в заголовках укоротили и привели к общепринятому стандарту (тем самым, вероятно, слегка запутали тех, кто уже опубликовал старое) - давно было надо это сделать,
заданий добавили. smile.gif
Death
SLinCA-Yuri, как часто стат экспортится? хорошо бы раз в 2 часа ))
Rilian
http://dg.imp.kiev.ua/slinca/home.php

вот тут Message Boards ведет на forum_index.php, а должен сюда https://distributed.org.ua/forum/index.php?showforum=128

fear.gif
SLinCA-Yuri
(Rilian @ Feb 16 2011, 19:17) *

http://dg.imp.kiev.ua/slinca/home.php

вот тут Message Boards ведет на forum_index.php, а должен сюда https://distributed.org.ua/forum/index.php?showforum=128

fear.gif

clap_1.gif Исправлю в шаблоне проекта завтра. Спасибо! cool2.gif
nikelong
На этой странице...

http://dg.imp.kiev.ua/slinca//stats.php

...есть ссылка на формулубоинк:
Formula BOINC (Team ranking based on position within projects, as in Formula 1 racing, rather than total points)


Там битая ссылка. Поправьте шаблон с:
http://www.myboinc.com/FormulaBoinc/

на:
http://formula-boinc.org/


rtfm.gif
SLinCA-Yuri
(nikelong @ Feb 18 2011, 23:48) *

На этой странице...

http://dg.imp.kiev.ua/slinca//stats.php

...есть ссылка на формулубоинк:
Formula BOINC (Team ranking based on position within projects, as in Formula 1 racing, rather than total points)


Там битая ссылка. Поправьте шаблон с:
http://www.myboinc.com/FormulaBoinc/

на:
http://formula-boinc.org/


rtfm.gif

thumbsup.gif Спасибо! Поправим в понедельник.
Rilian
Надо как-то сократить название кнопки в БОИНКе, она шире чем поле в интерфейсе ffuuuuu.png

IPB Image

А еще туда можно добавить много разных полезных для юзеров ссылок!

на статистику, ваш аккаунт, команду итд , например вот так, как в WCG

IPB Image
.
Invision Power Board © 2001-2024 Invision Power Services, Inc.