Версія даної теми для друку

Автор: nikelong Jan 21 2009, 20:16

нет логотипа

Проект "Anansi"

----------------------------------------------------------------------------------------------------------

• http://canis.csc.ncsu.edu:8005/anansi/
• http://canis.csc.ncsu.edu:8005/anansi/team_display.php?teamid=14
• http://canis.csc.ncsu.edu:8005/anansi/team_members.php?teamid=14&sort_by=total_credit&offset=0
• http://boincstats.com/stats/team_graph.php?pr=anansi&id=14
• http://canis.csc.ncsu.edu:8005/anansi/server_status.php

----------------------------------------------------------------------------------------------------------
ТОП-20 участников:

----------------------------------------------------------------------------------------------------------
Дата основания команды - 29.08.2009 Капитан - rilian
----------------------------------------------------------------------------------------------------------
Для присоединения к команде Украины:
1. Загрузите http://boinc.berkeley.edu/download.php (Если его у Вас еще нет!)
2. Перейдите в "расширенный вид"
3. Выберите сервис ---> добавить проект
4. Введите адрес проекта http://canis.csc.ncsu.edu:8005/anansi/
5. Введите свои регистрационные данные.
6. Найдите нашу команду. Она называется Ukraine и адрес ее http://canis.csc.ncsu.edu:8005/anansi/team_display.php?teamid=14 вы могли видеть выше.
7. Если есть доступные для загрузки задания Вы их получите и начнете расчеты.
----------------------------------------------------------------------------------------------------------
Новичкам: http://distributed.org.ua/index.php?go=Pages&in=view&id=170, как поставить и настроить BOINC-менеджер
----------------------------------------------------------------------------------------------------------
Полезная информация:
Для идентификации пользователя в BOINC могут служить 2 вещи:
1) пара e-mail/пароль
2) межпроектный идентификационный ID (Cross-project ID) - 32значное шестнадцатиричное число.

Если Вы пожелаете подключится ещё и к другому BOINC-проекту, то помните: чтобы не плодить новых аккаунтов при подключении к новому проекту или команде, нужно обязательно везде регистрироваться с одним и тем же Именем и EMAIL. если при регистрации в проекте указать другой e-mail , BOINC создаст новый аккаунт с тем же именем! В этом случае рекомендуется зайти во все ваши аккаунты и во все проекты и где надо поменять емейл на нужный. Через некоторое время ваши аккаунты сольются в один с одним cross-project-id.
----------------------------------------------------------------------------------------------------------


О проекте:
Anansi is a research project that uses Internet-connected computers to explore web resources around the world. Basically we want to do an evaluation regarding accuracy and performance on a distributed web crawler, and BOINC is our final choice after consideration. Measurements in such a system including accuracy, robustness, flexibility and performance will be evaluated.

In Anansi, clients returned only URIs been crawled associate with URI's http status code that indcating availability of it. Only URIs with scheme http itself that can be reached by the public will be crawled. No E-mail address, words content or user, password will be collected. It is an non-cpu-intensive project, which is trying to reduce CPU loads on the client. Associative information such as robots exclusion and some page contents are being collected and used by BOINC Volunteers during crawling, but none of them will be returned to Anansi server.

The data(URIs) collected by Anansi will be used by a Map-reduce engine that calculates priorities for each URI. The priority is established upon In-degree, out-degree and timestamp created by Anansi Server. Anansi server take it into consideration for revisit plans, which maintains a continuely working system.

Anansi is currently maintained by http://fortknox.csc.ncsu.edu/wiki/osr

Ссылки по теме:
http://wiki.bc-team.org/index.php?title=Anansi/en

Автор: Death Mar 15 2009, 22:26

http://canis.csc.ncsu.edu:8005/anansi/server_status.php

!!!!!!

Database/file status
State #
Results ready to send 24
Results in progress 0
Workunits waiting for validation 0
Workunits waiting for assimilation 0
Workunits waiting for deletion 569
Results waiting for deletion 3,155
Transitioner backlog (hours) 0

ТОЛЬКО ЛИНУКС! Есть шанс принести команде очей. )))

Автор: Death Jun 1 2009, 21:37

для любителей экзотики

http://canis.csc.ncsu.edu:8005/anansi/server_status.php
Results ready to send 81

Linux running on an Intel x86-compatible CPU 9.06 21 Feb 2009 20:49:55 UTC

Автор: Death Aug 30 2009, 14:16

а в ананси кстати раздают ВУ. под венду. правда они абортятся тут же, зато трафа 1 байт и я уже за неделю набил 7 очей ))) потратив 2 минуты в день ))

Автор: Rilian Aug 30 2009, 14:24

зарегался в ананасах

http://canis.csc.ncsu.edu:8005/anansi/view_profile.php?userid=47

гы

я в ананасах фаундер the scottish boinc team

а у нашей команды фаундер какойто уг

Автор: Rilian Sep 3 2009, 09:28

Ссылку на админку Ананасов случайно запостили в рассылку (все данные были открыты). меняйте пароли

upd: все уже ок

Автор: Rilian Sep 7 2009, 13:52

с Ананасами все ок. Один из модераторов написал мне письмо и сказал что страницу настроек проекта (которая была публична) уже закрыли

Автор: Rilian Oct 22 2009, 17:18

Oct 2, 2009

So far around 150,000 urls have been crawled by Anansi.

Some plans are already made as below and being tested now:

* 1. Statistics chart of Popularity of collected web pages (based upon in-degree and out-degree)
* 2. Performance on Hadoop MapReduce Framework ( Relationship between input(edges) and time for MapReduce program) : The MP program crashes for when first 800,000 urls have been crawled, but works fine so far after restart.
* 3. Accuracy of BOINC Infrastructure: Some cheating users are found and a Validator and latest app version is updated for that.
* 4. Some reports on failure on Apps on Ubuntu version. We are considering remove that and concentrating on Windows.


надо вынести в отдельную ветку

проект работает, ВЮ есть!

ояебу, ВЮ на 27 часов

БТВ ананси не потребляет процессор и крутится в отдельном слоте

Автор: Rilian Oct 22 2009, 18:25

за 10 минут 10 очков, процессора 0 сек

правда больше ВЮ не дают ибо полный кэш

Автор: (_KoDAk_) Oct 22 2009, 20:04

присоединился
время разное но все равно 10 балов
будет теперь что ставить вместе с Вотпульсом

Автор: nikelong Oct 22 2009, 22:05

Кодак - юзер дня ...

Автор: Rilian Oct 22 2009, 23:27

на оф форуме обсуждается читерство в этом проекте. Типа если качать ВЮ, потом заблокировать инет, ВЮ отваливается через какое-то время, потом ее отправить, и получить 10 очков...

Автор: Rilian Oct 22 2009, 23:32

в боинке, обычно в новых проектах, когда создаешь профиль юзер автоматом становится юзером дня... Наверное это потому что в новых проектах профили еще не получили много голосов и например у всех рейтинг 0 и выбирается самый последний юзер.

Автор: Rilian Oct 29 2009, 12:42

Починили валидатор - у меня 1500 очков

Автор: Rilian Oct 30 2009, 23:37

Вышла версия 1.06

Автор: (_KoDAk_) Oct 31 2009, 00:28

ага щас тока
задание досчитается
53 часа прошло 23 осталось УЖАСССС

Автор: Rilian Oct 31 2009, 00:44

Обычно если вырубить БОИНК и врубить, такое задание скоро заканчивается

У меня в виртуалке в день стабильно идет штук 40-60

Автор: Rilian Oct 31 2009, 18:16

10/31/2009 5:40:02 PM anansi Reporting 1 completed tasks, requesting new tasks
10/31/2009 5:40:09 PM anansi Finished upload of anansi_1256482933_82912_1_0
10/31/2009 5:40:12 PM anansi Scheduler request completed: got 0 new tasks
10/31/2009 5:40:12 PM anansi Message from server: Can't find host record Invalid or missing account key. Visit this project's web site to get an account key.

wtf ?

btw

Oct 28th 2009

Anasni version 1.06 has been published.

* Crawling speed has been doubled for machines with common or slow bandwidth
* Less network traffic will be created

Автор: Rilian Nov 4 2009, 11:09

Проект добавлен в BoincStats

http://boincstats.com/stats/team_graph.php?pr=anansi&id=14

между прочим мы занимаем 24 место. проект не ест процессорные ресурсы - работает в дополнительном слоте в BOINC, также особо не замечено чтобы ел траффик, памяти жрет до 2МБ. Подключайтесь

Автор: Rilian Nov 14 2009, 00:54

снова есть ВЮ

Автор: EKONOMIST Nov 17 2009, 14:19

Похоже, обменный курс ананасов на боинг-очи изменился. За двое суток я набил чуть меньше, чем за целую неделю до этого. Причем условия абсолютно равные - работает вместе с торрентом, ВЮ все также выдают по ночам, один комп.

Автор: Rilian Nov 17 2009, 22:40

Очков по прежнему 10 за ВЮ. Сейчас наблюдаются некоторые проблемы с валидатором, и часть ВЮ получает 0 очков вместо 10. Админ проекта периодически подталкивает сервер и доначисляет очки вручную.

Автор: EKONOMIST Nov 18 2009, 00:47

- Да как сайт ихний попустило немного я тоже увидел. Видать ночь с 16 на 17 была весьма урожайная на коротенькие ВЮ.

Автор: Rilian Dec 7 2009, 02:54

Hi everyone,

As many of them already noticed, our project has stopped creating new tasks since early November. This is due to the problems associated with the crawling applications as well as the current resources we have.

Currently we are not able to answer all questions pretty clearly about the running time and platform issues.

After carefully consideration, we decide to shutdown the project (but keep the website running) temporary until we got an satisfying answer for that.


Thanks for all your participation and contribution so far.

Проект (не)надолго приостановлен потому что сервер не справляется с нагрузкой. Будут переделывать архитектуру

Автор: nikelong Jan 1 2010, 22:55

Как не странно, но этого проекта у нас в БТП небыло, хоть он есть на форуме уже 11 месяуев ... о_0

ЗЫ: в какой стране замутили этот проджект?

Автор: Rilian Jan 1 2010, 23:16

США, универ северной каролины

Автор: nikelong Sep 18 2010, 11:53

Сайт лежит.