!ОЙjestic |
Привіт Гість ( Вхід | Реєстрація )
!ОЙjestic |
nikelong |
Mar 3 2007, 15:34
Пост
#1
|
Тера ранчер Група: Trusted Members Повідомлень: 11 909 З нами з: 19-March 05 Користувач №: 92 Стать: Чол |
Нашёл 15 ГиГ камедиКлаб.
Так что около 15-ти дней команда Украины будет недополучать ~150000 ППД Це повідомлення відредагував nikelong: Feb 9 2009, 11:22 |
Death |
Sep 23 2011, 21:38
Пост
#91
|
<script ///> Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com |
а проверку памяти раз в минуту и максимум 300 мб?
-------------------- |
Rilian |
Sep 23 2011, 22:02
Пост
#92
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
smilesvua, вылетает с какой ошибкой? пришли лог
костыль или нет, но если есть желание заюзать мощности по полной - то лучше с костылем виртуалка очень быстро поднимается.. -------------------- |
Dobromyr |
Sep 24 2011, 13:09
Пост
#93
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
Тільки рахує статистику якось незрозуміло. На локальному компі вчора було десь до 500000 урлів, а зарахувалося тільки 14000 на сайті. Не можу зрозуміти в чому причина....
|
smilesvua |
Sep 25 2011, 09:32
Пост
#94
|
кранчер з фермою Група: Trusted Members Повідомлень: 857 З нами з: 5-January 11 З: Львов Користувач №: 1 573 Стать: Чол Парк машин: Core i7 2600K@4.5/32gb/HD7950@1000 + MBP 13" 2015. |
Вот вам и код проблемы.
Описание: Stopped working Сигнатура проблемы: Имя события проблемы: CLR20r3 Сигнатура проблемы 01: mj12node.exe Сигнатура проблемы 02: 1.7.1.25260 Сигнатура проблемы 03: 4e11c7d9 Сигнатура проблемы 04: MJ12commonLib Сигнатура проблемы 05: 1.7.5.25259 Сигнатура проблемы 06: 4e11c7d7 Сигнатура проблемы 07: 353 Сигнатура проблемы 08: b4 Сигнатура проблемы 09: System.Exception Версия ОС: 6.1.7601.2.1.0.256.1 Код языка: 1049 Причем с использованием библиотеки дот.нета ошибки не было более суток, переключил на свою вылетело на 6 часе. Но с библиотекой дот нета быстрее 20-30 мбит не разгоняет. -------------------- Все будет хорошо.
|
Rilian |
Sep 25 2011, 10:01
Пост
#95
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
smilesvua, поставь библиотеку .NET - она явно лучше написана чем в ноде, и юзай 30 мбит
Если будет желание - потом поставишь еще виртуалку и загрузишь канал -------------------- |
Dobromyr |
Sep 27 2011, 11:56
Пост
#96
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
Запустив два ноди під лінуксом на 20 Мбіт. Один нод працює нормально. А от у другому постійно повідомлення:
[09/27/2011 12:54:04] BucketManager: Server seems to be down persistently, so we will wait for at least 60 secs [09/27/2011 12:54:33] Could not execute action GetUploadTarget - The request timed out [09/27/2011 12:54:33] Failed to get upload target due to ConnectivityProblem Це в мене щось, чи на сервері? Пробував наново ставити, деякий час пропрацює, потім те саме... |
Rilian |
Sep 27 2011, 12:00
Пост
#97
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
Dobromyr, Як ти їх запускаєш ? З якими параметрами
така помилка є коли твоя нода не може закачати порахований букет на сервер ... це в тебе домашній комп або сервер ? є проблеми з інетом ? -------------------- |
Dobromyr |
Sep 27 2011, 12:41
Пост
#98
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
З нетом нема проблем. Стабільний канал 20/20 Мбіт. Стоїть роутер TP-link 740. Ноут селерок 1,6, 2 Гб оперативки. Місця вистачає
Запускаю через run.sh Обидва ноди з параметрами 350 воркерів, 75 букетів. 90% від 20 Мбіт (поставив так, бо один нод в основному витягує десь 7-8 Мбіт). Все решта по замовчуванню Один стабільно працює, але не загружає канал. Десь тут читав, що треба по ноду на кожні 10Мбіт. От і спробував... |
Rilian |
Sep 27 2011, 12:47
Пост
#99
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
спробуй поставити 1 ноду, 400 воркерів, 75 букетів
-------------------- |
Dobromyr |
Sep 27 2011, 12:51
Пост
#100
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
ОК. Спробую. Завтра відпишусь як результат
|
Dobromyr |
Sep 28 2011, 14:32
Пост
#101
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
Звітуюсь за добу.
Значиться параметри: 400 воркерів, 75 букетів, ДЛ-19 Мбіт, АЛ-18 Мбіт. Майже 25 робочих годин Результат (по локальній статистиці): MJ12node : v1.7.5 Platform : Mono build running on Unix 3.0.0.11 Total URLs : 2,092,120 (100.0%) Successes : 1,600,917 (76.5%) Not found : 164,943 (7.9%) Timed out : 36,927 (1.8%) Disallowed : 106,085 (5.1%) Banned : 15,932 (0.8%) DNS errors : 87,190 (4.2%) Conn errors : 23,165 (1.1%) Forbidden (403): 10,512 (0.5%) Other : 54,074 (2.6%) Retries : 0 (0.0%) Uptime : 24 hours 57 mins 29 secs Середня швидкість ДЛ - 4,161 На сервері: 1,827,534 (51,790) за 24 hours 31 mins 52 secs Як на мене, то маловато буде. На старому ноді 1.7 витягував десь до 4.2 - 4.4 млн. Основні помилки в лозі: [09/27/2011 14:49:13] Could not execute action UploadDataBarrel - The request timed out [09/27/2011 16:30:18] Could not execute action GetURLs - The request timed out [09/27/2011 19:36:42] BucketManager: Server seems to be down persistently, so we will wait for at least 60 secs [09/27/2011 19:37:46] Could not execute action GetURLs - The remote server returned an error: (404) Not Found. [09/27/2011 20:42:42] Could not get banned domains: System.Exception: Bucket search was requested but it could not be found among opened ones! BuckedID=115 at Majestic12.WebCrawler.FindURLBucket (Int32 iBucketID) [0x00000] in <filename unknown>:0 at Majestic12.WebCrawler.Crawl () [0x00000] in <filename unknown>:0 [09/27/2011 20:43:53] The line above was repeated 60 more times [09/27/2011 20:43:53] Could not execute action GetURLs - The request timed out [09/27/2011 20:43:53] Could not connect to server to get more urls, will retry later. Спробую зараз обновити свою убунту, розпакувати новий нод з новою назвою. Якщо не вийде, мігрую на вінду, спробую ще там |
Rilian |
Sep 28 2011, 14:51
Пост
#102
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
Dobromyr, ошибки в логе - ничего критического (разве что их не очень много, особенно про миссинг букет)
скорость да - на 8 мегабит у меня нода за день вытягивает гдето 3 млн УРЛов Если будешь винду в виртуалке ставить - ставь win7 - там с инетом получше чем на XPшке Покажи все другие настройки плиз если стартуешь сервер - клавиша s в консоли там где у тебя run.py -- http://localhost:1088/ -------------------- |
Dobromyr |
Sep 28 2011, 15:13
Пост
#103
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
Які конкретніше параметри написати?
Кидаю цілий конфіг. (Show/Hide) Вінда в мене теж на компі стоїть як друга ОС. ХПшка П.С. Чомусь не можу додати файл до повідомлення... |
Rilian |
Sep 28 2011, 16:12
Пост
#104
|
interstellar Група: Team member Повідомлень: 17 049 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера |
а куда у тебя в конфиге делся DownStreamLimit ?
-------------------- |
Dobromyr |
Sep 28 2011, 19:01
Пост
#105
|
кранчер-новачок Група: Trusted Members Повідомлень: 47 З нами з: 18-June 11 З: Івано-Франківськ Користувач №: 1 802 Стать: Чол Парк машин: Ноут Asus X51RL (Celeron 1,6) Канал - 20 Мбіт/с |
Опа. Не побачив. Виправляю... Вродь нічо не витирав там...
|
Lo-Fi Версія | Поточний час: 25th September 2024 - 19:21 |