![]() |
Привіт Гість ( Вхід | Реєстрація )
![]() |
Rilian |
![]()
Пост
#1
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
Сегодня для эксперимента решил полдня погонять ноду с 5 рабочими потоками, при обычных 15
В результате получил следующее: * Скачано примерно на 40000 УРЛов меньше (при 15 рабочих обычно идет 230000 в день) * Процент ошибок больше средних на 10% (при 15 потоках в среднем 60-70% в статусе ОК) Следовательно количество рабочих потоков НЕ влияет на количество ошибок закачки ![]() пс: возможно так много ошибок из-за того что у меня предпочитаются все домены кроме ком, орг и нет, и некоторые "экзотические" не резолвятся вовремя Це повідомлення відредагував nikelong: Feb 9 2009, 11:23 |
![]() ![]() |
(_KoDAk_) |
![]()
Пост
#46
|
![]() BOINC-guru ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Trusted Members Повідомлень: 3 662 З нами з: 11-August 07 З: Kharkov Користувач №: 569 Стать: Чол Парк машин: E3-1245V2@3400-Mhz 16GB 1х GTX760DCMOC2GD5 Q8200@2300-Mhz 4GB + то там то сям ![]() |
а оно ж и текущие убьет пакеты ?
т.е. это внутрення ощибка клиента? -------------------- ![]() ![]() (Show/Hide) Спаcибо автору алфавита за любезно предоставленные буквы. |
Roamer |
![]()
Пост
#47
|
мрію про ферму... ![]() ![]() ![]() ![]() ![]() Група: Trusted Members Повідомлень: 159 З нами з: 24-December 08 З: г.Киев Користувач №: 890 Стать: Чол Free-DC_CPID Парк машин: 1. AMD 5950X@4400, 4x16Gb G.SKILL F4-3600C14D-32GTZN, 24/7 (home) 2. X5690@3700, 3x4096Mb Kingston 1600 MHz, 24/7 (home) ![]() |
Не мог понять, почему одна нода перестала нормально работать, пока не посмотрел на адреса в bucket-е :
![]() Это скоко мну за энто впаяют ?! (В свете последних занонопроектов Рады). Поди потом докажи, что не распространяешь ! ![]() -------------------- ![]() |
(_KoDAk_) |
![]()
Пост
#48
|
![]() BOINC-guru ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Trusted Members Повідомлень: 3 662 З нами з: 11-August 07 З: Kharkov Користувач №: 569 Стать: Чол Парк машин: E3-1245V2@3400-Mhz 16GB 1х GTX760DCMOC2GD5 Q8200@2300-Mhz 4GB + то там то сям ![]() |
Starvation of workers detected: you need to increase Max Open Buckets value in Options->Crawler OR reduce number of workers! Current flags: bForbidRaisingStarvation=False, IsMaxOpenBuckets()=True iSparseDomainRatioBuckets=4, MAX_LOW_UNIQUE_DOMAINS_BUCKETS=3, GetMaxWorkers()=40 GetMaxBuckets()=1 -*-
это че за шняга -------------------- ![]() ![]() (Show/Hide) Спаcибо автору алфавита за любезно предоставленные буквы. |
Rilian |
![]()
Пост
#49
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
у тебя много качающих потоков, и мало открытых "букетов" (наборы ссылок). увеличь кол-во открытых букетов. Но учти что будет больше хавать диска
-------------------- |
(_KoDAk_) |
![]()
Пост
#50
|
![]() BOINC-guru ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Trusted Members Повідомлень: 3 662 З нами з: 11-August 07 З: Kharkov Користувач №: 569 Стать: Чол Парк машин: E3-1245V2@3400-Mhz 16GB 1х GTX760DCMOC2GD5 Q8200@2300-Mhz 4GB + то там то сям ![]() |
[31.08.2009 20:40:39] Could not remove upload bucket savepoint: System.Exception: Database is still locked! Could not run query: pn_remove_param Queue size: System.Collections.ArrayList
at Majestic12.EasyDB.intExecQuery(String sQueryName, ArrayList oQueries, String sTranID, Object[] asParams) at Majestic12.EasyDB.ExecQueryByNameAndTran(String sQueryName, String sTranID, Object[] asParams) at Majestic12.EasyDB.ExecQueryByName(String sQueryName, Object[] asParams) at Majestic12.UploadManager.UploadBarrel(QueryResult oWorkUnit, Boolean bNewBarrel, Boolean& bServerDown) -------------------- ![]() ![]() (Show/Hide) Спаcибо автору алфавита за любезно предоставленные буквы. |
Roamer |
![]()
Пост
#51
|
мрію про ферму... ![]() ![]() ![]() ![]() ![]() Група: Trusted Members Повідомлень: 159 З нами з: 24-December 08 З: г.Киев Користувач №: 890 Стать: Чол Free-DC_CPID Парк машин: 1. AMD 5950X@4400, 4x16Gb G.SKILL F4-3600C14D-32GTZN, 24/7 (home) 2. X5690@3700, 3x4096Mb Kingston 1600 MHz, 24/7 (home) ![]() |
Из-за порнушных сайтов скорость упала ~ в 5 раз.
![]() ![]() ![]() З.Ы. Смотрю, что это у всех участников проекта ! ![]() -------------------- ![]() |
Death |
![]()
Пост
#52
|
![]() <script ///> ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com ![]() |
кто нить проверьте колво ошибок на гугловском днс
8.8.8.8 8.8.4.4 по сравнению с опенднс. -------------------- |
Death |
![]()
Пост
#53
|
![]() <script ///> ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com ![]() |
http://www.grc.com/dns/benchmark.htm
гугл днс быстрее опенднсовского. и кстати когда опенднс не может резолвить адрес он подсовывает свою страницу. отстой. -------------------- |
Rilian |
![]()
Пост
#54
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
и кстати когда опенднс не может резолвить адрес он подсовывает свою страницу. отстой. да, это больше всего бесит... -------------------- |
Death |
![]()
Пост
#55
|
![]() <script ///> ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com ![]() |
4.2.2.2-8
супербыстрые и гугловский тоже. опенднс отстой. -------------------- |
Rilian |
![]()
Пост
#56
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
а разве 4.2.2.2 не ОпенДНС?
-------------------- |
Death |
![]()
Пост
#57
|
![]() <script ///> ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com ![]() |
-------------------- |
Rilian |
![]()
Пост
#58
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
у меня ДНС 4.2.2.2 asdfasdfasdfasdfasdfasdfasdfasdfasdfasdfasdfasfdsd.com редиректит на http://guide.opendns.com/?url=asdfasdfasdf...fasdfasfdsd.com -------------------- |
Death |
![]()
Пост
#59
|
![]() <script ///> ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Moderators Повідомлень: 6 371 З нами з: 5-November 03 З: Kyiv Користувач №: 26 Стать: НеСкажу Free-DC_CPID Парк машин: гидропарк jabber:deadjdona@gmail.com ![]() |
значет где-то сиране опенднс затесалсо.
спрашиваем у 4222 кто такой нетнихера.ком ; <<>> DiG 9.2.3 <<>> @4.2.2.2 netnihera.com A ;; global options: printcmd ;; Got answer: ;; ->>HEADER<<- opcode: QUERY, status: NXDOMAIN, id: 38565 ;; flags: qr rd ra; QUERY: 1, ANSWER: 0, AUTHORITY: 1, ADDITIONAL: 0 ;; QUESTION SECTION: ;netnihera.com. IN A ;; AUTHORITY SECTION: com. 769 IN SOA a.gtld-servers.net. nstld.verisign-grs.com. 1265929467 1800 900 604800 86400 ;; Query time: 1 msec ;; SERVER: 4.2.2.2#53(4.2.2.2) ;; WHEN: Thu Feb 11 23:07:02 2010 ;; MSG SIZE rcvd: 104 не отдаёт ничего - нет нихера. спрашиваем у опенднса ; <<>> DiG 9.2.3 <<>> @208.67.222.222 netnihera.com. IN ;; global options: printcmd ;; Got answer: ;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 42458 ;; flags: qr rd ra; QUERY: 1, ANSWER: 1, AUTHORITY: 0, ADDITIONAL: 0 ;; QUESTION SECTION: ;netnihera.com. IN A ;; ANSWER SECTION: netnihera.com. 0 IN A 208.67.219.132 ;; Query time: 1 msec ;; SERVER: 208.67.222.222#53(208.67.222.222) ;; WHEN: Thu Feb 11 23:07:47 2010 ;; MSG SIZE rcvd: 47 отдаёт 208.67.219.132 сучечько идём на http://208.67.219.132/ и что мы видим? то же говно. так шо где-то у тебя завелось уг. ищи и попячь его! погоняй тесты скорости днс. гдето была тут тема на форуме. чото я умничаю. педивикия какгбе говорит нам Серверы OpenDNS предоставляет следующие адреса серверов для публичного использования, для альтернативной маршрутизации: 208.67.222.222 (resolver1.opendns.com) 208.67.220.220 (resolver2.opendns.com) -------------------- |
Rilian |
![]()
Пост
#60
|
![]() interstellar ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() ![]() Група: Team member Повідомлень: 17 005 З нами з: 22-February 06 З: Торонто Користувач №: 184 Стать: НеСкажу Free-DC_CPID Парк машин: ноут и кусок сервера ![]() |
Блин, я перепутал
у меня ДНС прописан "4.2.2.2, 208.67.220.220" Я думал первый - это опен, а второй укртелекомовский ![]() -------------------- |
![]() ![]() |
![]() |
Lo-Fi Версія | Поточний час: 23rd June 2024 - 08:17 |