Majestic12.co.uk, альтернатива гуглу Налаштування

[nikelong]

Проект "Majestic-12"

----------------------------------------------------------------------------------------------------------
Официальный сайт

Официальная статистика по команде "Ukraine"
Расширенная статистика по команде Украины
Выбор оптимального DNS сервера

----------------------------------------------------------------------------------------------------------
Дата основания команды - 08.02.2007 Капитан - Tamagoch
----------------------------------------------------------------------------------------------------------
Для присоединения к команде Украины:
1. Убедитесь в том что у Вас безлимитный доступ в интернет
2. Проверьте, установлен ли в Вашей системе NET 2.0 (пуск - панель управления - установка и удаление программ. В открывшимся списке должна присутствовать строчка NET Framework 2.0). Если нету - идем на windows update;
3. Загрузите клиент (1.2 Мб), предпочтение - версии Installer;
4. введите логин/пароль/прочие данные в самом клиенте, и нажмите кнопку регистрации. Если что-то непонятно - читаем на английском более подробное описание. либо спрашиваем тут на форуме и сразу же получаем ответ. Как вариант - обращаемся в командный чат на скайпе (пишите в личку Nikelong )
5. Зайдите на сайт проекта и залогинтесь под собой (введите те логин и пароль шо вводили при регистрации клиента)
6. Зайдите в профиль нашей команды и нажмите ссылку Join this team
7. Если всё сделано верно то в данный момент Вы уже являетесь членом нашей команды. Поздравляем!
----------------------------------------------------------------------------------------------------------
О проекте:
Раздел по Majestic12 у нас на сайте.

http://mj12.sonnigelichtung.de/

Сколько выставлять воркеров и букетов?
http://xplusy.oos.cc/web/Velocity2.pdf

График производительности команды:


Добавить сайты в маджестик12 - аддурилка
Majestic12 Add Url

Зачем мы создаём поисковую систему, когда все могут просто использовать гугл(яху/яндекс и т.д)?

Это сложный вопрос, так как на него нет единственного ответа. Мини-ответы разбиты на социальные и персональные категории для того, чтобы попытаться и начать объяснять хотя бы часть причин работы этого проекта:

Социальные:
1) Вы можете представить себе жизнь без Интернета? А как вам Интернет без поисковых систем? Поисковики являются важной частью жизни, будь то работа или досуг и отсутствие возможности контролировать ИХ в известной степени не очень хорошая вещь.

2) Потому что мы можем -- персональные компьютеры и связи достигли того уровня, когда массовые масштабные проекты делают подобное возможным.
Задумайтесь над этим: один компьютер с инетом в 512к может собрать 500 000 страниц в день, так что имея всего 8000 участников в сети, можно в день проиндексировать столько страниц, сколько нет у Гугла во всей его базе данных! И это всего да один день! Мы раельно можем побить Гугл по крайней мере в части размера и глубины базы даннх.

3) Вы когда-нибудь, вглядываясь в чистое звёздное небо, не хотелы бы узнать, сколько там звёзд? Собственно, мы тут не звёзды считаем, но аналогично этому примеру, никто точно не знает, насколько сейчас велика ''Международная Паутина''. Всё, что мы знаем, дак это то, что она намного больше, чем её проиндексировали крупнейшие поисковые системы. Проект постарается обеспечить ответ на этот сложный вопрос, собирая каждый линк и каждую страницу Интернета.

Персональные:
1) Я, Александр Чудновский, хочу взяться за решение задачи, требующей мировых возможностей и амбиций (в последнем я уверен, а насчёт предпоследнего - время покажет ).

2) Я хочу посмотреть, сможет ли Microsoft's .NET справиться с этим (в особенности её cross-platform angle)

3) Я хочу предоставить людям различие в поиске чего-либо в Интернете. Интернет является большой частью моей жизни и был ей достаточно долгое время, и это правильно, что я использую все свои навыки в попытке сделать лучше другим людям.

Клиент создаёт очень большой траффик, он использует всю ширину Вашего канала. Поэтому его нужно устанавливать только в том случае, если вы имеете безлимитный доступ в интернет.

Це повідомлення відредагував Rilian: Aug 23 2012, 18:02

[Death]

Submit URLs - submission result


Could not add urls due to error: No URLs to add or all were removed by de-duplication filter!

у меня уже не взяло

[Rilian]

Submit URLs - submission result


Could not add urls due to error: No URLs to add or all were removed by de-duplication filter!

у меня уже не взяло

ну а ты думал?

думаю там чистка каждую итерацию идет. Ведь мы последний раз добавлялись года два назад

[Death]

http://www.birminghampost.net/birmingham-b...65233-25763261/

Majestic-12 search engine in funding boost from eBay entrepreneur
Feb 4 2010 By Anna Blackaby

Recommend
A Birmingham search engine firm which is second only to Google in the number of webpages it has indexed has secured substantial funding from a Dutch internet entrepreneur.

Majestic-12 said it had attracted an undisclosed sum from investor Rene van Mullem, the founder of leading Dutch classified website Marktplaats.nl which was bought by eBay for £200 million.

Aston Science Park-headquartered Majestic-12 is a technology company based on a unique concept which has produced an independent map of the way pages link to each other on the web.

Its search engine project was founded five years ago with the aim of creating a community-driven site based on a distributed computing model.

Instead of one centralised computing centre trawling the net, internet users around the world can devote their machines to the project when they are not using them.

Majestic-12 has used distributed crawlers run by a team of volunteers on hundreds of PCs to produce this database of links, known as a web graph.

This web graph has a number of commercial applications, notably in part understanding how modern day search algorithms interpret and prioritise web pages.

Majestic-SEO has earmarked the investment to further develop its infrastructure in 2010.

This investment will see Majestic significantly step up its crawl and indexing rates and bring down its datacrawl update time.

Mr Chudnovsky said: “Even though we have already been reindexing monthly for the several months, we can improve this further.

“In addition, this funding will allow Majestic to accelerate its timeline, bringing more exciting products to market throughout 2010 and beyond.”

[Death]

Чудновский пообещал раздуплить каких тлд не хватает в мадже и добавить.

[Roamer]

Поздравлям с прибытием и зачислением в Команду :

DarkWater, Andrey Fenchenko, BoomBoom, BreakinSoul, LBF.

Добро пожаловать !

[fram]

Канал 2мбит/1мбит
Выставлено 60 вокеров, и 20 букетов (считает одно и тоже кол-во, в не зависимости от этих параметров). Лимиты канала выставлены в 2 раза большие. Но считает только 7-9 вокеров. Канал в среднем занят на 700кбит/с.
Вопрос:

Как застваить больше считать?

[nikelong]

читает только 7-9 вокеров. Канал в среднем занят на 700кбит/с.
Вопрос:

Как застваить больше считать?

о_0

Лимиты канала выставлены в 2 раза большие.

Верни лимит равен использованию канала, юзанье канала выстави 90% и будет тебе счастье ...

[fram]

Методом научного тыка понажимал на кнопки...считает по 40 вокеров, при этом грузит 75-80% канала. Гуд.

[Roamer]

fram ,
поставь 200 worker-ов - хотя реально работать будет ~ 100-160 . (больше, чем позволяет Inet канал, клиент Majestic-а worker-ов не запускает !).
Попробуй, хуже не будет!

[fram]

попробую Правда только через сутки...ща другая операционка загружена....отчим попросил помочь досчитать его работу..а то его комп уже почти неделю считает. Настраивать на другой операционке клиент - нема смысла

[Roamer]

Вышла новая версия для Windows - MJ12node v1.6.12.
Качаем с этой странички :
MJ12node v1.6.12

[Death]

АГСЛ НУФР!!11


v1.6.12 25/04/10
! Disabled referers from being shown when HTTP redirection is done in a hope that some poorly written analysis software will stop
falsely classifying this legitimate operation as abusive, crawler version changed to 1.3.3 to reflect that
! Removed debugging info added to user-agent link used in robots.txt requests
+ Added timeout to caching of IP for the main server just in case it changes location
+ Added support for new IDN based domains names

домен аєро так и не появился

И КСТАТИ!


Updated at 21:17pm GMT - if you downloaded it then please redownload, this release fixed one piece of code that in theory should not be called by node but it's better to be sure.

кто качал вчера - перекачайте

[Roamer]

Сервак проекта кажись обожрался

[05.05.2010 12:11:28] The line above was repeated 2 more times
[05.05.2010 12:11:28] All 2 uploads retries failed, last server responsecode: InternalError Error message: Internal error: There is not enough space on the disk.

P.S. А еще надо как-то отправить ~ 650 bucet-ов !

[Alexis Kravtchenko]

Уже раздуплились!
И похоже давненько..

З.Ы. Риторический(филосовский) вопрос: И почему, как падает что-то, так каждый может об этом сказать, а как подымается, так все молчат?

[nikelong]

Hi there!

I am sending this email to inform you that you were in list of top 100
crawlers by number of URLs and therefore entitled to a free Majestic-12
tshirt

Please feel in t-shirt registration form here (we'll need your delivery
address): http://www.majestic12.co.uk/forum/viewtopic.php?t=3997

If you have already done so then please ignore this email - we are planning
to place tshirt printing order next week, so hurry up please!

Thanks again for taking part in the project and rest assured that this year
is going to be the one to remember!

Best regards,

Alex Chudnovsky
Founder and Managing Director

Majestic-12 Ltd (t/a Majestic-SEO)
Faraday Wharf, Holt Street
Aston Science Park, Birmingham
B7 4BB

Круто! Теперь остается только узнать, как эту футболку забрать