четверг, 1 октября 2009 г.

Яндекс о фильтре АГС-17


На некоторые сайты Яндекс накладывает фильтр, в результате чего в индексе остаётся минимальное число страниц. В Яндексе подтвердили существование автоматического фильтра – АГС-17.

Фильтр АГС-17 был введён три года назад. При этом его работу оптимизаторы стали замечать только сейчас. Как сообщили в Яндексе, это объясняется тем, что в последнее время стало появляться большое количество сайтов, страницы которых не выдерживают подобной проверки.

Источник: http://www.searchengines.ru/news/archives/008057.html

Стоит заметить, что данный фильтр скосил очень много СДЛ сайтов, примеры:
news2.ru - 10-ть страниц в индексе Яндекса
mintrans.ru - 21 страница в индексе Яндекса

и т.д. Т.е. примеров - масса. И данное поведение со стороны разработчиков Яндекса явно не вызывает симпатии со стороны профессионалов. Имхо я давно ищу лично для себя в Гугле.

среда, 23 сентября 2009 г.

Яндекс - немного цифр или сколько сайтов в интернете?

Объем базы проиндексированных документов без дублей превышает 220 Тбайт, а с учетом дубликатов – 300 Тбайт.

Т.е., если взять самый большой винчестер, который сейчас представлен на рынке, размером 2 Терабайта, то грубо для хранения 220 Терабайт потребуется 110 винчестеров :)

Это более 100 миллионов хостов, имеющих хотя бы одну страницу в базе, а всего роботу Яндекса известно более 500 миллионов хостов.

Т.е. получается, что только 20% известных Яндексу сайтов он пускает в серп.

Источник: http://www.g-news.com.ua/content/view/6161/64/

А сколько всего сайтов в интернете?

Всего, в августе 2009 года, паук компании netcraft.com, насчитал 225'950'957 хостов по всему интернету.

Источник: http://news.netcraft.com/archives/web_server_survey.html

Но я несколько засомневался в достоверности этих данных, когда увидел количество сайтов в России:

Ведь по данным РуЦентра, только делегированных доменов в зоне RU уже более 2 млн. штук.

Посему, отвечая себе на вопрос: "Сколько сайтов в интернете"?, я склоняюсь к данным от Яндекса: уже более 500 миллионов хостов(сайтов)!

вторник, 22 сентября 2009 г.

Платформа INTEL BLKDG41MJ Socket775, iG41 в роли домашнего сервера

Если для ваших задач, по тем или иным причинам не подходит миниатюрный домашний веб-сервер на Atom-e, то предлагаю рассмотреть вариант на материнской плате INTEL BLKDG41MJ в корпусе Super Power MX31 A1 250W:

На фотографии чёрная линейка длиной 15-ть сантиметров. Габариты корпуса: 355*200*160 мм.

Кстати, зацените укладку проводов :) В маленьком корпусе очень важно, чтобы во время эксплуатации какой-либо провод не попал под раздачу кулеру.


Один из минусов данного корпуса - нет места для вентиляторов под винчестеры, поэтому, небольшой винт под систему, я запихнул в отдел над блоком питания, а большой винт под базы данных, я разместил над вентилятором проца. Там явно больше проток воздуха и от вентилятора проца немного достаётся. Данные - наше всё, а систему если что - восстановить можно быстро.



Из плюсов по отношению к Атому:
1) Есть возможность установить полноценную вторую сетевую карту.
2) Максимальный объём оперативной памяти - 8 Гигабайт.
3) Заменяемый процессор на 775 сокете.
4) Есть место для второго винчестера.

Детальная конфигурация:
Корпус: Super Power MX31 A1 250W, mini-ITX, USB & Audio
Материнская плата: INTEL BLKDG41MJ Socket775, iG41, 2*DDR2, SVGA,SATA,ALC888VC 6ch,GLAN,miniITX
Память: DIMM DDR2 (6400) 2048Mb Samsung Original - 2 штуки
Жёсткий диск: 1.5Tb WD Caviar Green WD15EADS SATA-II 7200rpm 32Mb(небольшой винт под систему - у меня уже был)
Процессор: Intel® Core™2 Duo E8400 | 3.00GHz | Socket 775 | 6MB | 1333MHz
Вентилятор: Intel Original Socket 775 for Core™2 Duo, медь
Внешняя сетевая: D-Link DGE-530T 10/100/1000Mbps PCI Adapter

Итого цена ~16'500 рублей(без учёта винта под систему).

Машинка - ураган. Мега компактная. Уровень шума - минимальный. Афигенный вариант, для серьёзного домашнего веб-сервера.

Сводка по тестированию хостингов с 28 августа по 22 сентября


Ссылко-бонусы:

1 место smartlogic.ru
2 место hosting.nic.ru
3 место timeweb.ru
4 место masterhost.ru
9 место Hosting.ua

Как видим, появился новый лидер. Мои сервера все в жопе, но я не хостер и планчики по отвоёвыванию первого места не оставлю просто так :)

Помимо ссылок несколько хостеров из моего ТОП-а получила и несколько новых заказов на днях. В авральном режиме переезжал с инфобокса.

Гео-данные брал из ipgeobase.ru.

Руками составлять сводку уже запарился, поэтому к следующему разу буду автоматизировать и подумываю о вынесении всего этого хозяйства в отдельный проектик. С хостерами мне всё равно дальше морочиться и иметь своевременную и объективную картину - очень важно.

понедельник, 21 сентября 2009 г.

Plesk Panel - родом из России

А знаете ли вы, что одна из лучших панелей управления хостингом разработана в Новосибирске и продаётся компанией Parallels, хозяином которой является наш соотечественник - Сергей Белоусов.

Источник: http://ru.wikipedia.org/wiki/Parallels_Plesk_Panel

Годовая прибыль компании Parallels более 100 миллионов долларов.

Источник: http://slon.ru/articles/137209/

За 108$ в месяц можно купить лицензию на один сервер без ограничения количества доменов + биллинг панель до 1000 аккаунтов. Что наверное является афигенным предложением для любого мелкого хостера.

Источник: http://www.parallels.com/ru/store/plesk/linux/

Теперь я задаюсь вопросом, почему большинство хостеров, с которыми я сотрудничаю, используют свои ужасные самописные панели? Ведь нормальная панель управления для хостинга - это 50% залога успеха. Сомневаюсь, что вкладывая свои силы на разработку и поддержание панели управления им удаётся "экономить".

Хостеры, расскажите, в чём причина?

пятница, 18 сентября 2009 г.

У кого проблема с площадками на infobox.ru?

Попросили пропиарить тему на сапо форуме, дабы таки обратить внимание на проблему: http://forum.sape.ru/showthread.php?t=38139

Отписываемся!

среда, 16 сентября 2009 г.

infobox.ru в борьбе с нагрузкой заблокировали IP сапы

Пиздец - это мягко сказано. Сколько потеряю бабла - будет видно завтра, но сам факт - бесит жутко, вдвойне бесит, то, что я просил их не идти этим путём.

Т.е. идеальный клиент для них видимо такой: платит деньги, не беспокоиться о работоспособности, всех посетителей и роботов можно блокировать, дабы не мешали серверу жить и не нагружали каналы.

FirstVDS.ru - переезжает

Сегодня пришло:

Уважаемый(ая) **********,

Наша компания динамично развивается, подключая к услугам хостинга
всё новых и новых клиентов. К сожалению, последние несколько месяцев
основной помехой активного развития является отсутствие доступных ресурсов
в Датацентрах, на территории которых располагаются наши серверы.

В связи с этим, мы приняли трудное, но к сожалению неизбежное решение,
о сотрудничестве с новым Датацентром (WebDC.ru) и переводе туда подавляющей части
наших серверов.

Датацентр (http://WebDC.ru), построен по самым современным стандартам и оснащён
самым современным и надёжным оборудованием. Датацентр расположен по адресу
"г.Химки, Московская область, Нагорное шоссе дом 2". В WebDC приемлимые цены на размещение,
электричество и каналы связи. И самое главное, электричество и свободные стойки,
в отличии от датацентров Москвы, там есть.

ВНИМАНИЕ 1! Если вы получили это письмо, значит у вас есть VDS находящийся в Датаценте PLUS,
и данный переезд затронет и вас.

ВНИМАНИЕ 2! 21го сентября ваш сервер будет отключён, погружен в автомобиль
и перевезён в новый Датацентр:
- ориентировочное время простоя - около 6 часов
(мы сделаем всё возможное, чтобы оно было меньше);
- все IP-адреса и конфигурация сервера сохранятся в неизменном виде;

ВНИМАНИЕ 3! Если вас не устраивают обозначенные даты переезда или время простоя,
то мы можем перевезти ваш VDS (перенести все данные по сети) в индивидуальном порядке
в период с 16ое по 18ое сентября. Переезд возможен ТОЛЬКО с изменением всех IP-адресов.
Если вы предпочитаете этот вариант, то создайте соответствующий запрос в Центре поддержки
биллинга.


С уважением,
Администрация ISPsystem


Т.е., речь на сколько я понял о том, что они переносят сервера из Москвы в Химки. А о серверах в Иркутстке вроде ни слова?! Из-за которых они собственно и находятся в жопе моего рейтинга и которые было бы логично перенести в первую очередь.

И мне кажется, что причина указана несколько не убедительно. Ведь если не хватает места для новых клиентов, то можно банально начать их размещать на новом месте, плавно сводя "на нет" текущую площадку.

p.s. Поделитесь инфой, какие мониторинги серверов стоят в Гугле, Яндексе, Мейле, Рамблере и прочих компаниях, где серверов 100+. Желательно сразу давать ссылку на картинку вида мониторинга. Спасибо.

пятница, 11 сентября 2009 г.

Вопрос к админам на счёт PAE

Материнская плата: INTEL BLKDG41MJ Socket775, iG41, 2*DDR2, SVGA,SATA,ALC888VC 6ch,GLAN,miniITX.
Стоит 4 Гигабайта памяти(мать по документам должна поддерживать до 8-и).
BIOS "видит" все 4-е. ASP Linux видит 3Гигабайта. Т.е. 1Гигабайт - потерялся.

"Фигня вопрос" - подумал я, скачиваю свеженькое ядро 2.6.31 с kernel.org, make menuconfig - выставляю поддержку до 64Гигов памяти, т.е. включаю PAE, компилю(make -j4, make modules_install, make install), перезагружаюсь, память - увиделась вся. Интегрированная сетевая - отвалилась, т.е. eth0 вообще не видно, хотя настройки все на месте.

Пробовал все ядра начиная с 2.6.26.3 до 2.6.31 - один результат.

В биосе настроек по поводу использования расширенной адресации - нет. Предполагаю, что интегрированная сетевая таки наехала на расширение памяти.

Что делать?