Map | LAMP-dev

Определение поискового робота по User-Agent на PHP

Данный код на PHP поможет определить, кто зашёл на сайт — поисковый робот или обычный пользователь. Если передать в функцию переменную, то в неё, в случае, если это поисковый робот, запишется название поискового робота.

function isBot(&$botname = '') {
	$bots = array(
			'rambler','googlebot','aport','yahoo','msnbot','turtle','mail.ru','omsktele',
			'yetibot','picsearch','sape.bot','sape_context','gigabot','snapbot','alexa.com',
			'megadownload.net','askpeter.info','igde.ru','ask.com','qwartabot','yanga.co.uk',
			'scoutjet','similarpages','oozbot','shrinktheweb.com','aboutusbot','followsite.com',
			'dataparksearch','google-sitemaps','appEngine-google','feedfetcher-google',
			'liveinternet.ru','xml-sitemaps.com','agama','metadatalabs.com','h1.hrn.ru',
			'googlealert.com','seo-rus.com','yaDirectBot','yandeG','yandex',
			'yandexSomething','Copyscape.com','AdsBot-Google','domaintools.com',
			'Nigma.ru','bing.com','dotnetdotcom'
	);
	foreach ($bots as $bot) {
		if (stripos($_SERVER['HTTP_USER_AGENT'], $bot) !== false) {
			$botname = $bot;
			return true;
		}
	}
	return false;
}

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

function isBot(&$botname = '') {

$bots = array(

'rambler','googlebot','aport','yahoo','msnbot','turtle','mail.ru','omsktele',

'yetibot','picsearch','sape.bot','sape_context','gigabot','snapbot','alexa.com',

'megadownload.net','askpeter.info','igde.ru','ask.com','qwartabot','yanga.co.uk',

'scoutjet','similarpages','oozbot','shrinktheweb.com','aboutusbot','followsite.com',

'dataparksearch','google-sitemaps','appEngine-google','feedfetcher-google',

'liveinternet.ru','xml-sitemaps.com','agama','metadatalabs.com','h1.hrn.ru',

'googlealert.com','seo-rus.com','yaDirectBot','yandeG','yandex',

'yandexSomething','Copyscape.com','AdsBot-Google','domaintools.com',

'Nigma.ru','bing.com','dotnetdotcom'

);

foreach ($bots as $bot) {

if (stripos($_SERVER['HTTP_USER_AGENT'], $bot) !== false) {

$botname = $bot;

return true;

}

return false;

}

Вроде большинство записей, которые могут быть в User-Agent различных поисковиков, эта функция покрывает.

0

03.04.2016 13:44

Удаляем всё ненужное из индекса. Пишем robots.txt

В пору, когда я создавал ресурс непонятно для чего, начитался всяких статей по SEO, что если на сайте куча страниц — это хорошо. Да, это хорошо, только если страницы полноценные и на них есть содержательный текст. Но если это мусор из одних ссылок на другие страницы, дубляж контента — это не очень хорошо. В wordpress […]

2

14.03.2013 01:04

Эволюция сети Интернет в США с 1969 по 2007 год

Под катом последовательно представлены изображения, отражающие эволюцию сети Интернет в США с 1969 по 2007 год.

0

24.03.2011 12:42

Пасхалки на сайтах

Конечно же речь не пойдёт о пасхальных яйцах как таковых. Речь пойдёт о других «яйцах». На некоторых сайтах, как и в программах, можно найти пасхальные яйца — пасхалки — Easter Eggs — сюрпризы, о которых сразу и не догадаешься. Иногда даже хозяин сайта не знает о пасхалке, так как зачастую сайт разрабатывается сторонними фирмами, а […]

15

23.03.2011 23:07

Проверка сайта на доступность из разных мест планеты

Как проверить, доступен ли сайт из разных уголков нашей планеты Земля.

3

03.02.2011 22:40

Карта

Публикации ChromeЕщё одна причина полюбить Chrome — индикатор вкладки с музыкойЗапуск веб-приложения как desktop-приложение с помощью Chrome EclipseОтображение скрытых файлов в Remote System Explorer EclipseРабота с удалёнными проектами в Eclipse Galileo FacebookСобытия в Facebook за 20 минут FirefoxПрофили в FirefoxFirefox 4. Официальный релиз. Что нового?На какой CMS работает сайт FreeBSDВосстановление пароля root пользователя в MySQLПолезные […]

Комментарии отключены

12.09.2010 01:24