HOME FORUMS MEMBERS RECENT POSTS LOG IN  
× Авторизация
Имя пользователя:
Пароль:
Нет аккаунта? Регистрация
Баннер 1   Баннер 2

ANTICHAT — форум по информационной безопасности, OSINT и технологиям

ANTICHAT — русскоязычное сообщество по безопасности, OSINT и программированию. Форум ранее работал на доменах antichat.ru, antichat.com и antichat.club, и теперь снова доступен на новом адресе — forum.antichat.xyz.
Форум восстановлен и продолжает развитие: доступны архивные темы, добавляются новые обсуждения и материалы.
⚠️ Старые аккаунты восстановить невозможно — необходимо зарегистрироваться заново.
Вернуться   Форум АНТИЧАТ > БЕЗОПАСНОСТЬ И УЯЗВИМОСТИ > Песочница
Перезагрузить страницу Индекс гугла и яндекса
   
Ответ
 
Опции темы Поиск в этой теме Опции просмотра

  #1  
Старый 04.06.2015, 18:07
Dench
Новичок
Регистрация: 02.06.2015
Сообщений: 7
Провел на форуме:
1677

Репутация: 0
По умолчанию
Кто-нибудь может подсказать, как получить количество страниц в индексе Yandex и Google?

Вроде в Yandex можно использовать XML-лимиты, но не всегда они есть в наличии. Есть какой-нибудь способ спарсить в лоб точное значение количества страниц в индексе?

У Google есть некий публичный json-овский API (под рукой ща ссылки на него нет), но там данные совсем не совпадают с теми, которые показывает Google на странице с результатами поиска.
 
Ответить с цитированием

  #2  
Старый 04.06.2015, 21:47
assmaday
Новичок
Регистрация: 03.02.2013
Сообщений: 13
Провел на форуме:
3746

Репутация: 0
По умолчанию
Для твоего сайта?

Можно юзать статистику из

https://webmaster.yandex.ua/

https://www.google.com/analytics/web/

Ну или пaрсить по дорку site:мой_сайт))

!!! Можно под каждый сайт пилить `пользовательский поиск гугл для сайта`Вот у пользовательского JSON имеется
 
Ответить с цитированием

  #3  
Старый 05.06.2015, 07:00
Dench
Новичок
Регистрация: 02.06.2015
Сообщений: 7
Провел на форуме:
1677

Репутация: 0
По умолчанию
Не. Забыл уточнить - для произвольного сайта
 
Ответить с цитированием

  #4  
Старый 24.06.2015, 13:37
Jorik
Новичок
Регистрация: 16.06.2015
Сообщений: 4
Провел на форуме:
962

Репутация: 0
По умолчанию
Расширения есть для браузеров специальные, типа RDS bar
 
Ответить с цитированием

  #5  
Старый 24.06.2015, 15:54
b3
Постоянный
Регистрация: 05.12.2004
Сообщений: 647
Провел на форуме:
1698585

Репутация: 818


По умолчанию
Кк по мне лучше всего парсить эти данные из разных источников ротируя их. Из одного парсить не вариант ибо рано или поздно тебя забанят а если парсить будешь и десятка таких сервисов сможешь дольше жить.
 
Ответить с цитированием

  #6  
Старый 03.07.2015, 19:30
assmaday
Новичок
Регистрация: 03.02.2013
Сообщений: 13
Провел на форуме:
3746

Репутация: 0
По умолчанию
Повторюсь, создаешь пользовательский поиск гугл, вбиваешь туда нужный сайт, можно несколько, и юзаешь его, выдача будет только для выбранных сайтов ну и плюс там JSON имеется, таким образом можно дорки по конкретным сайтам искать))
 
Ответить с цитированием
Ответ



« Предыдущая тема | Следующая тема »


Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 


Быстрый переход




ANTICHAT ™ © 2001- Antichat Kft.