Доклад на Sempro 17 декабря 2015. Все данные на примере сайта Depositphotos.com

1. Внутренняя оптимизация
больших сайтов

2. Оговорки про NDA

3. Сколько трафика у DP?
ист. Similarweb

4. Что будет, если не сделать
внутреннюю оптимизацию?
– гр. Ленинград
“Взяли говно - получили конфету
Жаль что конфета всё равно из говна!”

5. Распределение усилий
Чистим говно
Базовая
оптимизация
Фишки
70%
20%
10%

6. Большой VS Маленький
• Content is a king
• Крутые конкуренты
• Мелкие изменения имеют
значение
• Мультиязычность
• Много разных видов страниц
• Пространство для
экспериментов
• Огромная масса данных для
анализа

7. На какие факторы в первую
очередь обращать внимание?
1. Доступность и скорость загрузки сайта
2. Количество ссылок на странице
3. Количество входящих внутренних ссылок
4. Чистота кода
5. Контент

8. Работа над задачами

9. Алгоритм
Масштабирование
Анализ данных
Гипотезы
улучшений
Тестирование
раза 3!
Еще больше
трафика :)

10. Держите задачи под
контролем

11. К чему приводят ошибки
- 25% Organic

12. Неудачный эксперимент с картинками
Минус в трафике до -15% Organic Images через 3
недели

13. Анализ поискового
трафика
На какие
страницы
С каких ключей
Качество трафика

14. Максимальное деление
Используем регулярные выражения и различные
представления в GA

15. Отслеживание трафика через Google
Sheets
Неделя День
https://developers.google.com/analytics/solutions/google-analytics-spreadsheet-add-on?hl=en
Google Analytics Spreadsheet Add-on

16. Отслеживаем позиции

17. График по хронологии

18. Убираем ошибки и
улучшаем индексацию

19. Преграды для краулеров
• Краулер запутывается в редиректах
• Структура сайта “плоская”
• Квота тратится на “лишние страницы”
• Не доходит до нужных страниц
Основные проблемы

20. Легко смотрим на редиректы
Убираем лишние, проверяем нужные

21. Используйте сторонние
краулеры
deepcrawl.com

22. Структура

23. Depositphotos

24. Dreamstime

25. Делим сайт на “блоки”
Страницы
поиска
Поиск
картинок
Поиск
векторов
Поиск
видео
Схема с помощью: cacoo.com
Можно разбить на:
• Страницы по типу поиска
• Новые/старые и популярные файлы
• Портфолио авторов
• Специальные подборки

26. Лишние страницы
Все мертвые узлы нужно удалить, а ценный контент
перенести на другие страницы

27. Помогаем краулеру
Наша цель: быстро скармливать наиболее полезный
контент

28. Отсекаем лишние
параметры урлов
Не забываем добавить их в Bing Webmaster и
указать в robots.txt для Яндекса

29. Проставляем нужные теги
• <meta name="robots" content=“noindex, follow" />
- запретим индексацию
• canonical - укажем дубли страниц
• hreflang - укажем языковые версии
• next/prev - для пагинации

30. Если очень много
страниц
На пагинацию ставим noindex, follow

31. canonical

32. hreflang
Указывайте предпочтительный язык только.
Страну указывать только, если есть 2 вида урлов с
разным контентом/таргетингом для одного языка
hreflang=x спорная вещь

33. Следим за краулером

34. Выстраиваем хронологию

35. Лучше индексация -
больше трафика
Рывок в трафике за счет повышения индексации

36. Изображения
Как основной контент сайта

37. Изображения. Что о них
знают поисковые системы?
• Объекты на изображении - живые и неживые
• Действия, которые происходят
• Предполагаемый автор
• Тех параметры (размер, разрешение, место
съемки и т.д.)

38. Google знает об объектах на изображениях
практически все

39. Как определяются объекты
на изображении в Google
• SIFT* - алгоритм компьютерного зрения
• Добавочные алгоритмы распознавания
• Поиск похожих изображений
• Метатеги (alt/title)
• Разметка
*Scale-invariant feature transform

40. Это не работает
• Повернуть
• Отобразить по
горизонтали/вертикали
• Растянуть
• Обрезать
• Наложить свой водяной
знак
• И т.д.

41. Для высоких позиций по
images важен размер

42. Метатеги
Статических/динамических страниц и изображений

43. Смотрим дубли метатегов
Но мы то знаем, что их больше :)

44. Используем сторонние
краулеры
Для изучения от 100K до
1 млн URL
Для изучения до100K
URL

45. Используйте шаблоны для
создания всех метатегов
1. [Название файла] - [Категория] [Тип файла]
by [Автор файла]
2. [Название файла] - Stock Editorial
Photography of [Национальность] [Возраст]
[Пол]

46. Нужно ли уникализировать
метатеги для страниц в
“noindex,follow”?
ДА!

47. Sitemaps

48. Sitemaps увеличивают количество
страниц в поиске
Особенно актуально для Яндекса

49. Полезные приемы
• Пагинации
• Отдающие ошибки 404,
503 и т.д.
• С 301 редиректом
• Не нужные для вашего
сайта
Исключайте страницы
• Sitemap по разделам
сайта/типам контента
• Sitemap для новых
файлов
• Обновляйте почаще
Добавьте

50. Например
• Sitemap: http://ru.depositphotos.com/sitemap-
keyword/sitemap.xml
• Sitemap: http://ru.depositphotos.com/sitemap-
image/sitemap.xml
• Sitemap: http://ru.depositphotos.com/sitemap-
video/sitemap.xml

51. Фреш фактор. Быстрое
попадание страниц в
индекс

52. Sitemap с новыми
файлами
• RSS sitemap только с новыми файлами
• https://pubsubhubbub.appspot.com

53. Страницы с новыми файлами

54. Настраиваем
last-modified и etag
Для лучшей индексации нужного контента

55. Как работает last-modified и etag
Браузер
запрашивает
страницу
Заголовок
Last-Modified
Браузер
положил стр в
кеш
Новый запрос
с If-Modified-
Since
Ответ сервера
304 Not
Modified
Браузер
ложит стр и ее
Etag в кеш
Новый запрос
страницы
Новый запрос
с If-None-
Match
Ответ сервера
304 Not
Modified
Etag
одинаков
Временная
метка прежняя

56. Легко проверяем
• http://www.microsoft.com/search/Tools/
• https://varvy.com/tools/if-modified/

57. Перелинковка

58. Готовим страницы
1. Уменьшаем количество ссылок на странице
2. Удаляем лишние ссылки
3. Добавляем новые - новые блоки

59. Уменьшаем количество ссылок

61. Скрываем блоки, делаем кнопки

62. Как безопасно скрыть
ссылку
• Реально сложный яваскрипт в котором
размещена ссылка
• Заменить <a href=“[URL]"> на <span> или <a
data-href="[URL]">

63. Легко проверяем ссылки на странице:
http://www.recipdonor.com

64. Определяем возможные места для блоков

65. Алгоритм создания нового
блока перелинковки
Ключевые
слова?
На какие
страницы?
Сколько
нужно
ссылок?
Какие анкоры?

66. Слова из скольки слов
наиболее полезны?

67. Используйте простой SQL

68. Сводим данные

69. Теги
Сколько тут блоков перелинковки?

70. Представьте себе, что:
• Вы знаете, какие теги у каждого файла
• Вы можете разрешить или запретить к
добавлению конкретные теги
• Вы знаете их частотность
• и позиции в Google

71. Управляйте своими блоками
перелинковки

72. И будет счастье :)

73. Игорь Баньковский
bankovskyihor

74. Спасибо!