- Главная
- Разное
- Дизайн
- Бизнес и предпринимательство
- Аналитика
- Образование
- Развлечения
- Красота и здоровье
- Финансы
- Государство
- Путешествия
- Спорт
- Недвижимость
- Армия
- Графика
- Культурология
- Еда и кулинария
- Лингвистика
- Английский язык
- Астрономия
- Алгебра
- Биология
- География
- Детские презентации
- Информатика
- История
- Литература
- Маркетинг
- Математика
- Медицина
- Менеджмент
- Музыка
- МХК
- Немецкий язык
- ОБЖ
- Обществознание
- Окружающий мир
- Педагогика
- Русский язык
- Технология
- Физика
- Философия
- Химия
- Шаблоны, картинки для презентаций
- Экология
- Экономика
- Юриспруденция
Обработка статистики в системе управления баннерной рекламой презентация
Содержание
- 1. Обработка статистики в системе управления баннерной рекламой
- 2. Общая архитектура системы
- 3. Размеры рекламной сети Более 200 000 рекламных
- 4. Нагрузка на систему 15 000 запросов к
- 5. Число регистрируемых событий
- 6. Распределение нагрузки Балансирвка запросов с помощью аппаратного
- 7. Особенности бизнес модели Качество сервиса определяется
- 8. Что регистрируем Показы Клики Транзакции
- 9. Комиссия за клики и транзакции
- 10. Основные проблемы Очень много данных Очень
- 11. Способы уменьшения объема данных Предварительная группировка Проверка кликов
- 12. Способы ускорения обработки Ускорение загрузки там, где
- 13. Этапы обработки статистики Загрузка логов с
- 14. Проблемы базы данных Гигантский объем таблиц с
- 15. Предварительное заполнение БД
- 16. Денормализация данных
- 17. Отображение статистики
- 18. Почему мы кэшируем данные Запросы часто повторяются
- 19. Контроль работоспособности Остановка системы приводит к
- 20. Основные индикаторы Число необработанных файлов на сервере
- 21. Что мы контролируем Баннерные сервера Сервер обработки статистики База данных
- 22. Как мы контролируем Готовые решения для
- 23. Как защититься от сбоев Раньше знаешь,
- 24. Вопросы? Email: artem@gramant.ru
Общая архитектура системы
Слайд 3Размеры рекламной сети
Более 200 000 рекламных площадок
Более 20 000 рекламодателей
Более 450
000 000 регистрируемых событий ежедневно
Слайд 4Нагрузка на систему
15 000 запросов к баннерным машинам в секунду
Около 500
запросов к порталу в секунду
Слайд 6Распределение нагрузки
Балансирвка запросов с помощью аппаратного LB
Повышение отказоустойчивости
Взаимозаменяемость баннерных машин
Дублирование ключевых
компонентов системы
Слайд 7Особенности бизнес модели
Качество сервиса определяется количеством участников
Отсутствует комиссия за показы
Площадки
заинтересованы в эффективном размещении
Вовлёченность в процесс
Вовлёченность в процесс
Слайд 10
Основные проблемы
Очень много данных
Очень мало времени на обработку
Система должна работать непрерывно
Слайд 12Способы ускорения обработки
Ускорение загрузки там, где это возможно
Задачи не должны блокировать
друг друга
Запуск процессов по расписанию
Взаимосвязанность задач – это хорошо
Запуск процессов по расписанию
Взаимосвязанность задач – это хорошо
Слайд 13
Этапы обработки статистики
Загрузка логов с баннерных серверов
Предварительная группировка данных
Проверка кликов
Загрузка данных
в БД
Расчет статистики
Расчет статистики
Слайд 14Проблемы базы данных
Гигантский объем таблиц с показами и кликами
Необходимо блокировать загрузку
на время расчета статистики
Слайд 18Почему мы кэшируем данные
Запросы часто повторяются
Статистика обновляется по расписанию. Если нет
новых данных, зачем обращатся к БД?
Сортировка средствами БД работает медленнее
Сортировка средствами БД работает медленнее
Слайд 19
Контроль работоспособности
Остановка системы приводит к лавинообразному накоплению необработанной информации
Клиенты хотят видеть
свои данные
Обработка статистики используется для биллинга
Обработка статистики используется для биллинга
Слайд 20Основные индикаторы
Число необработанных файлов на сервере
Задержка загрузки файлов с баннер сервера
Задержка
обработки статистики
Слайд 22
Как мы контролируем
Готовые решения для контроля на аппаратном уровне (Nagios)
Собственные разработки
для контроля на уровне приложения
Слайд 23
Как защититься от сбоев
Раньше знаешь, больше спишь
Проблему нужно предвидеть
С проблемой нужно
научиться бороться
