Александр Черников: Использование netmap

•

1 like•2,937 views

Про netmap наверняка слышал каждый, кто отслеживает новости, связанные с FreeBSD. В докладе рассмотрим, чем хорош netmap, что уже сделано на его основе, а что только планируется сделать.

Technology Education

Using netmap

Alexander Chernikov
Network Engineer

What is Netmap?

• All-in-one solution? No.
– Part of framework to build solutions? Yes.

• Efficient Instrument for I/O
• Other instruments needed
–
–
–
–

4

Memory allocator (like UMA in userspace)
Packet chaining libraries (handling fragments)
Lockless queues
Flow inspection primitives

Similar tools

• Intel DPDK
– WindRiver INP

• PacketShader I/O engine
• PF_RING

5

Key Features

• User-space
• Zero-copy
• Batching
• Simplicity
• Hardware independent

6

Programming simplicity

• Get NIC info
– ioctl(fd, NIOCGINFO, &nmr)

• Open HW queue (or entire NIC)
– ioctl(fd, NIOCREGIF, &tifreq)

• Mmap ring memory
– mmap(0, mmap_size, .., fd, 0);

• Go!
– select() / poll() on fd

7

Using NIC rings for balancing
• Thread-per-ring model
• Process-per-ring model

8

Framework simplicity

• Targets to different NICs
• ~400 lines per driver
– Not many places for bugs to hide
– Complicated drivers code (not related to nemap)

• Currently supported
–
–
–
–

9

if_em(4)
igb(4)
ixgbe(4)
re(4)

Existing open-source users

• Pkt-gen
• libpcap consumers
• Ipfw
• Click router
• Sandstorm web server

10

Users: pkt-gen
• /usr/src/tools/tools/netmap/
• Linerate sending/receiving data
• Src/Dst address wildcards
• Features
– MAC rewriting
– IP src/dst wildcards
– PCAP replay

• Note
– Check flow control ( dev.ix.*.fc )
– Check older NICs ( Intel 82598 )
11

Users: libpcap consumers

• /usr/src/tools/tools/netmap/
• Transparent
• s/lpcap/lnetmap/
• Improvements in 'easy' packet processing

12

Users: ipfw

• 20120813 version
• On-going work to ease kernel/userland sync
• Pros
– Batching

• Cons
– Not all features work (iface matching, fwd, etc..)

13

Users: Sandstorm
• All-in-one app
– ethernet library
– libtcpip as light-weight TCP stack
– libmnio as netmap i/o abstraction

• Arch
–
–
–
–

optimizied for specific task
small number of components
ability to do easy cross-layering
(mostly) lockless scheme

• Features
– Very high throughput for small files
14

Future: routing

• /usr/ports/net/netmap_router
• Near to zero configuration
• Existing utilities to control interfaces/routing
• Kernel for control plane
• Netmap appliance for data plane
• Modified routing daemon for route export

15

Alexander Chernikov
Network Engineer
melifaro@yandex-team.ru

Thank you

What's hot

Real time operating system

Bharti Goyal

LAS16-400: Mini Conference 3 AOSP (Session 1) Speakers: Thomas Gall, Bernhard Rosenkränzer Date: September 29, 2016 ★ Session Description ★ The Android Open Source Project is one community which is strategic to Linaro and it’s members. The purpose of this mini conference is to gather fellow Android engineers together from the community, member companies, and Linaro to discuss engineering activities and improve collaboration across different groups. Within this mini conference we encourage discussion and presentations to advance engineering topics, forge consensus and educate each other. The tentative agenda for this mini conference includes : - Quick introduction - Filesystems - Between requirements for encryption and standing concerns about degrading performance as an Android file system age, let’s have some discussion involving current data, known issues and towards improvements in this area for Android. - HAL consolidation - Review current status and discuss next steps to work on. One build for many devices: device/build configuration. Next features and platforms to add. Gaps in HiKey support vs. AOSP build. - Graphics - YUV support in mesa and hwc. - WiFi and sensor HAL status and next steps - New developments with AOSP + the Kernel - With regards to the Google Common Kernel tree and upstream Linux kernel activities related to Android, there are a few topics up for discussion: - - Updates on HiKey in AOSP - - EAS in common.git & integration with AOSP userspace - - New Sync API in 4.6+ kernels, and how it will affects graphics drivers - AOSP transition to clang - As everyone knows GCC in AOSP has been deprecated. Let’s cover current status, issues and next steps. Let’s also discuss the elephant in the room, building the kernel with clang. - Out of tree AOSP User space Patches - This is a discussion with the goal of organized action to see forward progress on AOSP user space patches that aren’t in AOSP for whatever reason. - Android is used in some environments where booting can be frequent and affect the product experience. Do you want to wait for a minute while your car boots? We’ll spend time brainstorming on improving Android boot time. ★ Resources ★ Etherpad: pad.linaro.org/p/las16-400 Presentations & Videos: http://connect.linaro.org/resource/las16/las16-400/ ★ Event Details ★ Linaro Connect Las Vegas 2016 – #LAS16 September 26-30, 2016 http://www.linaro.org http://connect.linaro.org

LAS16-400: Mini Conference 3 AOSP (Session 1)

Linaro

1 artem mygaiev - testing open-source software in embedded devices

Ievgenii Katsan

For the full video of this presentation, please visit: http://www.embedded-vision.com/platinum-members/luxoft/embedded-vision-training/videos/pages/may-2016-embedded-vision-summit For more information about embedded vision, please visit: http://www.embedded-vision.com Alexey Rybakov, Senior Director at LUXOFT, presents the "Making Computer Vision Software Run Fast on Your Embedded Platform" tutorial at the May 2016 Embedded Vision Summit. Many computer vision algorithms perform well on desktop class systems, but struggle on resource constrained embedded platforms. This how-to talk provides a comprehensive overview of various optimization methods that make vision software run fast on low power, small footprint hardware that is widely used in automotive, surveillance, and mobile devices. The presentation explores practical aspects of deep algorithm and software optimization such as thinning of input data, using dynamic regions of interest, mastering data pipelines and memory access, overcoming compiler inefficiencies, and more.

"Making Computer Vision Software Run Fast on Your Embedded Platform," a Prese...

Edge AI and Vision Alliance

Lec 9-os-review

Mothi R

Asymmetric multi-processing (AMP) systems fulfill the need for high performance and real-time by combining the responsiveness of a MCU with the processing power of an application processor which runs a full OS. This talk will present a technical overview on asymmetric multiprocessing platforms focussing on motivations, use cases and how to handle interprocess communication between MCU and MPU in practice.

Asymmetric Multiprocessing - Kynetics ELC 2018 portland

Nicola La Gloria

Building a host based firewall on top of CFEngine

Nick Anderson

From the Archives: Future of Supercomputing at Altparty 2009

Olli-Pekka Lehto

What is special about community-industry collaboration around an open architecture like RISC-V is that the community can join development around key kernel subsystems in parallel with the semiconductor companies and manufacturers as they are producing the new chipsets and boards. Open silicon design, open board design, and open kernel software speeds bring-up of new boards and fosters greater innovation due to the diversity of talent contributing to the technology. For many kernel developers, tackling RISC-V is becoming harder to resist now that commercially viable and scalable hardware has begun to enter the market. A private beta program launched by the BeagleBoard Foundation in March 2021 placed an affordable, yet powerful prototype RISC-V board into the hands of Roman Shaposhnik. What did Roman do? He joined a diverse team of software and hardware hackers to tackle bringing up Linux on the new board. In this talk, Roman will tell you about his experience porting Alpine Linux and LF Edge EVE-OS to the new RISC-V architecture.

RISC-V on Edge: Porting EVE and Alpine Linux to RISC-V

ScyllaDB

Microprocessors are used extensively in the design of any computing facility. It contains units to carry out arithmetic and logic calculations, fast storage in terms of registers and associated control logic to get instructions from memory and execute them. A number of devices can be interfaced with them to develop a complete system application. On the other hand, microcontrollers are single chip computers, integrating processor, memory and other peripheral modules into a single System-on-Chip (SoC). Apart from input-output ports, the peripherals often include timers, data converters, communication modules, and so on. The single chip solution makes the footprint of the computational element small in the overall system package, eliminating the necessity of additional chips on board. However, there exists a large range of such products. While the simpler microcontrollers are cheap, their capabilities (in terms of program size and analog and digital peripherals) are also limited. Such processors may be suitable for small applications. Microcontrollers like 8051, PIC belong to this category. On the other hand, advanced microcontrollers are often much more powerful, comparable to the very advanced microprocessors. The AVR and ARM processors are of this category.

Micro-controllers (PIC) based Application Development

Emertxe Information Technologies Pvt Ltd

I doc chip

ammarazkar1

What's hot (11)

Real time operating system

LAS16-400: Mini Conference 3 AOSP (Session 1)

1 artem mygaiev - testing open-source software in embedded devices

"Making Computer Vision Software Run Fast on Your Embedded Platform," a Prese...

Lec 9-os-review

Asymmetric Multiprocessing - Kynetics ELC 2018 portland

Building a host based firewall on top of CFEngine

From the Archives: Future of Supercomputing at Altparty 2009

RISC-V on Edge: Porting EVE and Alpine Linux to RISC-V

Micro-controllers (PIC) based Application Development

I doc chip

Similar to Александр Черников: Использование netmap

Ariel Waizel discusses the Data Plane Development Kit (DPDK), an API for developing fast packet processing code in user space. * Who needs this library? Why bypass the kernel? * How does it work? * How good is it? What are the benchmarks? * Pros and cons Ariel worked on kernel development at the IDF, Ben Gurion University, and several companies. He is interested in networking, security, machine learning, and basically everything except UI development. Currently a Solution Architect at ConteXtream (an HPE company), which specializes in SDN solutions for the telecom industry.

Introduction to DPDK

Kernel TLV

Parallel Processors (SIMD)

Ali Raza

Parallel Processors (SIMD)

Ali Raza

Microprocessor.ppt

safia kalwar

Netmap presentation

Amir Razmjou

pps Matters

Bangladesh Network Operators Group

Lec 10-linux-review

abinaya m

Lecture syn 024.cpld-fpga

Srikanth Pasumarthy

Shak larry-jeder-perf-and-tuning-summit14-part1-final

Tommy Lee

Network Processor - 2021.pptx

ssuserdfb2da

Server Tips

liqingfang126

Multithreading computer architecture

Haris456

dsp-processor-ppt.ppt

Krishnavenimanickam2

In this video from the 2015 Stanford HPC Conference, Pavel Shamis from ORNL presents: Preparing OpenSHMEM for Exascale. "OpenSHMEM is a partitioned global address space (PGAS) one-sided communications library that enables remote memory access (RMA) across processing elements (PEs). Its API allows data to be transferred from one PE memory space to another PE’s symmetric memory space; decoupling the data transfers from synchronizations. OpenSHMEM is useful for applications that are latency driven or that have irregular communication patterns, because its one-sided API can be mapped very efficiently to hardware (e.g. RDMA interconnects, etc), and its one-sided programming model helps the overlapping of communication with computation. Summit is Oak Ridge National Laboratory’s next high performance supercomputer system that will be based on a many core/GPU hybrid architecture. In order to prepare OpenSHMEM for future systems, it is important to enhance its programming model to enable efficient utilization of the new hardware capabilities (e.g. massive multithreaded systems, accesses different type memories, next generation of interconnects, etc). This session will present recent advances in the area of OpenSHMEM extensions, implementations, and tools.” Watch the video: http://insidehpc.com/2015/02/video-preparing-openshmem-for-exascale/ See more talks in the Stanford HPC Conference Video Gallery: http://wp.me/P3RLHQ-dOO

Preparing OpenSHMEM for Exascale

inside-BigData.com

NUMA-aware thread-parallel breadth-first search for Graph500 and Green Graph5...

Yuichiro Yasui

While the performance delivered by Spark has enabled data scientists to undertake sophisticated analyses on big and complex data in actionable timeframes, too often, the process of manually configuring the underlying Spark jobs (including the number and size of the executors) can be a significant and time consuming undertaking. Not only it does this configuration process typically rely heavily on repeated trial-and-error, it necessitates that data scientists have a low-level understanding of Spark and detailed cluster sizing information. At Alpine Data we have been working to eliminate this requirement, and develop algorithms that can be used to automatically tune Spark jobs with minimal user involvement, In this presentation, we discuss the algorithms we have developed and illustrate how they leverage information about the size of the data being analyzed, the analytical operations being used in the flow, the cluster size, configuration and real-time utilization, to automatically determine the optimal Spark job configuration for peak performance.

Spark Autotuning: Spark Summit East talk by Lawrence Spracklen

Spark Summit

Spark Autotuning - Spark Summit East 2017

Alpine Data

4th generation intel core processoer

Aanamika Nath

Sparc t4 1 system technical overview

solarisyougood

Hardware-aware thread scheduling: the case of asymmetric multicore processors

Achille Peternier

Similar to Александр Черников: Использование netmap (20)

Introduction to DPDK

Parallel Processors (SIMD)

Microprocessor.ppt

Netmap presentation

pps Matters

Lec 10-linux-review

Lecture syn 024.cpld-fpga

Shak larry-jeder-perf-and-tuning-summit14-part1-final

Network Processor - 2021.pptx

Server Tips

Multithreading computer architecture

dsp-processor-ppt.ppt

Preparing OpenSHMEM for Exascale

NUMA-aware thread-parallel breadth-first search for Graph500 and Green Graph5...

Spark Autotuning: Spark Summit East talk by Lawrence Spracklen

Spark Autotuning - Spark Summit East 2017

4th generation intel core processoer

Sparc t4 1 system technical overview

Hardware-aware thread scheduling: the case of asymmetric multicore processors

More from Yandex

Одна из наиболее часто возникающих задач в бизнес-аналитике для компаний — это предсказание оттока клиентов. Ведь если заранее знать, что клиент собирается уйти к конкуренту, его можно попытаться остановить. Задача будет рассмотрена на примере прогнозирования оттока игроков из World of Tanks.

Предсказание оттока игроков из World of Tanks

Yandex

Лекция Сергея Царика в Школе вебмастеров: «Как принять/организовать работу по поисковой оптимизации сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Основные этапы и методы поисковой оптимизации Рассмотрим проработку стратегии продвижения, планирование ресурсов на проект, поймем как нужно прорабатывать семантическое ядро для продвижения, разберемся с очередностью всех работ. Разложим по полочкам основные приемы оптимизации в связке с внутренними и внешними факторами ранжирования поисковых систем, а также в связке с поведенческими факторами и характеристиками. Разберемся с тем, что же должен делать оптимизатор для достижения топа. Что должно включать в себя ТЗ на поисковую оптимизацию Разберемся с основными блоками технического задания от оптимизатора, с тем, каким оно должно быть с точки зрения подачи информации и ее глубины. Сравнение in-house подхода и агентства Рассмотрим все «за» и «против» оптимизатора в штате компании и вне её. На основе каких метрик нужно оценивать эффективность оптимизаторской работы Выделим ключевые показатели эффективности работы оптимизатора, рассмотрим процесс их измерения, динамику, разберемся с возможными «миксами» и их связкой с мотивацией подрядчика.

Как принять/организовать работу по поисковой оптимизации сайта, Сергей Царик,...

Yandex

Лекция Юлия Тихоход в Школе вебмастеров: «Структурированные данные на поиске» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Что такое микроразметка и в чём её польза Что такое микроразметка (семантическая разметка, семантическая микроразметка) и кому она нужна. Очень кратко — всё, что я знаю о применении семантической разметки поисковыми системами и другими веб-сервисами. Передача данных в машиночитаемом виде Какие ещё есть способы передать данные о сайте поисковым системам кроме микроразметки, особенности разных способов. Что бывает с плохими вебмастерами, которые пытаются обмануть поисковые системы и передать неверные данные. Типы разметки Из чего состоит микроразметка, какие бывают словари и синтаксисы. Популярные сочетания словарей и синтаксисов, как правильно выбирать нужную комбинацию для своего сайта. Передача данных об интернет-магазине Разбор семантической разметки: что в принципе доступно для разметки в интернет-магазине, что это даёт, а что можно не размечать вовсе. Проверка правильности микроразаметки Ошибки в микроразметке, способы их обнаружения и исправления. Популярные валидаторы микроразметки. Какие ошибки непременно нужно исправлять, а что можно игнорировать.

Структурированные данные, Юлия Тихоход, лекция в Школе вебмастеров Яндекса

Yandex

Лекция Сергея Лысенко в Школе вебмастеров: «Представление сайта в поиске» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Основные элементы сниппетов: как влиять на их формирование Как по внешнему виду и содержанию визитки судят, стоит ли «связываться», так и по представлению сайта на странице выдачи пользователи решают, стоит ли переходить на сайт. Как изменить представление сайта в выдаче поисковых систем? Что может повлиять на CTR и что для этого нужно сделать? Рассмотрим фавиконки, навигационные цепочки, быстрые ссылки и многое, многое другое. Зачем нам заголовок: как им управлять Что должно быть в заголовке, а чего уж точно не стоит делать. Как избавиться от мусора и расставить акценты. И как это скажется на представлении сайта в поиске. Основной контент аннотации и мета-описания: что нам они дают Сниппет — зачем он нужен? Как обрабатываются данные для аннотаций? Что в сниппете помогает, а что мешает пользователю сориентироваться? Как подсказать поисковой системе, что выводить в сниппете? От Open Graf до schema.org. Инструменты, возможности, рекомендации.

Представление сайта в поиске, Сергей Лысенко, лекция в Школе вебмастеров Яндекса

Yandex

Лекция Екатерины Гладких в Школе вебмастеров: «Плохие методы продвижения сайта» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Как завязывают с портянками Как использовать wordstat, чтобы превратить текст в SEO-портянку. Как Яндекс определяет текстовый спам и какие ограничения могут быть применены к сайтам, злоупотребляющим ключевыми словами. Эффектное размещение SEO-ссылок Какие бывают SEO-ссылки и как они классифицируются в базе Яндекса. В чём отличие SEO-ссылок от рекламы. Как размещать SEO-ссылки наиболее эффектно. Методы борьбы против ссылочного спама – АГС и Минусинск. Снятие ссылок. Поведенческие факторы, медитативные практики Популярные сервисы накрутки: как это работает и как это не работает. Методы накрутки и методы борьбы с мошенничеством. Примеры пользовательских сессий и кто на самом деле посещает ваш сайт. Как выйти из-под санкций за накрутку поведенческих факторов.

Плохие методы продвижения сайта, Екатерины Гладких, лекция в Школе вебмастеро...

Yandex

Лекция Сергея Царика и Антона Роменского в Школе вебмастеров: «Основные принципы ранжирования» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Как работает поиск При запросе пользователя к поисковой системе происходит множество процессов, которые позволяют дать наиболее релевантный ответ. Рассмотрим основные механизмы формирования выдачи: формулы, Матрикснет, персонализацию и обновления. Что учитывается при ранжировании сайтов Так как сайты разные и по-разному решают пользовательские задачи, при ранжировании поисковой системе нужно учитывать множество факторов. Поговорим о том, что обязательно должно быть на сайте для правильной индексации. Ещё о факторах ранжирования Какой контент действительно важен и как его правильно представить. Для правильного ранжирования сайта важно разобраться с его региональной привязкой. Разберёмся, какой регион присваивать сайту и как сделать это правильно. Реальный кейс долгосрочной работы над позициями Посмотрим на реальном примере, как изменялись основные жизненные характеристики (трафик, конверсии) сайта на пути в топ выдачи поисковых систем.

Основные принципы ранжирования, Сергей Царик и Антон Роменский, лекция в Школ...

Yandex

Лекция Александра Смирнова в Школе вебмастеров: «Основные принципы индексирования сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Как поиск находит страницу, её путь до появления в поиске Поисковые системы постоянно собирают информацию о страницах в интернете. Как же это происходит и как добавить страницы своего сайта в поиск? Проверка индексирования сайта. Как управлять роботом (зеркала, sitemap, robots.txt) Множество сайтов в интернете доступны сразу по нескольким адресам. Как указать поисковому роботу на основной и как скорректировать индексирование? Особенности индексирования Современные сайты используют различные технологии в своей работе. Рассмотрим, как настроить их правильно и сделать контент доступным для робота. Как улучшить индексирование (дубли, HTTP-ответ, удаление из поиска) В поиск попадают различные страницы, которые известны роботу. Какие нужны, а какие нет? Как повлиять на их индексирование?

Основные принципы индексирования сайта, Александр Смирнов, лекция в Школе веб...

Yandex

Лекция Александра Лукина в Школе вебмастеров: «Мобильное приложение: как и зачем» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Проектирование. Быть или не быть Обсудим обоснование для разработки мобильного приложения — какую ценность оно может принести для проекта и бизнеса. Определим основные типы приложений и сценарии использования. Рассмотрим основные технологии и выбор оптимальных для конкретных задач. ТЗ — как оценить и какие особенности необходимо учесть. Разработка. Важные детали На что обратить внимание на этапе разработки и тестирования, заметки по специфике мобильных экосистем. Выбираем арсенал SDK для всестороннего анализа проекта в полёте. Публикация и продвижение Кратко рассмотрим специфику Google Play и AppStore. Проведём экскурс в мир мобильного маркетинга, подчеркнём сходства с вебом и отличия от него. Рассмотрим ключевые метрики для анализа продукта и процесса продвижения, а также способы их повышения.

Мобильное приложение: как и зачем, Александр Лукин, лекция в Школе вебмастеро...

Yandex

Лекция Олега Ножичкина в Школе вебмастеров: «Сайты на мобильных устройствах» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Статистика и тренды по мобильному интернету Основные показатели мобильного интернет-рынка. Тенденции роста мобильной аудитории. Новые алгоритмы ранжирования поисковых систем Адаптация сайта к мобильным пользователям и её влияние на позиции в поисковой выдаче. Возможности для бизнеса в мобильном вебе Мобильный сайт позволяет воспользоваться дополнительными возможностями взаимодействия с пользователем. Рассмотрим конкретные примеры. Мобильный сайт и приложение — в чём разница Чем отличается мобильное приложение от мобильно сайта. Какие преимущества и недостатки у каждого варианта. Представление сайтов на мобильных устройствах Адаптивные сайты. Мобильные сайты. Сайты для десктопа. Чем они отличаются, какие преимущества у каждого типа и нужно ли переключаться между мобильной и десктоп-версиями? Удобный мобильный сайт для пользователя Поведение пользователей на мобильном сайте. Отличия от десктопа, достижение целей и простые правила увеличения конверсии. Специфика разработки мобильного сайта Особенности проектирования, разработки и тестирования сайтов. Инструменты для разработки мобильных сайтов Готовые инструменты для проектирования и тестирования. Примеры фреймворков.

Сайты на мобильных устройствах, Олег Ножичкин, лекция в Школе вебмастеров Янд...

Yandex

Лекция Юрия Батиевского в Школе вебмастеров: «Качественная аналитика сайта» https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Что мы хотим от аналитики сайта На какие вопросы должна отвечать аналитика сайта. Как аналитика сайта связана с аналитикой бизнеса. На какие блоки можно поделить аналитику онлайн-процессов. Какой должна быть идеальная аналитическая система. Анализ общих показателей бизнеса Как построить систему аналитики бизнеса в интернете. Ключевые показатели эффективности (KPI). Построение воронки продаж. Business Intelligence — сквозная аналитика всех процессов. Обзор инструментов для анализа сайта и аудитории Яндекс.Метрика и Google Analytics как основа веб-аналитики. Инструменты для веб-мастеров. Инструменты для анализа действий пользователей (Kiss-metrics, Woopra, Mixpanel). Системы для подсчета целевых действий, CPA и ROMI. Анализ каналов привлечения клиентов Как анализировать источники трафика. Популярные инструменты для анализа. Пройти тест по теме Процесс развертывания системы аналитики сайта Подготовка к установке систем веб-аналитики. Тонкости установки и настройки трекеров. Подключение коллтрекинга и дополнительных инструментов фиксации целевых действий. Настройка пользовательских сценариев. Пример по анализу пользовательского сценария.

Качественная аналитика сайта, Юрий Батиевский, лекция в Школе вебмастеров Янд...

Yandex

Лекция Петра Аброськина в Школе вебмастеров: «Что можно и что нужно измерять на сайте». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Базовые принципы веб-аналитики Как работает веб-аналитика и какие подводные камни есть в учёте и анализе данных. Как правильно работать с данными. Основные метрики и термины Посетители, визиты, глубина просмотра, время на сайте — какие метрики важны и чем они отличаются. Как выбрать правильный KPI Самый важный этап в веб-аналитике и продвижении сайта. Какие цели выбрать интернет-магазину, сайту услуг, контентному проекту и т.д. Ключевые группы отчетов и применение знаний на практике Семь главных типов отчётов для бизнеса. Анализ контекстной рекламы, SEO и контента сайта — на конкретных примерах.

Что можно и что нужно измерять на сайте, Петр Аброськин, лекция в Школе вебма...

Yandex

Лекция Алексея Бородкина в Школе вебмастеров: «Как правильно поставить ТЗ на создание сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ ТЗ: две буквы с большим потенциалом Что такое техническое задание. Какое место оно занимает в веб-разработке. Какие цели преследует. И каким требованиям оно должно отвечать. Что нужно сделать, прежде чем садиться за ТЗ Зачем нужна подготовка к написанию ТЗ. Какую информацию нужно собрать и как выстроить этот процесс. На каком этапе веб-разработки нужно писать ТЗ — и что будет, если этот момент упустить. Какое отношение имеют к ТЗ прототипы, пользовательские истории и прочие инструменты проектирования. Хорошее ТЗ Как соединить в один документ описание интерфейсов, структуру данных и много чего ещё. Структура правильного, хорошего ТЗ с подробным разбором каждого пункта. С какой стороны приступать и как эффективнее всего выстроить работу. Кто должен писать ТЗ Кто может написать хорошее ТЗ. Где найти такого человека и как встроить его в общие процессы. Что делать, если ТЗ пишет сам заказчик. Плохое ТЗ Популярные ошибки. Чем они ужасны и как их избежать. Жизнь с ТЗ По какой схеме нужно согласовывать ТЗ. Как применять его в дальнейшей работе. Кому не нужно показывать ТЗ ни при каких обстоятельствах. Что делать, если ТЗ никому не нравится. ТЗ по ГОСТ: ад на Земле Краткая история развития ТЗ со времён Брежнева и до наших дней. Почему я старательно избегаю слова «ТЗ». Почему вы должны нервно вздрагивать при слове «ГОСТ». Что делать, если вы работаете с госзаказчиком.

Как правильно поставить ТЗ на создание сайта, Алексей Бородкин, лекция в Школ...

Yandex

Лекция Петра Волкова в Школе вебмастеров: «Как защитить свой сайт». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Актуальные типы угроз и динамика их развития Компрометация сервера и её последствия. Распределённые атаки типа «отказ в обслуживании». Подмена или добавление рекламы на стороне клиента. Атаки, направленные на пользователей. Проблемы, связанные со внешним содержимым. Управление рисками безопасности веб-сайтов Разные типы сайтов подвержены разным типам рисков информационной безопасности. Понимание целей и подходов злоумылшенников как ключ к эффективному снижению рисков. Методы монетизации атак на сайты. Доступный инструментарий и методики для обеспечения безопасности Открытые инструменты форензики для типовых и сложных проектов. Системы обнаружения вторжений, подходы к проектированию безопасности в архитектуре и процессах.

Как защитить свой сайт, Пётр Волков, лекция в Школе вебмастеров

Yandex

Лекция Дмитрия Сатина в Школе вебмастеров: «Как правильно составить структуру сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Структура сайта, ориентированная на человека; построение структуры, карточная сортировка Содержимое сайтов часто организовано так, как кажется удобным разработчику или контент-менеджеру компании. Чаще всего такие структуры неудобны для реальных посетителей, потому что не совпадают с их знаниями, не поясняют, как устроен материал, и не помогают найти желаемое. Структура, ориентированная на пользователя, повышает вероятность того, что посетители найдут нужную информацию или товар и сделают это быстро. Стройте структуру, исходя из пользовательских сценариев. Выделение на сайте разделов, соответствующих структуре компании или схеме процесса закупки, как правило, усложняет навигацию для пользователя. Правильная структура учитывает уровень знаний покупателя и использует понятные ему термины и способы группировки. Разные типы структур, средства навигации, дальнейший поиск информации на странице Структуры сайтов, на которых ищут что-то определённое, отличаются от тех, что используются на сайтах, посетители которых ещё не уверены, что именно они хотят или как называется нужная вещь. Строгие структуры — например, организация по наименованию товара, производителю, — предполагают один способ группировки. При нестрогой организации данные можно группировать по теме, по жизненной ситуации и так далее. Используйте средства навигации, которые помогают понять, как организован материал. Решая, какой будет визуальная реализация навигации на сайте, необходимо учитывать количество разделов и связи �

Как правильно составить структуру сайта, Дмитрий Сатин, лекция в Школе вебмас...

Yandex

Лекция Дмитрия Васильева в Школе вебмастеров: «Технические особенности создания сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Сайт — расплывчатое понятие Раньше под словом «сайт» понимался набор HTML-страниц, расположенных в домене второго или третьего уровня. Появление социальных сетей размыло это понятие. Как выбрать домен Различные варианты, и какой из них подойдёт именно вашему сайту: доменные зоны, читаемые и нечитаемые домены, кириллица и латиница. Подходы к созданию сайтов Первые сайты делались на чистом HTML. Сейчас такой способ ещё встречается, но подавляющее большинство веб-страниц создаются при помощи CMS, фреймворков, конструкторов. Составные сущности: структура, макеты дизайна, интерактивные элементы, контент, система прав. Размещение сайта на хостинге. Российские и зарубежные, дорогие и дешевые, облачные и традиционные провайдеры. Кратко о тонкостях взаимодействия с ними. Что такое HTTPS Всё более популярный безопасный протокол доступа к сайту. Нужен ли он вам и в каких случаях. Как выбрать платформу для сайта, основные системы управления сайтом (CMS) и конструкторы. Сайт после запуска Сайты создаются с конкретной целью, обычно связанной с получением дохода. Как контент сайта и его технические характеристики напрямую могут влиять на бизнес-эффективность.

Технические особенности создания сайта, Дмитрий Васильева, лекция в Школе веб...

Yandex

Лекция Елены Першиной в Школе вебмастеров: «Конструкторы для отдельных элементов сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ О пользе тех или иных технологий Взгляд в будущее, короткий обзор других полезных технологий и «опасностей», которые подстерегают на пути к правильному их выбору. Как выбрать поиск для сайта Поиск для сайта — важный инструмент навигации. Чтобы оценить качество поиска по своему сайту, посмотрите на количество уходов со страницы результатов. Полнота, скорость индексирования, обработка запросов (исправление ошибок, опечаток, неправильной раскладки) — без этого невозможно представить качественный поиск. Как выбрать карты для сайта Уход посетителя с сайта на «большие» Яндекс.Карты за точной информацией об организации может обернуться потерей клиента, который уже был готов к покупке. Чтобы этого не допустить, лучше сделать интерактивную карту прямо на сайте. Автоматизация оплаты на сайте Люди привыкают платить картой, сегодня даже уличные киоски принимают их. Поэтому многим посетителям кажется «подозрительным» интернет-магазин, в котором недоступны электронные платежи. Начать приём банковских карт в онлайне очень просто, главное выбрать для этого подходящую технологию. Перевод важных страниц На каких языках говорит ваша аудитория, много ли у вас посетителей из-за рубежа? Ответы на эти вопросы даст Яндекс.Метрика. Именно она поможет оценить, нужно ли тратиться на профессионального переводчика и готовить отдельные описания товаров или новости на других языках. Во многих случаях для совершения покупки достаточно и простого машинного перевода. Узнайте, как его настроить, чтобы ключевые разделы сайта автоматически переводились для иностранных посетителей. Социальная интеграция Как заставить пользователей говорить о себе в социальных сетях? В первую очередь нужно сделать хороший продукт или услугу, но и без удобного инструмента для «шаринга» в соцсетях — никуда. Рекомендации о том, как выбрать и установить такой инструмент к себе на сайт.

Конструкторы для отдельных элементов сайта, Елена Першина, лекция в Школе веб...

Yandex

Контент для интернет-магазинов, Катерина Ерошина, лекция в Школе вебмастеров ...

Yandex

Лекция Катерины Ерошиной в Школе вебмастеров: «Как написать хороший текст для сайта». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Назначение и типы текстов на сайте и вне его Цель текста — влиять на поведение пользователя. Самое простое — информировать, самое сложное — привести к покупке. Виды текстов для внешних публикаций. Белые книги и другие способы подтвердить экспертизу. Контент-план для наполнения, развития сайта и внешних публикаций Как проектировать контент для нового сайта. Как наращивать информационную массу сайта. Внешние контакты с потребителем. Разные уровни вовлечения: информируем, продаём, помогаем Пройти по пути покупателя, выдавать информацию, необходимую для совершения следующего шага. Ловушки на этом пути. Информационный стиль: применение с пониманием Чистить текст без фанатизма. Эмоциональное вовлечение. Рациональное обоснование. Структура и вёрстка Заголовки и подзаголовки, списки, абзацы, иерархия подачи информации. SEO-аспекты и LSI-копирайтинг Понимание ценности ключей. Зачем копирайтеру нужно семантическое ядро. Оценка качества текста (чеклист) Уникальность, фактическая достоверность, соответствие целям, информационная плотность, грамотность.

Как написать хороший текст для сайта, Катерина Ерошина, лекция в Школе вебмас...

Yandex

Лекция Алексея Иванова в Школе вебмастеров: «Usability и дизайн: как не помешать пользователю». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Что такое юзабилити и почему оно важно Поведение пользователей на сайте и достижение ими запланированных целей зависит не только от контента, но и от удобства сайта. Информационное и функциональное наполнение сайта Перед созданием сайта нужно правильно определить, какая информация и какой функционал должны быть на сайте. При этом нужно исходить не из того, что у вас есть, а из того, что будет нужно будущим посетителям вашего сайта. Проектирование входных страниц В зависимости от целей сайта и источников посетителей нужно сформулировать требования к входным страницам сайта и их содержанию. Сценарии поведения пользователя Для правильного распределения информации нужно описать сценарии взаимодействия с сайтом для разных групп посетителей. Рассмотрим методы совмещения разных сценариев на одном сайте. Пройти тест по теме Управление конверсией В большинстве случаев мы ждем от посетителя сайта какого-то целевого действия. Это может быть регистрация, отправка заявки, звонок или что-то ещё. Вы увидите способы мотивации посетителей к совершению целевого действия для различных типов сайтов. Пройти тест по теме Основные принципы распределения информации В рамках этого блока вы увидите, как нужно распределять информацию на странице, чтобы посетители увидели всё, что вы хотите им показать. Мобильная версия сайта и принципы юзабилити Всё больше посетителей приходят на сайт с мобильных устройств. Рассмотрим основные особенности взаимодействия с информацией с мобильного устройства и подходы к адаптации сайта под них.

Usability и дизайн - как не помешать пользователю, Алексей Иванов, лекция в Ш...

Yandex

Лекция Алексея Иванова в Школе вебмастеров Яндекса: «Сайт. Зачем он и каким должен быть». https://academy.yandex.ru/events/webmasters_school/yawebm2015/ Типы сайтов и потребности аудитории В зависимости от решаемых задач, сайты можно разделить на несколько характерных типов с разными функциями и контентом. Перед созданием сайта важно понять, чего ждут посетители и какими хотят видеть веб-страницы. При этом на один и тот же сайт может попадать разная аудитория, которая ведёт себя по-разному и каждая имеет свои потребности. Для каждого сегмента нужно разработать отдельные сценарии взаимодействия с информацией на вашей площадке. Сайт с точки зрения бизнеса Чаще всего сайт создается для решения конкретных бизнес-задач. Рассмотрим различные типы монетизации сайтов и особенности каждого из них. Основные показатели и методы измерения Одно из главных преимуществ цифровых каналов — детальная аналитика взаимодействия посетителей с сайтом. В данном блоке рассмотрим основные инструменты измерения, ключевые показатели сайта, на которые нужно обращать внимание, и подходы к интерпретации полученных данных для принятия решений.

Cайт. Зачем он и каким должен быть, Алексей Иванов, лекция в Школе вебмастеро...

Yandex

More from Yandex (20)