Etcnet QoS
Настройка QoS в /etc/net (редакция 3)
Общая теория
QoS — quality of service (качество обслуживания) — общий термин, обозначающий технологии управления скоростными и временными характеристиками пропускаемого трафика. Конфигурация выполняется для каждого интерфейса отдельно. Для этого создаётся древовидная структура, состоящая из дисциплин очередей и классов. Корень этой структуры — так называемая корневая дисциплина очереди, которая является обязательным атрибутом интерфейса. Увидеть её можно так:
$ /sbin/ip ad sh dev eth0
3: eth0: <BROADCAST,MULTICAST,UP> mtu 1500 qdisc pfifo_fast qlen 1000
link/ether 4c:00:10:3b:3e:f0 brd ff:ff:ff:ff:ff:ff
inet 10.1.1.175/23 brd 10.1.1.255 scope global eth0
В данном случае корневая дисциплина очереди — pfifo_fast (она назначается по умолчанию). Иерархия очередей и классов определяет, как именно будут обрабатываться исходящие с интерфейса пакеты: номинальная скорость, параметры допустимых кратковременных всплесков, правила переупорядочивания пакетов внутри очередей, условия взаимного заимствования полосы пропускания между объектами на одном уровне иерархии и прочие параметры, зависящие от конкретной используемой структуры. «Перпендикулярно» этому дереву существует набор фильтров, которые описывают прохождение пакетов по структуре. Наиболее популярными являются дисциплины очередей CBQ (class based queueing) и HTB (hierarchical token bucket). Дерево CBQ формируется по довольно простым принципам:
- пропускная способность корневой дисциплины очереди интерфейса равна физической пропускной способности интерфейса
- классы могут иметь своим родителем только дисциплину очереди
- решение о направлении пакета в класс принимается в дисциплине очереди с помощью фильтров
- если вам необходимо разделить класс на подклассы, то создайте вложенную дисциплину очереди, а далее делите её
Дерево HTB строится ещё проще:
- классы могут содержать другие классы напрямую, без промежуточных дисциплин очередей
Описание реализации
Общая идея реализации в /etc/net заключается в том, что иерархия объектов QoS представляется в виде дерева каталогов и файлов. Конфигурация начинается с каталога qos, располагающегося в каталоге конфигурации интерфейса. Далее в нём могут содержаться другие каталоги, которые представляют либо дисциплины очереди, либо классы. В каталогах дисциплин присутствуют файлы с названием qdisc, а в каталогах с классами — файлы class. Эти файлы содержат параметры дисциплин и классов. Фильтры располагаются в файлах с названием filter.
Пример 1
Рассмотрим пример конфигурации HTB, поставляемый с /etc/net: http://etcnet.org/examples/QoS-HTB-user-guide/1/qdisc Так как дерево начинается с корневой дисциплины, то в каталоге qos будет содержаться только один каталог qos/1, а в нём будет содержаться файл qdisc:
[DIR] 1/ 22-Aug-2005 14:13 - [TXT] qdisc 18-Mar-2005 11:06 1k
Корневая дисциплина здесь имеет номер 1. Параметры корневой дисциплины простые: htb default 12. Корневая дисциплина кроме своих параметров содержит один класс в каталоге qos/1/1. Полным именем объекта будет 1:1. Левое число отсутствует в названии каталога, так как оно всегда равно идентификатору очереди. В файле qos/1/1/class содержатся параметры класса: htb rate 100kbps ceil 100kbps. Кроме этого, в каталогах qos/1/1/2 и qos/1/1/12 определено ещё два класса: 1:2 и 1:12. В файле qos/1/1/extra содержатся параметры, общие для классов 1:2 и 1:12: htb ceil 100kbps. Это необязательный файл, можно было бы поместить эти параметры в файлы qos/1/1/2/class и qos/1/1/12/class. Если у вас много классов на одном уровне, то файл extra поможет вынести общую часть «за скобки». Класс 1:12 пуст, а класс 1:2 содержит 1:10 и 1:11. В файлах qos/1/1/2/10/filter и qos/1/1/2/11/filter содержатся описания фильтров по одному в каждой строке. Местоположение файла filter определяет, куда будут направлены пакеты, которые ему удовлетворяют. Для класса 1:10 будет использован один фильтр protocol ip prio 1 u32 match ip src 1.2.3.4 match ip dport 80 0xffff, что соответствует исходящему HTTP-трафику с адреса 1.2.3.4, а для класса 1:11 будет использован фильтр protocol ip prio 1 u32 match ip src 1.2.3.4, что соответствует всему исходящему трафику с адреса 1.2.3.4. Файлы class классов 1:10 и 1:11 содержат соответственно rate 30kbps и rate 10kbps.
Пример 2
1. Я советую, поставив пакет etcnet, сначала спрятать куда-нибудь все каталоги интерфейсов из /etc/net/ifaces (кроме lo, default и unknown) и запустить /etc/net/scripts/initconf. Его выдачу сохранить и на основании этой выдачи организовать файл /etc/net/iftab, который определит логические имена интерфейсов. Например, одну сетевую карту можно из eth0 переименовать в соответствии с её макадресом в wan, другую — в lan. Я для себя использовал вместо wan имя провайдера (comcast), а вместо lan — придуманное самим имя локального домена своей сети 192.168.10.0/24 (menlo). Ну и дальше буду их использовать, чтобы не ошибиться где-нибудь заменяя их на более нейтральные типа wan и lan. Далее создайте каталоги с именами определёнными в таблице /etc/net/iftab, внутри /etc/ifaces. Я создал /etc/net/ifaces/comcast и /etc/net/ifaces/menlo. И положил туда нужные мне файлы options. Для внешней сети comcast достаточно определить TYPE и BOOTPROTO, я добавил строчку MODULE как того рекомендовал initconf:
# cat <<EOF >/etc/net/ifaces/comcast/options TYPE=eth BOOTPROTO=dhcp MODULE=tulip EOF
Для интерфейса локальной сети menlo адрес задан статически, так что там кроме файла options ещё нужен файл ipv4address:
# cat <<EOF >/etc/net/ifaces/menlo/options TYPE=eth BOOTPROTO=static MODULE=natsemi EOF # echo "192.168.10.1/24" >/etc/net/ifaces/menlo/ipv4address
2. Дальше настраиваете ip-forwarding и nat masquarading. За первый отвечает строчка
net.ipv4.ip_forward = 1
в файле /etc/net/sysctl.conf, в то время как другое делается добавлением строки masquerade out-iface comcast в файл /etc/net/ifaces/default/fw/iptables/nat/POSTROUTING:
echo "masquerade out-iface comcast" >>/etc/net/ifaces/default/fw/iptables/nat/POSTROUTING
После этого ваш раутер после # service network restart уже должен начать выполнять свою функцию разделения доступа в интернет.
3. Далее я настраивал распознавание и маркирование пакетов, которым надо было обеспечить гарантированную ширину пропускания канала. Для меня это были два телефонных адаптера, которые не искажают звук только если им предоставлены 10 килобит в секунду. Эти адаптеры стоят в локальной сети и dhcp сервер по их мак-адресам даёт им статические адреса. Эти адреса я и использовал в качестве критерия для маркировки. Маркировка обеспечивается следующим образом:
#cat <<EOF >/etc/net/ifaces/default/fw/iptables/mangle/POSTROUTING mark 21 if from 192.168.10.21 from-iface menlo mark 22 if from 192.168.10.5 from-iface menlo EOF
Мысль для себя на будущее: наверно можно было маркировать по мак-адресу, и тем самым избежать необходимости настраивать статические адреса выдаваемые dhcpd.
4. Ну а теперь остаётся самое настроить qos htb для идущего наружу интерфейса comcast.
# # создаём дисциплину 1 # mkdir -p /etc/net/ifaces/comcast/qos/1 # # определяем что эта дисциплина - htb # # и её дефолтный класс для неклассифицированного траффика 77. # echo "htb default 77" >/etc/net/ifaces/comcast/qos/1/qdisc # # создаём корневой класс 1 (1:1) # mkdir /etc/net/ifaces/comcast/qos/1/1 # # определяем ширину пропускания интерфейса (upload) # echo "htb rate 360kbit" >/etc/net/ifaces/comcast/qos/1/1/class # # организуем фильтр, направляющий весь траффик в класс 1:1 # # !!!Этого фильтра нет в примерах пакета etcnet !!! # # !!!(по крайней мере для версии etcnet-0.9.3-alt3)!!! # # !!!Но он действительно нужен, без него трафик !!! # # !!! не проходит по вложенным классам !!! # echo "proto ip prio 1 u32 match ip src 0.0.0.0/0" >/etc/net/ifaces/comcast/qos/1/1/filter # # создаём класс для первого телефонного адаптера # mkdir /etc/net/ifaces/comcast/qos/1/1/21/ # # определяем для него ширину пропускания 80 килобит/сек. # echo "htb rate 80kbit" >/etc/net/ifaces/comcast/qos/1/1/21/class # # задаём фильтр этого класса, отбирающий для него пакеты с маркой "21" # echo "protocol ip prio 1 handle 21 fw" >/etc/net/ifaces/comcast/qos/1/1/21/filter # # создаём класс для второго телефонного адаптера # mkdir /etc/net/ifaces/comcast/qos/1/1/22/ # # определяем для него ширину пропускания 80 килобит/сек. # echo "htb rate 80kbit" >/etc/net/ifaces/comcast/qos/1/1/22/class # # задаём фильтр этого класса, отбирающий для него пакеты с маркой "22" # echo "protocol ip prio 1 handle 22 fw" >/etc/net/ifaces/comcast/qos/1/1/22/filter # # создаём класс для дефолтного траффика: # mkdir /etc/net/ifaces/comcast/qos/1/1/77/ # # определяем для него ширину пропускания 200 (= 360 - (80 + 80)) килобит/сек. # # с возможностью заимствования неиспользуемого в данный момент траффика других классов # # вплоть до 360kbit, то есть полной ширины исходящего канала # echo "htb rate 200kbit ceil 360kbit" >/etc/net/ifaces/comcast/qos/1/1/77/class
Теперь телефонам будет предоставляться 80 килобит в секунду как только они того потребуют, а если они недоиспользуют эти 80kbit, всё оставшееся будет предоставляться другим соединениям.
P.S Большое спасибо Денису Овсиенко за то, что объяснил, как правильно организовать иерархию фильтров, чтобы эта конструкция заработала.
Утилиты
- С 11/07/2006 в contrib находится скрипт eqos (по аналогии с efw), который предназначен для ручного управления qos и умеет следующее:
/etc/net QoS handler
Usage: ./eqos [iface] <action> [action options]
iface - real interface name ('eth0' by default) or 'all' for all interfaces
action - 'start','stop','restart','show|list','stat|stats'
start - start QoS for given interface stop - stop QoS for given interface restart - equivalent to 'stop' then 'start' show - list qdiscs, classes or filters on given interface list - same as 'show' stat - print statistics for qdiscs, classes or filters on given interface stats - same as 'stat'
Options for actions 'show' or 'list' and 'stat' or 'stats':
- one of 'qdisc' (by default), 'class' or 'filter'
- component specific options (e.g. 'parent')