1. Статьи
Заметки пользователей
06.03.2018 11:20
PDF
12224
16

Сети крупных операторов на российских точках обмена трафиком

Есть много данных, которые говорят о том, что экосистема интернет, та самая, которая в итоге и позволяет передавать пакеты с байтами между разными узлами сети, быстро развивается. Многоуровневая иерархия, построенная до недавнего времени транзитными взаимодействиями между ограниченным рядом операторов Tier-1 с прямыми пиринговыми стыками между собой и нижестоящими провайдерами (Tier-2, Tier-3 и Tier-на-уровень-ниже) все чаще сегодня разбавляется обилием прямых взаимодействий между совершенно разными участниками рынка. Сеть становится плоской (Flat Internet), где автономные системы (Autonomous System, AS) большей частью стремятся взаимодействовать напрямую между собой, получая/передавая в зависимости от своей роли, на эти стыки значительную часть объема своего трафика. 

Это играет на руку точке обмена трафиком (Internet Exchange Point, IXP), которая как инструмент предоставляет быстрый, дешевый, а главное удобный способ, позволяющий организовать пиринговые связи сразу с множеством автономных систем, присутствующих на ней. Если взять данные из ru.map-ix.net, где учитываются сведения из 29 роут-серверов (Route Server, RS) российских точек обмена, BGP-сессии по IPv4 в течение февраля месяца этого года были подняты с 1046 уникальными AS. В тоже время, по данным RIPEStat в России свои маршруты объявляли 4 621 AS. То есть, почти каждая четвертая автономная система, которая встречается в российском сегменте сети интернет, в той или иной степени, задействует такой инструмент, как точки обмена.

Много это или мало? Для примера, у AS12389, головной AS Ростелекома, крупнейшего оператора связи в России, по данным IDIDB опять же на это время, кол-во BGP-соседств по IPv4 составляло 863 AS.

Сети крупных операторов на российских точках обмена трафиком
Соотношение между разными "наборами" AS в российском сегменте сети интернет

Бытует такое мнение, что "крупные операторы не участвуют в пиринге на точках обмена", во всяком случае там, где они продают свои услуги. Безусловно, в этом есть своя логика: операторам надо продавать связность своей сети, а не делиться ею со всеми подряд. Тем не менее, если взглянуть на реальную ситуацию с присутствием крупных операторов на российских точках обмена, этот расхожий штамп начинает трещать по швам. Хороший пример этому - две первые строчки в рейтинге крупнейших операторов связи на российском рынке широкополосного доступа за 2017 год по версии ТМТ Консалтинг.

Первый оператор, Ростелеком (абонентская база немногим не дотягивает до 12 млн. пользователей), маршруты своей головной AS12389 по данным на 01 марта этого года объявляет на роут-серверах, как минимум сразу шести российских площадок: MSK-IX в Москве, Самаре и Новосибирске, а также на ULN-IX, SIBIR-IX и RED-IX. Второй крупнейший оператор, ЭР-Телеком (абонентская база составляет более трех млн. пользователей), вообще очень широко задействует пиринговые площадки для улучшения своей связности. Маршруты AS9049, за которой собственно и стоит сеть этой компании, в тоже время объявляются не менее чем на 15 роут-серверах разных точек обмена.

Сети крупных операторов на российских точках обмена трафиком
Влияние аварии 03 июня 2017 года на сети AS12389 на график трафика MSK-IX,
​ из презентации Observing the Russian IXP"s throught a Looking Glass на ENOG14

Впрочем, если из локальной BGP-связности российских автономных систем, которая ведется в IDIDB, взять первые 10 AS в порядке убывания числа связей, на первое марта этого года, многие из этого списка, в той или иной мере, задействуют такой удобный инструмент, как точки обмена трафиком. Речь здесь, так как берется информация напрямую с роут-серверов через Looking Glass, идет о публичном пиринге. Какая часть взаимоотношений скрыта за приватным пирингом, когда взаимодействие двух AS через точку обмена строится через отдельно выделенные VLANы, остается за кадром. Естественно, что каждая из компаний в данном случае имеет свои определенные задачи, которая она решает, присутствуя на точках обмена. Как, к примеру, Мегафон, который на площадках MSK-IX, в том числе и региональных, анонсирует для других участников только префиксы своей CDN-сети.

Еще нельзя забывать, что в интернете каждая сеть имеет свои эгоистические интересы, которые она стремится удовлетворить, ведя свою пиринговую политику. На роут-серверах различных точек обмена, эта политика может быть реализована, задействуя, к примеру, управляющие BGP-community. Надо учитывать, что не все участники точки обмена, даже объявляя свои маршруты на ее роут-сервере, ведут открытую пиринговую политику. Тем не менее, если AS вашей сети еще нет на точках обмена, то, вероятно, стоит оглянуться, посмотреть, что есть рядом, и подумать, КАК исправить это упущение, а прежде всего понять, ЗАЧЕМ Вам это надо ...

ASN Name Count RS’s IXP’s
12389 ROSTELECOM-AS 6 MSK-IX MSK/SMR/NSK, ULN-IX, SIBIR-IX, RED-IX
3216 SOVAM-AS -//- -//-
20485 TRANSTELECOM -//- -//-
20764 RASCOM-AS 3 MSK-IX MSK/SPB, DATAIX
31133 MF-MGSM-AS 8 MSK-IX MSK/SPB/RND/SMR/KZN/EKT/VLV, DATAIX
8359 MTS 3 MSK-IX RND/EKT/NSK
28917 Fiord-AS 4 MSK-IX MSK/EKT, Sea-IX, SFO-IX
41722 MIRAN-AS 4 MSK-IX MSK/SPB, Pirix, DATAIX
25227 ASN-AVANTEL-MSK 1 MSK-IX MSK
3267 RUNNET 3 MSK-IX MSK/SPB/NSK

 

По данным ru.map-ix.net на 01 марта 2018 года

16 комментариев
Оставлять комментарии могут только авторизованные пользователи
Robot_NagNews
Robot_NagNews
Материал: Бытует такое мнение, что “крупные операторы не участвуют в пиринге на точках обмена”, во всяком случае там, где они продают свои услуги. Безусловно, в этом есть своя правильная логика: операторам надо продавать связность своей сети, а не делить ее со всеми подряд. Тем не менее, если взглянуть на реальную ситуацию с присутствием крупных операторов на российских точках обмена, этот расхожий штамп начинает трещать по швам. Полный текст
cmhungry
cmhungry

Ну вот про Ростелеком - очень не все. Специально посмотрел сейчас. Да, есть префиксы с MSKIX, но все важные префиксы - только через платных аплинков, РЕТН или ТТК Вот префикс напрямую с IX

5.3.41.0/24 *[BGP/170] 1w0d 11:08:36, MED 10, localpref 120, from 195.208.208.100

AS path: 12389 201776 28761 62287 I, validation-state: unverified

 

Кто это? это контент внутри РТ, миранда-медиа

 

А вот соседний префикс

5.3.42.0/24 *[BGP/170] 5d 15:56:09, MED 20, localpref 102 AS path: 20485 12389 48441 ?, validation-state: unverified

Магаданский клиент РТ. Это уже только через аплинков, пожалуйста.

 

Собственные сети РТ? Только через аплинков

2.60.0.0/14 *[BGP/170] 2w0d 09:32:55, MED 12, localpref 120, from 188.93.17.36

AS path: 3267 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

AS path: 20485 174 12389 I, validation-state: unverified

2.60.0.0/16 *[BGP/170] 5d 15:55:20, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

2.61.0.0/16 *[BGP/170] 5d 15:55:49, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

2.62.0.0/16 *[BGP/170] 5d 15:56:32, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

2.63.0.0/17 *[BGP/170] 5d 15:55:45, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

2.63.0.0/18 *[BGP/170] 5d 15:55:45, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

2.63.64.0/18 *[BGP/170] 5d 15:55:45, MED 20, localpref 102

AS path: 20485 12389 I, validation-state: unverified

AS path: 9002 1273 12389 I, validation-state: unverified

 

Итого на MSKIX от RT есть 2100 префиксов, а всего - почти 5000.

Мегафон на МСКИХ есть только 55 префиксов, а всего - 2100 и т.п. так что крупняка на иксах (на РС, по крайней мере) можно считать что нет, если по мне

alibek
alibek

В начале года у РТ были программные мероприятия в ЮФО на тему партнерства с другими операторами.

И по поводу пиринга РТ прямо заявил, что участвовать в IX он не планирует.

j_box
j_box

Самое интересное: у небольших, региональных провайдеров не так много конкурентных преимуществ перед крупными провайдерами.

Одно из них - лучшая связанность между сетями.

Крупные не могут себе позволить прямой стык с меньшим провайдером, если последний не захочет покупать. 

В итоге трафик уходит на петлю во Франкфурт, Стокгольм и т.д. 


Итог - Ростелеком, например, получает примерно 20% российских маршрутов с петли. ( Это в основном трафик столичных и питерских провайдеров ).

Не смотря на то, что Ростелеком и остальной "крупнях" подняли по всей РФ приватный пиринг ( примерно по одному линку на федеральный округ ).

Тоже самое у Ростелекома наблюдается и с провайдерами ближнего зарубежья. Украинский, Армянский, Литовский, Сербский провайдер не "ровня" Ростелекому - и весь трафик уходит на Тиерван стыки во Франкфурт и Стокгольм. Но все эти провайдеры заинтересованы в российской аудитории. Они стремятся и приходят на MSK-IX и пр.

 

Что мешает регионалам "забирать" такой трафик с Экчейнжей? А не с петли аплинка?

Прописать в управляющем комьюнити анонсы своих префиксов на площадках Москвы,Питера, Новосибирска, Красноярска, Ростова, Екатеринбурга?

В итоге (ИМХО) регионал получит весьма более короткую связанность, чем любой из крупных.

 

Я буквально на днях попробовал нарисовать "Рунет в картинках" - вот как он выглядит:

Не судите строго - рисовал для дилетантов. 

Поэтому многие важные подробности отсутствуют.

 

Если паровайдерской аудитории интересно - эту схему можно расписать куда подробнее ( со всеми пирингами, распределить по городам префиксы, аплинки и их доли и т.д. )

Короче все, что можно выжатьиз фул-вью таблиц и LG провайдеров.

Runet.jpg

TheUser
TheUser
14 минут назад, j_box сказал:

Я буквально на днях попробовал нарисовать "Рунет в картинках" - вот как он выглядит:

Забавно Вы Россию поставили... Никогда не видел ее с такого ракурса.

Но уж больно не патриотично - она оказалась под всем миром, а не над ним.

j_box
j_box

Забавно Вы Россию поставили... Никогда не видел ее с такого ракурса.

Но уж больно не патриотично - она оказалась под всем миром, а не над ним.

 

Я пытался показать пути трафика от апстримов к клиентам. Апстримов принято рисовать сверху.

Можно конечно нарисовать и сбоку ( с Запада ), но суть от этого не поменяется.

"Все дороги Рунета ведут во Франкфурт и Стокгольм" - и дальше через 14 провайдеров, Рунет получает  связанность со всем остальным миром.

 

azhur
azhur
8 минут назад, TheUser сказал:

Забавно Вы Россию поставили... Никогда не видел ее с такого ракурса.

Но уж больно не патриотично - она оказалась под всем миром, а не над ним.

Зато позиция Москвы относительно большей части страны - верная. =)

rm_
rm_
1 hour ago, TheUser said:

не патриотично - она оказалась под всем миром, а не над ним

Мне казалось на данном форуме участники в среднем менее долбанутые на всю голову чем вот так.

TheUser
TheUser
12 минут назад, rm_ сказал:

Мне казалось на данном форуме участники в среднем менее долбанутые на всю голову чем вот так.

Нет, они, как оказалось, просто не понимают стёба.

jffulcrum
jffulcrum
7 часов назад, j_box сказал:

Если паровайдерской аудитории интересно - эту схему можно расписать куда подробнее

Непровайдерской аудитории точно интересно. Не забудьте про эксклавы - Крым, Калининград. И стыки со Средней Азией бы посмотреть.