狠狠撸

奈良県の
CATVネットワーク紹介
近鉄ケーブルネットワーク株式会社 (KCN)
技術部：古川重彦、宮田奈布子
Copyright?2024 Kintetsu Cable Network Co., Ltd. All Rights Reserved.

自己紹介

名前：古川重彦（ふるかわしげひこ）
入社：2004年
担当：
2004年12月～
FTTH設備/局舎間NW運用担当
ADSL設備保守
2008年4月～
社内システム運用担当
2010年10月～
サーバ運用担当
2016年4月～
ネットワーク全般運用担当(主にバックボーン、Peeringなど)
↑フットサルチーム
■自己紹介

■自己紹介
名前：宮田奈布子
(みやたなほこ)
出身：山口県下関市豊北町
入社：2017年 (1年目は営業、2年目から技術)
担当：ネットワーク全般 (設計?構築?保守?運用)
出身学科：電子情報技術 (電気回路、基盤設計、プログラム、ネットワーク)
近鉄特急：あおによし
いぬ：もみじ
好きなもの：イヌ、ミセス、ひきわり納豆

会社概要/事業内容

■会社概要/事業内容
奈良県
京都府
大阪府
商号近鉄ケーブルネットワーク株式会社
本社事務所奈良県生駒市東生駒1丁目70番地1
設立 1984年6月1日
従業員数 245名
事業内容一般放送事業 (ケーブルテレビ)
電気通信事業 (インターネット?電話)
テレビ：204,858戸
インターネット：166,510戸
電話：144,754戸

近鉄沿線の光ファイバ

全体ネットワーク概要
バックボーンの変遷
局間アクセス回線
その他紹介 (フレッツ比較/DHCP障害)
JANOG54告知

全体ネットワーク概要

端末
ONU
インターネット
サーバNW
L2
NW
OLT L3SW
コアNW
各サブセンター
コア拠点
エンドユーザ
宅内
宅内/ONU
伝送路
FTTH/OLT
光カプラ
局間アクセス
回線
バックボーン回線
サーバ
■全体ネットワーク概要
約230台
(約166,510世帯) (約64局)

L2リング
(10G)
VXLAN
(100G)
OLT
DHCP DNS Mail
コアNW
Static / OSPF
ONU
エンドユーザ
端末
L3SW
エンドユーザ向けNW
サーバNW
■全体ネットワーク概要
RT
コアSW
BGP
OSPF
L2/L3SW

バックボーンの変遷
(大阪-奈良)

IIJ
JPNAP JPIX BBIX
Telstra
大
阪
PNI
IIJ
KDDI Telstra
JPNAP JPIX BBIX
東
京
奈
良
■バックボーン
100G 40G 20G
100G 100G 100G
40G
20G
10G
100G
10G
100Gxn
200Gx2
100Gx2

■バックボーンの変遷/大阪側
WDM WDM
WDM WDM
大阪
奈良
IX
PNI
IX
PNI
エンドユーザNW
2019年
BGP BGP

WDM WDM
WDM WDM
各10G×8回線が上限だった。。
大阪
奈良
IX
PNI
IX
PNI
2019年
拡張面の問題
IX = 10G×4回線
PNI = 10G×4回線
→埋まりました
新PNI

WDM WDM
WDM WDM
IX
PNI
2020年
拡張面の問題
新PNI
Vlan100
Vlan200
大阪
奈良
IX
PNI
各80G×1回線
(LAG)共用化
←接続増やせた
L2SW増設

WDM WDM
WDM WDM
PNI
?トラフィックが
片側にしか流れない
?冗長できない
こっちの拠点にしか
接続点がない事業者
大阪
奈良
BGP
2020年
冗長面の問題

WDM WDM
WDM WDM
RT×2台でBGP接続
2ルートに冗長
大阪
奈良
PNI
こっちの拠点にしか
接続点がない事業者
BGP BGP
2020年
冗長面の問題

WDM WDM
WDM WDM
IX
PNI
IX
PNI
大阪
奈良
BGP BGP
ルーティングルーティング
奈良の機器でしか
トラフィック制御できない
2021年
運用面の問題

WDM WDM
WDM WDM
IX
PNI
IX
PNI
大阪
奈良
BGP BGP
ルーティングルーティング
ルーティング
ルーティング
BGP接続点を変更
(L2→L3化)
ルーティングポイント増やすことで
大阪で経路切替とか
トラフィック制御できるようになった
2021年
運用面の問題

大阪
奈良
WDM WDM
WDM WDM
←10G×Nの回線では無理。。
物理ポートも満杯で増速できない。。
下りトラフィックが
100～200G超えてきた。。
IX
PNI
IX
PNI
BGP BGP
「コロナ禍突入！！！」
2021年
拡張面の問題

大阪
奈良
WDM WDM
100G×N回線できた
100GSW
(L2)
IX
PNI
IX
PNI
BGP BGP
WDM WDM
2022年～2023年
拡張面の問題

へんなルート選ぶし、
全動作パターン把握しないと
ループにおちいる。。。
IX
PNI
IX
PNI
ちゃんとデータ転送できず、
届けられない。
10
100
OSPF I/Fコスト値で
優先制御
メイン回線
サブ回線
※イメージ
BGP BGP
2024年(現在)
運用面の問題
なんか480通りある………？？？+ 障害パターン。。。。？？？
大阪
奈良

局間アクセス回線

コアSW コアSW コアSW
Static
L2 Ring protocol (10G)
端末
OLT
ONU
L3SW
×5エリア
■局間アクセス回線 (～2021年) インターネット
DHCP DNS Mail
キャッシュキャッシュ
コア拠点A
宅内
コア拠点B
各サブセンタ間をリング状に接続している
ユーザトラフィック量が増えたら
ブロックポイント変更で流れ方を調整
→限界がきた
これ以上増速も困難。。。
ブロックポイント

VXLAN EVPN (100G)
OSPF
L2 Ring protocol (10G)
OLT
ONU
L3SW
Static
×5エリア
コアSW コアSW コアSW
DHCP DNS Mail
キャッシュキャッシュ
端末
■局間アクセス回線 (2022年～)
コアSW
コア拠点A
宅内
コア拠点B
新しい100Gリングをつくった
各サブセンタ～コア拠点までの
アップリンク変更中
VXLAN
仮想L2のため制御の幅広がった
むずかしい

その他紹介
(フレッツとの比較/DHCP障害事例)

フレッツ回線 KCN自社回線
■フレッツ回線との構成比較 (IPv4/PPPoE)
端末
NTT
KCN
認証サーバ
端末
DHCP
KCN のIPアドレス配布
インターネットインターネット
コア拠点
各NTT局舎
宅内
1Gbps 10Gbps
KCN
コア拠点
各自前局舎
宅内
KCN のIPアドレス配布
NTT網終端装置/OLT
コアRT/SW
L3SW
ユーザ認証
ONU
OLT
ONU
コアRT/SW
L3SW

■DHCP (IPv4)
DHCP
端末
コアRT/SW
端末端末端末端末
L3SW
(DHCPリレー)
OLT OLT OLT OLT OLT
?動的IPアドレス帯のプール設定
?固定IPアドレスの設定
L3SWまでのルーティング設定
デフォルトGWとなるIPアドレス設定
x.x.x.1/23
収容SWに割り当てされた
IPアドレスを動的 or固定取得
x.x.x.100/23

■DHCP (IPv4)
DHCP
端末
コアRT/SW
L3SW
(DHCPリレー)
OLT OLT OLT OLT OLT
DHCPパケット転送 + インターネット通信
(CPU使用)
DHCPに
IPアドレス要求

■DHCP (IPv4)
DHCP
端末
コアRT/SW
L3SW
(DHCPリレー)
OLT OLT OLT OLT OLT
【障害発生】
2023年8月3日
K市で落雷による広域停電発生
L3SWには、約12,000ユーザ収容
約12,000台
再起動
L3SWのスペック
MACアドレス総数 32,000
IPv4ルート総数 24,000

■DHCP (IPv4)
DHCP
端末
コアRT/SW
L3SW
(DHCPリレー)
OLT OLT OLT OLT OLT
【障害発生】
2023年8月3日
K市で落雷による広域停電発生
L3SWには、約12,000ユーザ収容
CPU使用率が 98%に
パケット転送できなくなった
約12,000台分の
IPアドレス要求

■DHCP (IPv4)
DHCP
端末
コアRT/SW
L3SW
(DHCPリレー)
OLT OLT OLT OLT OLT
?徐々にパケット減少し、
CPU使用率低下。。
再起動
②数百台分ずつ開放
①全ユーザ回線閉塞
【復旧対処】
その後、、NW分割などした

JANOG54告知

JANOG54 Meeting
in NARA
日時： 2024年7月3日(水)～5日(金)
本会議：奈良県コンベンションセンター
懇親会：ホテル日航奈良
ホスト：近鉄ケーブルネットワーク株式会社 / 株式会社IDCフロンティア
約2800人以上が奈良に！
まだまだ受付中！

本会議
10分
20分
15分
分布

奈良でお待ちしてます
だらにすけ

狠狠撸

奈良県の颁础罢痴ネットワーク绍介冲近鉄ケーブルネットワーク株式会社(吉川、宫田)

More Related Content

奈良県の颁础罢痴ネットワーク绍介冲近鉄ケーブルネットワーク株式会社(吉川、宫田)