Forum
Merhabalar, Sunucularımıza Mellanox ConnectX-4 Lx 10GbE (Cx4121A) Ethernet kartı aldık. Sunucularda Linux yüklü( Redhat 8.8, Debian 11.3 ) Hp Aruba 2930F'lere Dac Kablo ile bağladık sorunsuz olarak tanıdı.Ancak iki sunucu arasında iperf3 yaptığımda hızlarda ciddi problem var. Kopyalama yapamıyoruz.
Hp Aruba 10GbE portu üzerinden nasıl bir ayar yapmak gerekiyor.
Switch üzerinden bağlantı sağlanırkenki iperf3 değerleri ;
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-1.00 sec 170 KBytes 1.39 Mbits/sec 31 1.41 KBytes
[ 5] 1.00-2.00 sec 96.2 KBytes 788 Kbits/sec 13 1.41 KBytes
[ 5] 2.00-3.00 sec 0.00 Bytes 0.00 bits/sec 11 1.41 KBytes
[ 5] 3.00-4.00 sec 63.6 KBytes 521 Kbits/sec 18 1.41 KBytes
[ 5] 4.00-5.00 sec 0.00 Bytes 0.00 bits/sec 6 1.41 KBytes
[ 5] 5.00-6.00 sec 194 KBytes 1.59 Mbits/sec 29 1.41 KBytes
[ 5] 6.00-7.00 sec 127 KBytes 1.04 Mbits/sec 27 1.41 KBytes
[ 5] 7.00-8.00 sec 0.00 Bytes 0.00 bits/sec 13 2.83 KBytes
[ 5] 8.00-9.00 sec 63.6 KBytes 521 Kbits/sec 15 1.41 KBytes
[ 5] 9.00-10.00 sec 72.1 KBytes 591 Kbits/sec 15 1.41 KBytes
Hp Switchleri devre dışı bırakıp direk olarak dac kablosu ile sunucuları birbirine bağladığımda sonuc;
[ 5] 0.00-1.00 sec 1.15 GBytes 9.84 Gbits/sec 0 2.43 MBytes
[ 5] 1.00-2.00 sec 1.15 GBytes 9.90 Gbits/sec 0 2.57 MBytes
[ 5] 2.00-3.00 sec 1.15 GBytes 9.91 Gbits/sec 0 2.57 MBytes
[ 5] 3.00-4.00 sec 1.15 GBytes 9.90 Gbits/sec 0 2.75 MBytes
[ 5] 4.00-5.00 sec 1.15 GBytes 9.90 Gbits/sec 0 2.75 MBytes
[ 5] 5.00-6.00 sec 1.15 GBytes 9.90 Gbits/sec 0 2.75 MBytes
[ 5] 6.00-7.00 sec 1.15 GBytes 9.91 Gbits/sec 0 2.75 MBytes
[ 5] 7.00-8.00 sec 1.15 GBytes 9.89 Gbits/sec 0 2.75 MBytes
[ 5] 8.00-9.00 sec 1.15 GBytes 9.91 Gbits/sec 0 2.75 MBytes
[ 5] 9.00-10.00 sec 1.02 GBytes 8.72 Gbits/sec 0 2.75 MBytes
Burada atlatığımız nokta nedir ? Hp Switchlerdeki 10GbE portlarda ne gibi bir eksiklik ayar yapılması gerekiyor. Bu konuda desteğinize ihtiyacım var.
Bu 1.sunucun ayarı : ethtool cıktısı
ethtool ens6f0
Settings for ens6f0:
Supported ports: [ Backplane ]
Supported link modes: 1000baseT/Full
10000baseT/Full
1000baseKX/Full
10000baseKR/Full
10000baseR_FEC
25000baseCR/Full
25000baseKR/Full
25000baseSR/Full
1000baseX/Full
10000baseCR/Full
10000baseSR/Full
10000baseLR/Full
10000baseER/Full
Supported pause frame use: Symmetric
Supports auto-negotiation: Yes
Supported FEC modes: None RS BASER
Advertised link modes: 1000baseT/Full
10000baseT/Full
1000baseKX/Full
10000baseKR/Full
10000baseR_FEC
25000baseCR/Full
25000baseKR/Full
25000baseSR/Full
1000baseX/Full
10000baseCR/Full
10000baseSR/Full
10000baseLR/Full
10000baseER/Full
Advertised pause frame use: Symmetric
Advertised auto-negotiation: Yes
Advertised FEC modes: None RS BASER
Speed: 10000Mb/s
Duplex: Full
Auto-negotiation: on
Port: Direct Attach Copper
PHYAD: 0
Transceiver: internal
Supports Wake-on: d
Wake-on: d
Current message level: 0x00000004 (4)
link
bu diğer sunucun ethtool cıktısı :
Settings for enp1s0f0:
Supported ports: [ FIBRE ]
Supported link modes: 1000baseKX/Full
10000baseKR/Full
Supported pause frame use: Symmetric
Supports auto-negotiation: Yes
Supported FEC modes: None RS BASER
Advertised link modes: 1000baseKX/Full
10000baseKR/Full
Advertised pause frame use: Symmetric
Advertised auto-negotiation: Yes
Advertised FEC modes: None RS BASER
Speed: 10000Mb/s
Duplex: Full
Auto-negotiation: on
Port: FIBRE
PHYAD: 0
Transceiver: internal
Supports Wake-on: d
Wake-on: d
Current message level: 0x00000004 (4)
link
Merhaba,
Normal şartlarda ek olarak yapmanız gereken bir şey yok. Switch'in portlarını test etmek için 2 switch arasında 10G bağlantı kurmayı deneyebilir misiniz? öncelikle portlardan emin olmalısınız.
Danışman - ITSTACK Bilgi Sistemleri
****************************************************************
Probleminiz Çözüldüğünde Sonucu Burada Paylaşırsanız.
Sizde Aynı Problemi Yaşayanlar İçin Yardım Etmiş Olursunuz.
Eğer sorununuz çözüldü ise lütfen "çözüldü" olarak işaretlerseniz diğer üyeler için çok büyük kolaylık sağlayacaktır.
*****************************************************************
Hasan beyin öneri kontrollerinden sonra nic ve os tarafında ki settings'lere odaklanın malum win kadar basic değil diğer os'larda, jumbo mtu konularını bir araştırın buildinize göre, diğer os'larda bunla ilgili şeyler yaşayanları okumuştum, tak çalıştır olmuyor bazen bu tip yeni şeyler. Ve Os'un comunitylerine bakmanızı öneririm benzer hw build uygulayıp karşılaşmış insan olasılığı çok daha fazla olabilir.
'balık vermez, nasıl tutulabildiğine yönlendirir'
****************************************************************
Probleminiz Çözüldüğünde Sonucu Burada Paylaşırsanız. Sizde Aynı Problemi Yaşayanlar İçin Yardım Etmiş Olursunuz. Eğer sorununuz çözüldü ise lütfen "çözüldü" olarak işaretlerseniz diğer üyeler için çok büyük kolaylık sağlayacaktır.
*****************************************************************
Merhaba İbrahim hocamın da dediği gibi Sunucuların bağladığı portlarda mtu değerleri standart olmamalı. 2930F'lerde tam emin olmayarak 10g portların dahil olduğu vlan'a Jumbo frame tanımlanmalı Yada portlara standart 1500 den yüksek bir değer verilmeli.
Bunu şöyle de görebiliriz. Sw üzerinden konsol olarak sh logging çıktısında ilgili portlarda tam türkçe karşılığı olmasa da yoğunluk gibi bir hata var ise sorun tam olarak bu yüzden kaynaklıdır.
2930F üzerinde her hangi bir ayarlama yapılmadıysa DAC ile yaptığınız bağlantıya yakın değerler almanız gerekiyor. 2930F üzerinde "show interface brief" komutuyla port type ve port mode alanlarına bakabilir misiniz?