vmware - networkte yoğun veri transferinde network bağlantısı kesiliyor

Selamlar ;

Ibm sunucu  uzerınde  4  adet  ethernet  kartı  mevcut 4  ethernet  kartı ile  teaming  yaparak mı vmware i  yapılandırdınız  yoksa tek 1  ethernet  kartı  uzerınden mı çalıştırıyorsunuz vmware  sunucunuzu ? Loglarda  vmnic 0 ın  down  oldugu  gozukuyor  ancak  sonrasında  tekrardan  up  olmuş erişimin  gelmesi  gerekiyor . Erişimi Vsphere  Client  üzerinden mı  denediniz ?

Merhaba,

VMware 6.0 Esxi versiyonu yüklü sunucumda 4 adet Windows 2016 Server Standart kurulu. 2 Sanal sunucu üzerinde SQL Database Backup'ı network üzerinde bir lokasyona yedekleri alacak şekilde başlattım. Bir süre sonra sanal sunucuya bağlantım tamamen kesildi. Sunucunun network kablosunu çıkarıp takmama rağmen sorun düzelmedi. Ancak sanal sunucuyu güç tuşundan kapatıp açtığımda tekrar erişim sağlayabildim.

Network'te yoğun veri transferi olduğunda vmware bu şekilde bağlantıyı keser mi?

Bu network kartı ile ilgili bir problem olabilir mi?

 

Sorunun tam nedenini anlayamadığımdan tekrar sunucu bağlantımın kopmasından korktuğumdan SQL yedeklerini tekrar başlatamıyorum. 

Sorun ile ilgili uzman arkadaşlardan destek rica ediyorum.

 

Sunucu bilgilerim: lenovo system x3650 m5

Sunucu üzerindeki network kartı: Broadcom NetXtreme BCM5719 Gigabit Ethernet

vmware üzerinde vobd.log dosyasında yedek işlemine başladığımda aşağıdaki satırlar başlamış.

2017-06-17T23:22:46.478Z: [netCorrelator] 2711909924945us: [vob.net.uplink.watchdog.timeout] Watchdog timeout occurred for uplink vmnic0

bağlantının kesildiği andaki log kayıtları aşağıdaki gibi:

2017-06-17T23:22:46.478Z: [netCorrelator] 2711909924945us: [vob.net.uplink.watchdog.timeout] Watchdog timeout occurred for uplink vmnic0
2017-06-17T23:56:06.139Z: [netCorrelator] 2713909600572us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: VM Network. 0 uplinks up. Failed criteria: 128
2017-06-17T23:56:06.140Z: [netCorrelator] 2713909600582us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: Management Network. 0 uplinks up. Failed criteria: 128
2017-06-17T23:56:06.140Z: [netCorrelator] 2713909600780us: [vob.net.vmnic.linkstate.down] vmnic vmnic0 linkstate down
2017-06-17T23:56:10.245Z: [netCorrelator] 2713913705853us: [vob.net.vmnic.linkstate.up] vmnic vmnic0 linkstate up
2017-06-17T23:56:10.347Z: [netCorrelator] 2713913807934us: [vob.net.pg.uplink.transition.up] Uplink:vmnic0 is up. Affected portgroup: VM Network. 1 uplinks up
2017-06-17T23:56:10.347Z: [netCorrelator] 2713913807942us: [vob.net.pg.uplink.transition.up] Uplink:vmnic0 is up. Affected portgroup: Management Network. 1 uplinks up
2017-06-18T00:13:58.058Z: [netCorrelator] 2714981525512us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: VM Network. 0 uplinks up. Failed criteria: 128
2017-06-18T00:13:58.058Z: [netCorrelator] 2714981525522us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: Management Network. 0 uplinks up. Failed criteria: 128
2017-06-18T00:13:58.058Z: [netCorrelator] 2714981525721us: [vob.net.vmnic.linkstate.down] vmnic vmnic0 linkstate down

 

vmware üzerinde vmkwarning.log dosyasında yedek işlemine başladığımda aşağıdaki satırlar başlamış.

2017-06-17T21:00:10.028Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.029Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.029Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.029Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.029Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.030Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)
2017-06-17T21:00:10.030Z cpu19:272820)WARNING: ntg3-throttled: Ntg3XmitPktList:372: vmnic0:TX ring full (0)

 

 

 

Virtual machine'lerde kullanmış olduğunuz network kartının modeli nedir? Vmxnet3 mü e1000 mi kullanıyorsunuz? Ayrıca tam anlayamadım, esxi host'un network kartlarını mı down görüyorsunuz yoksa virtual machine'in mi?  göndermiş olduğunuz log dosyalarında fiziksel nic gitmiş gözüküyor. Açıkcası fiziksel nic'in down olmasının birden fazla sebebi vardır. Bunun için ortama bakıp incelemek gerekiyor.

IBM sunucu üzerinde tek 1 ethernet kartı bulunuyor. Loglarda vmnic0 down ve up'lar sunucunun network kablosunu çıkartıp tekrar taktığımda oluşmuş olabilir. Erişimi vsphere client üzerinden denedim. hostlara ve vmware'e network kablolarını söküp taktığımda yine erişemedim.

vmware console ekranının görüntüsü

bağlantı olmadığında aşağıdaki gibiydi:

vmware'i güç tuşundan kapatıp açtığımda console görüntü aşağıdaki gibi:

ikisi arasında gördüğüm tek fark erişim olduğu görüntüde ekranın alt tarafı turuncu renk zemin üzerinde gözüküyor.

Network kartı Broadcom NetXtreme BCM5719 Gigabit Ethernet

bağlantım aşağıdaki zamanda kesilmişti.

2017-06-17T23:22:46.478Z: [netCorrelator] 2711909924945us: [vob.net.uplink.watchdog.timeout] Watchdog timeout occurred for uplink vmnic0

sonraki aşağıdaki satırlar erişim kaybolduğunda network kablosunu çıkartıp tekrar taktığım zamanlarda olmuş olmalı. Bu up gözüktüğü zamanda yine sunucuya erişilemiyordu.

2017-06-17T23:56:06.139Z: [netCorrelator] 2713909600572us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: VM Network. 0 uplinks up. Failed criteria: 128
2017-06-17T23:56:06.140Z: [netCorrelator] 2713909600582us: [vob.net.pg.uplink.transition.down] Uplink: vmnic0 is down. Affected portgroup: Management Network. 0 uplinks up. Failed criteria: 128
2017-06-17T23:56:06.140Z: [netCorrelator] 2713909600780us: [vob.net.vmnic.linkstate.down] vmnic vmnic0 linkstate down
2017-06-17T23:56:10.245Z: [netCorrelator] 2713913705853us: [vob.net.vmnic.linkstate.up] vmnic vmnic0 linkstate up

Selamlar ;

Bir  yanlışlık var  x3650 M5 üzerindde  4  adet  gigabit  opsiyone  2  adet 10Gig  network interface i  bulunmakta

http://www.th-it.com/files/x3650_m5_ds.pdf   ürünün pdf ini inceleyebilirsiniz  ayrıca m3 ve m4  serisini çok  fazla  kullandım eskı serılerınde  bıle  4  adet  ethernet kartı mevcut  idi  teknoloji  geriye  doğru gitmez zaten 🙂 

Bağlantı  koptuğu  zaman ekranda  görülen 192.168.0.21 ip  adresine  ping  atabiliyor musunuz ? Yeni kurulum ise Vmware 6.5 ile  değil de 6 ile test  etmenizi  öneririm  ayrıca  ortamda  kullanılan  sw marka  modelini de  paylaşır mısınız ?

IBM sunucu üzerinde tek 1 ethernet kartı bulunuyor. Loglarda vmnic0 down ve up'lar sunucunun network kablosunu çıkartıp tekrar taktığımda oluşmuş olabilir. Erişimi vsphere client üzerinden denedim. hostlara ve vmware'e network kablolarını söküp taktığımda yine erişemedim.

vmware console ekranının görüntüsü

bağlantı olmadığında aşağıdaki gibiydi:

 

vmware'i güç tuşundan kapatıp açtığımda console görüntü aşağıdaki gibi:

 

ikisi arasında gördüğüm tek fark erişim olduğu görüntüde ekranın alt tarafı turuncu renk zemin üzerinde gözüküyor.

 

Yanlış ifade ettim sanırım. Network adaptörü tek. Adaptör üzerinde 4 adet gigabit ethernet var. Yalnızca 1 etherneti kullanıyoruz. (Umarım yine yanlış ifade etmemişimdir. Sunucu bilgim kısıtlı seviyede)

Yeni kurulum olmadığından vmware versiyonunu değiştiremiyorum.

Bağlantı koptuğu zamanda ekranda görülen ip adresine ping atılamıyordu. sw'den kastınız kullanılan switch ise sunucular Sonicwall NSA 240 UTM cihazına bağlı. LAN bağlantı hızı 100 Mbps ile sınırlı. Sanal sunucuda yedek alırken network bilgisinde 100Mbps kullanıyor görmüştür. 2 sunucu da aynı networkü aynı anda 100Mbps olarak kullanmaya çalışmış olmalı. Burada bir sıkışma oluşmuş olabilir ancak bu sıkışmanın vmware sunucusuna erişimi kesmesini çözemiyorum. Backup taskları fail oldu. Network kullanımı boşa çıktı ancak vmware sunucusuna halen erişeliyordu. 

Kullandığım network kablosunu ve utm'deki bağlı portu tekrar kontrol edeceğim.  Bu network hızını 1000Mbps 'a çıkarabilirsem belki sorun çözülebilir.

Selamlar ;

 

Bir  yanlışlık var  x3650 M5 üzerindde  4  adet  gigabit  opsiyone  2  adet 10Gig  network interface i  bulunmakta

http://www.th-it.com/files/x3650_m5_ds.pdf   ürünün pdf ini inceleyebilirsiniz  ayrıca m3 ve m4  serisini çok  fazla  kullandım eskı serılerınde  bıle  4  adet  ethernet kartı mevcut  idi  teknoloji  geriye  doğru gitmez zaten 🙂 

Bağlantı  koptuğu  zaman ekranda  görülen 192.168.0.21 ip  adresine  ping  atabiliyor musunuz ? Yeni kurulum ise Vmware 6.5 ile  değil de 6 ile test  etmenizi  öneririm  ayrıca  ortamda  kullanılan  sw marka  modelini de  paylaşır mısınız ?

 

 

IBM sunucu üzerinde tek 1 ethernet kartı bulunuyor. Loglarda vmnic0 down ve up'lar sunucunun network kablosunu çıkartıp tekrar taktığımda oluşmuş olabilir. Erişimi vsphere client üzerinden denedim. hostlara ve vmware'e network kablolarını söküp taktığımda yine erişemedim.

vmware console ekranının görüntüsü

bağlantı olmadığında aşağıdaki gibiydi:

 

vmware'i güç tuşundan kapatıp açtığımda console görüntü aşağıdaki gibi:

 

ikisi arasında gördüğüm tek fark erişim olduğu görüntüde ekranın alt tarafı turuncu renk zemin üzerinde gözüküyor.

 

Selamlar Mehmet Bey ;

Yapiniz basit bir yapi olmasina ragmen cok yanlis konfigure edilmis.

1 =) Sunuculariniz ve nas cihazlariniz icin gigabit switch alimi yaparak bu cihazlari gigabit sw uzerinde sonlandirmalisiniz.

2=) Sunucu uzerinde 4 adet etherneti de aktif ederek sw uzerinde sonlandirmali teaming yapisi kurarak 4 adet etherneti de aktif kullanarak sunucularin network erisimlerinin performansini artirmali ve ethernetlerin de yedekli calismasini saglamalisiniz.

Merhaba Cumhur Bey,

Tavsiyeleriniz için öncelikle çok teşekkürler. Belirttiğiniz iyileştirme çalışmalarına başladık. 

Ayrıca bu problem ile ilgili vmware'de bir thread buldum. Aynı şekilde network'te büyük dosya kopyalamada sunucuya erişim sorunu yaşamışlar. Ancak sunucu kapatılıp açıldığında düzelmiş. Bunun vmware 6.5 de network kartı braodcam'in  driver'leri ile ilgili bir bug olduğu belirtilmiş ve yeni driver çıkarılmış. İlgili thread:  https://communities.vmware.com/thread/557471  

Network iyileştirmesi sonrası yine sorun yaşarsak driver güncellemesini de yapacağız.

Tekrar teşekkürler,

İyi çalışmalar.

Selamlar Mehmet Bey ;

İyileştirme  çalışmalarına  başlamış olmanıza  sevindim , tamamlamanız  ve  sorunsuz  bir  altyapı  kullanmaya  başlamanız  dileğiyle.

Merhaba Cumhur Bey,

 

Tavsiyeleriniz için öncelikle çok teşekkürler. Belirttiğiniz iyileştirme çalışmalarına başladık. 

Ayrıca bu problem ile ilgili vmware'de bir thread buldum. Aynı şekilde network'te büyük dosya kopyalamada sunucuya erişim sorunu yaşamışlar. Ancak sunucu kapatılıp açıldığında düzelmiş. Bunun vmware 6.5 de network kartı braodcam'in  driver'leri ile ilgili bir bug olduğu belirtilmiş ve yeni driver çıkarılmış. İlgili thread:  https://communities.vmware.com/thread/557471  

Network iyileştirmesi sonrası yine sorun yaşarsak driver güncellemesini de yapacağız.

Tekrar teşekkürler,

İyi çalışmalar.