OpenForum RSS: Проблемы с сетью, периодически пропадает доступ https://opennet.ru/openforum/vsluhforumID1/95122.html Использую FreeBSD 9.1 final.<br>есть непонятная проблема, периодически замерзает связь, при этом на сервере никакой активности. <br><br>Сетевые карточки X540-t2, все настройки в sysctl в соответствии с требованиями<br><br>hw.intr_storm_threshold=9000<br>kern.ipc.nmbclusters=262144<br>kern.ipc.nmbjumbop=262144<br><br><br>в dmesg чисто, в логах тоже. пробовал помониторить netstat, переполнений каких-либо не нашел. посоветуйте, что и как прощупать, чтобы найти проблему. <br><br>Сервер раздает шару nfs<br><br>[root@hast01 ~]# uname -a<br>FreeBSD hast01 9.1-RELEASE FreeBSD 9.1-RELEASE #0 r243825: Tue Dec 4 09:23:10 UTC 2012 root@farrell.cse.buffalo.edu:/usr/obj/usr/src/sys/GENERIC amd64<br><br>[root@hast01 ~]# netstat -m<br>32889/22926/55815 mbufs in use (current/cache/total)<br>32768/11366/44134/262144 mbuf clusters in use (current/cache/total/max)<br>32768/9344 mbuf+clusters out of packet secondary zone in use (current/cache)<br>0/3020/3020/262144 4k (page size) jumbo clusters in use (current/cache/total/max)<br>0/0/0/6400 9k jumbo clusters in use ( Проблемы с сетью, периодически пропадает доступ (kudlak) https://opennet.ru/openforum/vsluhforumID1/95122.html#5 Sat, 26 Oct 2013 01:34:52 GMT &gt;&gt;[оверквотинг удален] <br>&gt; tcpdump чо говорит?<br><br>как померить 10 GBE канал tcpdump-ом, быстрей он ляжет...<br><br>дошел до следующей проблемы. походу размер чанка на RaidZ (ZFS) не совпадает с размерами на дисках. большой IO (почти под 1000 IOPS)..<br><br>странно еще что памяти почти не использует система. ни в кэш ни на какие-то еще задачи (или я привык к пингвинам, у которых задача жизни поглотить всю память, потом пытаться высвободить кэш =)))) )<br> Проблемы с сетью, периодически пропадает доступ (lavr) https://opennet.ru/openforum/vsluhforumID1/95122.html#4 Wed, 23 Oct 2013 12:01:42 GMT &gt;[оверквотинг удален]<br>&gt; 287, 74, 0 <br>&gt; 128 Bucket: <br>&gt; 1048, 0, 10987, <br>&gt; 41, 45306,10772, <br>&gt; 0 <br>&gt; --//-- <br>&gt; [root@hast01 ~]# dmesg &#124; grep ix0 <br>&gt; ix0: &lt;Intel(R) PRO/10GbE PCI-Express Network Driver, Version - 2.4.8&gt; mem 0xfb600000-0xfb7fffff,0xfb804000-0xfb807fff <br>&gt; irq 52 at device 0.0 on pci129 <br>&gt; ix0: RX Descriptors exceed system mbuf max, using default instead!<br><br>Читайте списки рассылки freebsd, про 10GBit карты Intel - за последние полгода-год, масса<br>патчей и рекомендаций<br> Проблемы с сетью, периодически пропадает доступ (VolanD) https://opennet.ru/openforum/vsluhforumID1/95122.html#3 Wed, 23 Oct 2013 04:53:04 GMT &gt;[оверквотинг удален]<br>&gt; 0/0/0/6400 9k jumbo clusters in use (current/cache/total/max) <br>&gt; 0/0/0/3200 16k jumbo clusters in use (current/cache/total/max) <br>&gt; 73758K/40543K/114301K bytes allocated to network (current/cache/total) <br>&gt; 0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters) <br>&gt; 0/0/0 requests for jumbo clusters denied (4k/9k/16k) <br>&gt; 0/0/0 sfbufs in use (current/peak/max) <br>&gt; 0 requests for sfbufs denied <br>&gt; 0 requests for sfbufs delayed <br>&gt; 0 requests for I/O initiated by sendfile <br>&gt; 0 calls to protocol drain routines <br><br>tcpdump чо говорит?<br><br> Проблемы с сетью, периодически пропадает доступ (Дядя_Федор) https://opennet.ru/openforum/vsluhforumID1/95122.html#2 Wed, 23 Oct 2013 04:32:04 GMT &gt; есть непонятная проблема, периодически замерзает связь, при этом на сервере никакой активности. <br><br> Связь надо укрывать одеялом - тогда она замерзать не будет. :) А если серьезно - то посмотрите в сторону физики. Не скачет ли порт на свиче, куда включена сетевуха, встает ли порт в фулдуплексе? Может патч-корд хреново обжат, попробуйте другой? Нет ли в логах чего-либо аномального (например, "линк ап, линк даун"). <br>ПыСы: А ethtool для Фри существует? Довольно неплохой инструмент для анализа и настройки некоторых параметров сетевой карты (те же RX/TX),<br> Проблемы с сетью, периодически пропадает доступ (kudlak) https://opennet.ru/openforum/vsluhforumID1/95122.html#1 Tue, 22 Oct 2013 18:40:25 GMT нашел две баги:<br>[root@hast01 ~]# vmstat -z &#124; head -n 30<br>ITEM SIZE LIMIT USED FREE REQ FAIL SLEEP<br>--//--<br>32 Bucket: 280, 0, 246, 6, 262, 9, 0<br>64 Bucket: 536, 0, 271, 2, 287, 74, 0<br>128 Bucket: 1048, 0, 10987, 41, 45306,10772, 0<br>--//--<br>[root@hast01 ~]# dmesg &#124; grep ix0<br>ix0: &lt;Intel(R) PRO/10GbE PCI-Express Network Driver, Version - 2.4.8&gt; mem 0xfb600000-0xfb7fffff,0xfb804000-0xfb807fff irq 52 at device 0.0 on pci129<br>ix0: RX Descriptors exceed system mbuf max, using default instead!<br>