Квота, как-то странно работает
Включил квоты cat /etc/mtab /dev/sda1 /storage ext4 rw,noatime,nodiratime,errors=remount-ro,user_xattr,noacl,barrier=1,data=ordered,jqfmt=vfsv0,usrjquota=aquota.user,grpjquota=aquota.group 0 0 cat /etc/fstab /dev/sda1 /storageext4 defaults,usrjquota=aquota.user,grpjquota=aquota.group,jqfmt=vfsv0,noatime,nodiratime,noacl,errors=remount-ro 0 1 имеется юзер vasya если смотреть через edquota Disk quotas for user vasya (uid 4023): Filesystem blocks soft hard inodes soft hard /dev/sda1 6639060 0 0 69210 0 du -skh home/vasya/ 196Mhome/vasya/ Grace period before enforcing soft limits for users: Time units may be: days, hours, minutes, or seconds Filesystem Block grace period Inode grace period /dev/sda1 7days 7days Панель так же показывает - что юзер использует 6639060( это примерно 6GB) edquota username - не редактируется вчера делал quotacheck ls -al / -rw---1 root root 115712 Jan 16 16:11 aquota.group -rw---1 root root 114688 Jan 16 16:11 aquota.user т.е. файлы эти не изменились, хотя сегодня очистил директорию юзера на 6Gb и информация должна была отобразиться и я так думаю файлы должны были измениться Куда копать ? --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/452905313.20140117163...@hoster.kg
Re: как отучить себя от nano ?
в /etc/profile export EDITOR=/usr/bin/vi --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/163233097.20131129165...@hoster.kg
Re: Разный размер директории, после lsync
Не всегда если использовать --inline то не создается временный файл \ --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/219145956.20131126172...@hoster.kg
Re: Разный размер директории, после lsync
проверил через моунт источник /dev/sda5 on /www type ext4 (rw,noatime,user_xattr,barrier=1,stripe=32,data=ordered) 136700 images/site_thumbs 10897732images куда копируем /dev/md6 on /DATA type ext4 (rw,noatime,user_xattr,barrier=1,data=ordered) du -x images 136712 images/site_thumbs 10897792images количество файлов совпадает, md5sum файлов совпадают, а размер разный =) --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/883014489.20131125142...@hoster.kg
Re: Разный размер директории, после lsync
куда копируем Block size: 4096 Fragment size:4096 Reserved GDT blocks: 918-- разные Blocks per group: 32768 Fragments per group: 32768 Inodes per group: 8192 -- разные Inode blocks per group: 512-- разные Flex block group size:16 First inode: 11 Inode size: 256 Required extra isize: 28 Desired extra isize: 28 Journal inode:8 откуда Block size: 4096 Fragment size:4096 Reserved GDT blocks: 679 -- разные Blocks per group: 32768 Fragments per group: 32768 Inodes per group: 4096 -- разные Inode blocks per group: 256 -- разные RAID stride: 16 RAID stripe width:32 Flex block group size:16 First inode: 11 Inode size: 256 Required extra isize: 28 Desired extra isize: 28 Journal inode:8 в остальном одинаковые, сейчас попробую скопировать большой файл и маленькие --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1078377718.20131125142...@hoster.kg
Разный размер директории, после lsync
ДОбрый день
делаю сихронизацию двух каталогов
конфиг для lsyncd
sync {
default.rsyncssh,
source=/www/public/,
excludeFrom=/var/www/lsyncd.exclude,
host=s30.megodoo.com,
targetdir=/www/public/,
rsync = {
_extra = {-altsgopr},
},
ssh = {
port = 1212
}
}
синк проходит без проблем, но если сделать
du -sb /www/public/images - на источнике - получаем
11055835517 /www/public/images/
там куда-копировали
11055905149 /www/public/images/
написал скрипт, который бы делал сравнивал md5sum файлов ... все
md5суммы совпали
возможно вот в чем причина
на источнике директория монтируется с ключем - stripe=32
а на дест. без него
везде ФС - ext4
:)
---
Старший Системный Администратор
Алексей Шалин
ОсОО Хостер kg - http://www.hoster.kg
ул. Ахунбаева 123 (здание БГТС)
h...@hoster.kg
--
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/1623943571.20131125093...@hoster.kg
Re: Разный размер директории, после lsync
попробовал с -H тоже самое src 10897732images/ dest 10897792images/ количество файлов одинаковое, md5sum одинаковое у файлов --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1734244820.20131125130...@hoster.kg
Re: проблемка с sshfs и nfs
да в /storage/etc лежит passwd, shadow для chroot /storage оки словлю покажу --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/561007960.20131105180...@hoster.kg
Re: проблемка с sshfs и nfs
Добрый день нет не подменяю сама система грузиться без проблем т.к. у нее есть свой passwd shadow и fstab как только система подгрузилась, монтируется storage - который на данный момент содержит debootstrap stable релиз debian (на момент всей установки это был lenny) так вот как только смонтировался /storage монтируется с файлого сервера через sshfs каталог /storage/etc в /var/lib/extrausers для использования libnss-extrausers т.е. грубо говоря когда я вне чрута сделаю\ getent passwd я увиже юзеров как целевой системы так и из chroot более подробно тут http://ru.ispdoc.com/index.php/%D0%9C%D0%B0%D1%81%D1%82%D0%B5%D1%80-%D1%83%D0%B7%D0%B5%D0%BB --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1104197338.20131106090...@hoster.kg
проблемка с sshfs и nfs
Добрый утр возникает след. проблемка ... =)) есть nfs шара, которая на ноды моунтится в диру /storage и уже в /storage через chroot запукаются приложения вот .. и там же на ноде монтируется через sshfs каталог /storage в /var/lib/extrausers 192.168.15.71:/ 807G 673G 94G 88% /storage /etc/fstab 192.168.15.71:/ /storage nfs4 rw,rsize=32768,wsize=32768,proto=tcp,hard,intr,noatime,noauto,actimeo=240,acregmin=10,acdirmin=30,timeo=50,async 0 0 sshfs /usr/bin/sshfs 192.168.15.71:/storage/etc /var/lib/extrausers 192.168.15.71:/storage/etc 807G 673G 94G 88% /var/lib/extrausers так вот проблема вот в чем, иногда апач не старует и говорит, что apache2 bad group name хотя группа есть 100%, потому что если сделать cat /etc/group и попробовать запустить апач сразу стартует без проблем если вызвать в vi /etc/group то можно найти группу тоже пробовал так #!/bin/bash cat /etc/group /dev/null /etc/init.d/apache2 start не помогает.. а вот если отдельно в шеле тоже самое делать .. работает без проблем --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/512223467.20131105103...@hoster.kg
Re: проблемка с sshfs и nfs
так если в выполнить в баше теже команды cat /etc/group /etc/init.d/apache2 start стартует без проблем есть подозрение, что апач или система хранить в кэше файл со старыми данными при действии cat /etc/group кэш обновляется и апач стартует без проблем --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/131997203.20131105115...@hoster.kg
Re: проблемка с sshfs и nfs
при запуске апача он сам выдает почему не может стартануть и показываеть он apache2 bad group name name_group делаю cat /etc/group | grep name_group (или cat /etc/group) выводиться name_group:x:3912: после чего апач стартует без проблем кэш например nfs как вариант.. как словлю ошибку обязательно покажу порядок действия.. но он всегда не изменен bash#/etc/init.d/apache2 start apache2 bad group name name_group bash#cat /etc/group bash#/etc/init.d/apache2 start и все запускается ошибка появлется не всегда...но появляется --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/265681570.20131105132...@hoster.kg
Re: e1000e патери пакетов
завтра буду ставть tshark и буду собирать стату .. смотреть на пакеты с плохой суммой спасибо! --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1031852119.20131028173...@hoster.kg
Re: e1000e патери пакетов
пуффф =))) ладно все мы и Вы ... начинали с нуля.. знания не приходят, как гром с ясного неба =)) мы их получаем .. не только через обучение, чтение доков и тп и тд... но из общения с гуру-админами, которые готовы помочь, а не тыкать .. =) --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1569646935.20131029094...@hoster.kg
Re: e1000e патери пакетов
@за отключенную автонастройку скорости - надо карать принудительными трудработами на северном полюсе по уборке снега.@ Возможно я с вами соглашусь, но в некоторых источниках, что я видел, указывались такие настройки =)) Да, да - процессорной мощьности у нас много - чего он стоит, пусть работает. С включенными или выключенными этими настройками .. есть дропы =( Стоит включить голову и не пытаться применять различные полезные советы из интернета, а для начала понять что показывает этот счетчик. Будем курить.. надеюсь чего нить на курю... Соглашусь с Павел Знаменский , я конечно понимаю, что Вы просто офигенные админы, но хотел бы напомнить, что в начале пути Вы были нубами... а сейчас.. да отличные специ, и если Вы не хотите делиться заниями.. но это Ваше право, но гадить тоже вообще не айс Данке.. буду дальше курить доки,.. --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/396689148.20131028095...@hoster.kg
Re: NFS high cpu usage
в основном блоги держат местные юзеры .. для них доступ открыт, а вот для всех остальных закрыт брут да есть... но это и помогло не особо сильно load average: 8.03, 10.04, 7.95 плавает.. иногда доходит до 12 потом уходит вниз опять до 2-3.. потом опять вверх и постоянно так маячит =) --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/375125797.20131024121...@hoster.kg
Re: Не работает wodim - где копать?
вот запустил на одном сервер nfsiostat 1 это самый пик 192.168.15.71:/ mounted on /storage: op/s rpc bklog 547.000.00 read: ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 68.000 908.148 13.3550 (0.0%) 13.132 13.162 write:ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 31.000 623.637 20.1170 (0.0%) 7.581 7.645 nfsstat Server rpc stats: calls badcalls badclntbadauthxdrcall 0 0 0 0 0 Client rpc stats: calls retransauthrefrsh 1936492327 7068 1936731584 Client nfs v4: null read writecommit open open_conf 0 0% 7093408 0% 13484954 0% 1515440% 628589818 32% 320650976 16% open_noatopen_dgrdclosesetattr fsinfo renew 64425 0% 72307 0% 627629447 32% 1504410 0% 2 0% 10053 0% setclntidconfirm lock locktlockuaccess 190% 190% 3235009 0% 0 0% 3112120 0% 87088212 4% getattr lookup lookup_root remove rename link 219749301 11% 9105259 0% 1 0% 1061275 0% 77562 0% 6 0% symlink create pathconf statfs readlink readdir 5 0% 1004140% 1 0% 8329500% 1559 0% 2267805 0% server_caps delegreturn getacl setacl fs_locations rel_lkowner 3 0% 7701500 0% 0 0% 0 0% 0 0% 3063112 0% secinfo exchange_id create_ses destroy_ses sequence get_lease_t 0 0% 0 0% 0 0% 0 0% 0 0% 0 0% reclaim_comp layoutgetgetdevinfo layoutcommit layoutreturn getdevlist 0 0% 0 0% 0 0% 0 0% 0 0% 0 0% (null) 0 0% 192.168.15.71:/ mounted on /storage: op/s rpc bklog 1187.000.00 read: ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 51.000 829.742 16.2690 (0.0%) 20.314 20.392 write:ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 2.000 1.004 0.5020 (0.0%) 2.000 2.000 0 nfs_readpage() calls read 0 pages 44 nfs_readpages() calls read 222 pages (5.0 pages per call) 47 nfs_updatepage() calls 2 nfs_writepage() calls wrote 2 pages 7485 nfs_writepages() calls wrote 0 pages (0.0 pages per call) смонтировано так 192.168.15.71:/ /storage nfs4 rw,rsize=32768,wsize=32768,proto=tcp,hard,intr,noatime,noauto,actimeo=240,acregmin=10,acdirmin=30,timeo=50,async 0 0 --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/8910365410.20131024121...@hoster.kg
Re: NFS high cpu usage
вот запустил на одном сервер nfsiostat 1 это самый пик 192.168.15.71:/ mounted on /storage: op/s rpc bklog 547.000.00 read: ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 68.000 908.148 13.3550 (0.0%) 13.132 13.162 write:ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 31.000 623.637 20.1170 (0.0%) 7.581 7.645 nfsstat Server rpc stats: calls badcalls badclntbadauthxdrcall 0 0 0 0 0 Client rpc stats: calls retransauthrefrsh 1936492327 7068 1936731584 Client nfs v4: null read writecommit open open_conf 0 0% 7093408 0% 13484954 0% 1515440% 628589818 32% 320650976 16% open_noatopen_dgrdclosesetattr fsinfo renew 64425 0% 72307 0% 627629447 32% 1504410 0% 2 0% 10053 0% setclntidconfirm lock locktlockuaccess 190% 190% 3235009 0% 0 0% 3112120 0% 87088212 4% getattr lookup lookup_root remove rename link 219749301 11% 9105259 0% 1 0% 1061275 0% 77562 0% 6 0% symlink create pathconf statfs readlink readdir 5 0% 1004140% 1 0% 8329500% 1559 0% 2267805 0% server_caps delegreturn getacl setacl fs_locations rel_lkowner 3 0% 7701500 0% 0 0% 0 0% 0 0% 3063112 0% secinfo exchange_id create_ses destroy_ses sequence get_lease_t 0 0% 0 0% 0 0% 0 0% 0 0% 0 0% reclaim_comp layoutgetgetdevinfo layoutcommit layoutreturn getdevlist 0 0% 0 0% 0 0% 0 0% 0 0% 0 0% (null) 0 0% 192.168.15.71:/ mounted on /storage: op/s rpc bklog 1187.000.00 read: ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 51.000 829.742 16.2690 (0.0%) 20.314 20.392 write:ops/skB/s kB/op retrans avg RTT (ms)avg exe (ms) 2.000 1.004 0.5020 (0.0%) 2.000 2.000 0 nfs_readpage() calls read 0 pages 44 nfs_readpages() calls read 222 pages (5.0 pages per call) 47 nfs_updatepage() calls 2 nfs_writepage() calls wrote 2 pages 7485 nfs_writepages() calls wrote 0 pages (0.0 pages per call) смонтировано так 192.168.15.71:/ /storage nfs4 rw,rsize=32768,wsize=32768,proto=tcp,hard,intr,noatime,noauto,actimeo=240,acregmin=10,acdirmin=30,timeo=50,async 0 0 --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/8910365410.20131024121...@hoster.kg --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1212275692.20131024130...@hoster.kg
Re: Не работает wodim - где копать?
упс не туда сорри --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1126717151.20131024130...@hoster.kg
Re: NFS high cpu usage
может кому и поможет не факт что именно в этом была причина но после долго анализа ... пыток... было обнаружено офигенная арава коннектов к wp-login.php закрыл в фаерволе обращение к этому файлы(на роутере) и нагрузка на NAS серваке с 7.50 упала сразу до 4.. сейчас падает до 1.5 = --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1138836305.20131023174...@hoster.kg
Re: NFS high cpu usage
Вот сейчас LA 21 atop PRC | sys 60.04s | user 0.10s | #proc348 | #zombie0 | #exit 0 | CPU | sys581% | user 1% | irq 26% | idle175% | wait 17% | cpu | sys 73% | user 0% | irq 4% | idle 20% | cpu003 w 3% | cpu | sys 73% | user 0% | irq 3% | idle 20% | cpu006 w 3% | cpu | sys 73% | user 0% | irq 3% | idle 22% | cpu007 w 1% | cpu | sys 72% | user 0% | irq 4% | idle 22% | cpu001 w 2% | cpu | sys 72% | user 0% | irq 4% | idle 21% | cpu000 w 4% | cpu | sys 72% | user 0% | irq 3% | idle 23% | cpu002 w 2% | cpu | sys 73% | user 0% | irq 2% | idle 23% | cpu005 w 2% | cpu | sys 71% | user 0% | irq 4% | idle 24% | cpu004 w 2% | CPL | avg1 22.24 | avg5 17.22 | avg15 17.03 | csw 100337 | intr 114999 | MEM | tot 27.5G | free 376.1M | cache 7.5G | buff 11.7G | slab7.8G | SWP | tot 24.1G | free 24.1G | | vmcom 101.8M | vmlim 37.9G | DSK | sdb | busy 32% | read 188 | write477 | avio4 ms | NET | transport | tcpi 95669 | tcpo 88046 | udpi 0 | udpo 0 | NET | network | ipi95685 | ipo88059 | ipfrw 0 | deliv 95685 | NET | eth0 1% | pcki 46989 | pcko 42842 | si 8971 Kbps | so 11 Mbps | NET | eth1 1% | pcki 47533 | pcko 42862 | si 9085 Kbps | so 11 Mbps | NET | bond0 | pcki 94522 | pcko 85704 | si 18 Mbps | so 23 Mbps | iotop Total DISK READ: 18.50 K/s | Total DISK WRITE: 425.58 K/s TID PRIO USER DISK READ DISK WRITE SWAPIN IOCOMMAND 30875 be/4 root3.70 K/s7.40 K/s 0.00 % 0.98 % [nfsd] 30876 be/4 root3.70 K/s 25.90 K/s 0.00 % 0.69 % [nfsd] 14450 be/4 root 11.10 K/s0.00 B/s 0.00 % 0.03 % python /usr/bin/iotop 30840 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30849 be/4 root0.00 B/s 18.50 K/s 0.00 % 0.00 % [nfsd] 30857 be/4 root0.00 B/s 33.31 K/s 0.00 % 0.00 % [nfsd] 30862 be/4 root0.00 B/s 29.61 K/s 0.00 % 0.00 % [nfsd] 30863 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30864 be/4 root0.00 B/s 40.71 K/s 0.00 % 0.00 % [nfsd] 30865 be/4 root0.00 B/s 59.21 K/s 0.00 % 0.00 % [nfsd] 30871 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30872 be/4 root0.00 B/s3.70 K/s 0.00 % 0.00 % [nfsd] 30878 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30885 be/4 root0.00 B/s 40.71 K/s 0.00 % 0.00 % [nfsd] 30887 be/4 root0.00 B/s 14.80 K/s 0.00 % 0.00 % [nfsd] 30893 be/4 root0.00 B/s0.00 B/s 0.00 % 0.00 % [nfsd] 30898 be/4 root0.00 B/s 33.31 K/s 0.00 % 0.00 % [nfsd] 30901 be/4 root0.00 B/s3.70 K/s 0.00 % 0.00 % [nfsd] 30903 be/4 root0.00 B/s 18.50 K/s 0.00 % 0.00 % [nfsd] 30905 be/4 root0.00 B/s 14.80 K/s 0.00 % 0.00 % [nfsd] 30911 be/4 root0.00 B/s 33.31 K/s 0.00 % 0.00 % [nfsd] 30913 be/4 root0.00 B/s 22.20 K/s 0.00 % 0.00 % [nfsd] 30915 be/4 root0.00 B/s 11.10 K/s 0.00 % 0.00 % [nfsd] 30929 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30930 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30943 be/4 root0.00 B/s 33.31 K/s 0.00 % 0.00 % [nfsd] 30954 be/4 root0.00 B/s 48.11 K/s 0.00 % 0.00 % [nfsd] 30959 be/4 root0.00 B/s7.40 K/s 0.00 % 0.00 % [nfsd] 30967 be/4 root0.00 B/s 29.61 K/s 0.00 % 0.00 % [nfsd] 30916 be/4 root0.00 B/s 11.10 K/s 0.00 % 0.00 % [nfsd] чуть позже PRC | sys 61.68s | user 0.08s | #proc350 | #zombie0 | #exit 4 | CPU | sys599% | user 1% | irq 26% | idle156% | wait 19% | cpu | sys 75% | user 0% | irq 3% | idle 20% | cpu000 w 1% | cpu | sys 75% | user 0% | irq 4% | idle 18% | cpu006 w 3% | cpu | sys 75% | user 0% | irq 4% | idle 18% | cpu001 w 3% | cpu | sys 75% | user 0% | irq 4% | idle 20% | cpu003 w 1% | cpu | sys 75% | user 0% | irq 3% | idle 19% | cpu002 w 3% | cpu | sys 75% | user 0% | irq 3% | idle 21% | cpu005 w 1% | cpu | sys 74% | user 0% | irq 3% | idle 18% | cpu004 w 5% | cpu | sys 74% | user 0% | irq 2% | idle 21% | cpu007 w 2% | CPL | avg1 13.58 | avg5 16.01 | avg15 16.65 | csw 104366 | intr 108379 | MEM | tot 27.5G | free 334.7M | cache 7.5G | buff 11.7G | slab7.7G | SWP | tot 24.1G | free 24.1G | | vmcom 101.9M | vmlim 37.9G | DSK | sdb | busy 36% | read 171 | write306 | avio7 ms | DSK | sda | busy 0% | read 0 | write 3 | avio0 ms | NET | transport | tcpi 85126 | tcpo 81587 | udpi 12 | udpo 12
Re: NFS high cpu usage
могу предположить, что LA как-то связано с nfs процессами в статусе D --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/397082912.20131021132...@hoster.kg
e1000e патери пакетов
добрый день имеем сервер делл и на борту e100e сетевая root@vulcannew:~# ethtool -i eth1 driver: e1000e version: 2.5.4-NAPI firmware-version: 1.0-0 bus-info: :06:00.1 supports-statistics: yes supports-test: yes supports-eeprom-access: yes supports-register-dump: yes supports-priv-flags: no установил значения, как описано тут чт http://www.doxer.org/learn-linux/resolved-intel-e1000e-driver-bug-on-82574l-ethernet-controller-causing-network-blipping/ /sbin/ethtool -A eth1 autoneg off /sbin/ethtool -s eth1 autoneg off #change tx ring buffer /sbin/ethtool -G eth1 tx 4096 #maybe too large(consider 512). To increase interrupt rate, ethtool -C eth0 rx-usecs 101 interrupts per second #change rx ring buffer /sbin/ethtool -G eth1 rx 128 #turn off offload /sbin/ethtool -K eth1 tx off rx off sg off tso off gso off gro off /sbin/ethtool -A eth1 tx on фактически сразу eth1 Link encap:Ethernet HWaddr 00:15:17:aa:f0:d1 inet addr:192.168.15.200 Bcast:192.168.15.255 Mask:255.255.255.0 inet6 addr: fe80::215:17ff:feaa:f0d1/64 Scope:Link UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1 RX packets:164171 errors:0 dropped:34 overruns:0 frame:0 TX packets:132328 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:161894060 (154.3 MiB) TX bytes:20502541 (19.5 MiB) Interrupt:19 Memory:9880-9882 root@vulcannew:~# uptime 16:45:36 up 1 min, 1 user, load average: 1.41, 0.36, 0.12 root@vulcannew:~# хотя ethtool -S eth1 root@vulcannew:~# ethtool -S eth1 | grep err rx_errors: 0 tx_errors: 0 rx_length_errors: 0 rx_over_errors: 0 rx_crc_errors: 0 rx_frame_errors: 0 rx_missed_errors: 0 tx_aborted_errors: 0 tx_carrier_errors: 0 tx_fifo_errors: 0 tx_heartbeat_errors: 0 tx_window_errors: 0 tx_deferred_ok: 0 rx_long_length_errors: 0 rx_short_length_errors: 0 rx_align_errors: 0 rx_csum_offload_errors: 0 uncorr_ecc_errors: 0 corr_ecc_errors: 0 root@vulcannew:~# говорит ошибок нет что включено и выключено на карточке root@vulcannew:~# ethtool -k eth1 Features for eth1: rx-checksumming: off tx-checksumming: off tx-checksum-ipv4: off [fixed] tx-checksum-unneeded: off [fixed] tx-checksum-ip-generic: off tx-checksum-ipv6: off [fixed] tx-checksum-fcoe-crc: off [fixed] tx-checksum-sctp: off [fixed] scatter-gather: off tx-scatter-gather: off tx-scatter-gather-fraglist: off [fixed] tcp-segmentation-offload: off tx-tcp-segmentation: off tx-tcp-ecn-segmentation: off [fixed] tx-tcp6-segmentation: off udp-fragmentation-offload: off [fixed] generic-segmentation-offload: off generic-receive-offload: off large-receive-offload: off [fixed] rx-vlan-offload: on tx-vlan-offload: on ntuple-filters: off [fixed] receive-hashing: on highdma: on [fixed] rx-vlan-filter: on [fixed] vlan-challenged: off [fixed] tx-lockless: off [fixed] netns-local: off [fixed] tx-gso-robust: off [fixed] tx-fcoe-segmentation: off [fixed] fcoe-mtu: off [fixed] tx-nocache-copy: on loopback: off [fixed] может стоит отключить NAPI ? Спасибо --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/190510777.20131021165...@hoster.kg
Re: e1000e патери пакетов
Добрый день iptables там есть, но в нем нет правил, т.е. траффик должен ходить без проблем root@vulcannew:~/e1000e-2.5.4# iptables -L -v Chain INPUT (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination Chain FORWARD (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination Chain OUTPUT (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination root@vulcannew:~/e1000e-2.5.4# iptables -L -v -t nat Chain PREROUTING (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination Chain INPUT (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination Chain OUTPUT (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination Chain POSTROUTING (policy ACCEPT 0 packets, 0 bytes) pkts bytes target prot opt in out source destination root@vulcannew:~/e1000e-2.5.4# --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/79127974.20131021171...@hoster.kg
Re: e1000e патери пакетов
погугли нашел вот что http://debianforum.ru/index.php?topic=5940.0 запустил у себя много такихз сообщений 17:46:27.070251 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:29.069348 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:31.068431 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:33.067542 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:35.066607 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:37.065683 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:39.064718 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 17:46:41.063932 00:18:8b:9f:63:eb 01:80:c2:00:00:00, 802.3, length 60: LLC, dsap STP (0x42) Individual, ssap STP (0x42) Command, ctrl 0x03: STP 802.1d, Config, Flags [none], bridge-id 8000.00:18:8b:9f:63:eb.800c, length 43 message-age 0.00s, max-age 20.00s, hello-time 2.00s, forwarding-delay 15.00s root-id 8000.00:18:8b:9f:63:eb, root-pathcost 0 есть и такое 17:45:05.268178 00:14:80:ac:9b:ec 01:00:0c:cc:cc:cc, 802.3, length 310: LLC, dsap SNAP (0xaa) Individual, ssap SNAP (0xaa) Command, ctrl 0x03: oui Cisco (0x0c), pid CDP (0x2000): CDPv2, ttl: 180s, checksum: 692 (unverified), length 288 Device-ID (0x01), length: 11 bytes: 'JAE091598DY' Address (0x02), length: 13 bytes: IPv4 (1) 10.10.10.104 Port-ID (0x03), length: 4 bytes: '2/15' Capability (0x04), length: 4 bytes: (0x000a): Transparent Bridge, L2 Switch Version String (0x05), length: 114 bytes: WS-C2948G-GE-TX Software, Version McpSW: 8.3(2.0) NmpSW: 8.3(2)GLX Copyright (c) 1995-2004 by Cisco Systems, Inc. Platform (0x06), length: 15 bytes: 'WS-C2948G-GE-TX' VTP Management Domain (0x09), length: 9 bytes: 'hosterkg]' Native VLAN ID (0x0a), length: 2 bytes: 100 Duplex (0x0b), length: 1 byte: full AVVID trust bitmap (0x12), length: 1 byte: 0x00 AVVID untrusted ports CoS (0x13), length: 1 byte: 0x00 System Name (0x14), length: 0 bytes: '' может из-за этой циске и весь сыр бор =)) завтра буду смотреть отлучу эту циску и буду смотреть на дропы спасибо!!! -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/11210258133.20131021175...@hoster.kg
NFS high cpu usage
Сведение о Сервер Intel(R) Xeon(TM) MP CPU 3.16GHz root@nas2-backup:~# cat /proc/cpuinfo | grep cpu | wc -l 32 хотя топ показывает от 0 до 7 free -g total used free sharedbuffers cached Mem:27 27 0 0 8 11 не осталось свободной памяти ...=(( а так 27GB RAID контроллер *-storage description: RAID bus controller product: MegaRAID vendor: LSI Logic / Symbios Logic physical id: 7 bus info: pci@:13:07.0 logical name: scsi2 version: 01 width: 32 bits clock: 66MHz capabilities: storage pm bus_master cap_list rom configuration: driver=megaraid latency=32 resources: irq:134 memory:d8ff-d8ff(prefetchable) memory:df60-df60(prefetchable) Диски: 10x148Gb SCSI U320 15k /dev/sdb1 807G 674G 93G 88% /storage /dev/sdb1 /storage ext4 defaults,usrjquota=aquota.user,grpjquota=aquota.group,jqfmt=vfsv0,noatime,nodiratime,noacl,errors=remount-ro 0 1 сетевые карты ethtool -i eth0 driver: tg3 version: 3.116 firmware-version: 5704-v3.36, ASFIPMIc v2.36 bus-info: :10:02.0 ethtool -i eth1 driver: tg3 version: 3.116 firmware-version: 5704-v3.36, ASFIPMIc v2.36 bus-info: :10:02.0 ifconfig bond0 Link encap:Ethernet HWaddr 00:0f:1f:ff:d6:4d inet addr:192.168.15.71 Bcast:192.168.15.255 Mask:255.255.255.0 inet6 addr: fe80::20f:1fff:feff:d64d/64 Scope:Link UP BROADCAST RUNNING MASTER MULTICAST MTU:1500 Metric:1 RX packets:1062818202 errors:0 dropped:3918 overruns:0 frame:0 TX packets:1041317321 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1 RX bytes:258867684559 (241.0 GiB) TX bytes:396569192650 (369.3 GiB) на сервере запушен только nfs-kernel-server uname -a Linux nas2-backup 2.6.32-5-amd64 #1 SMP Sun Sep 23 10:07:46 UTC 2012 x86_64 GNU/Linux Debian 6. Что имеем... раз в день или два.. нагрузка LA растет семи-мильными шагами... Но сделав рестатр nfs LA падает до 1 или 2 через часиков 10 начнет растит хотя не всегда так --- сервер подключен линком в DLINK (не управляемый свитч) далее к этому свитчу подключена делл-шасси на серверах, что поставлены в эту шасси на интерфейсах dropped:0 а вот сервера, которые подключены CISCO Catalyst 2948G (кажется) есть dropped:х Вопрос.. почему растет нагрузка LA, что заметно на чтении и записи .. на серверах, которые монтируют /storage куда рыть.. куда копать.. куда тыкать .. я уже все перепробовал --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/972853259.20131018151...@hoster.kg
Re: NFS high cpu usage
free -g total used free sharedbuffers cached Mem:27 27 0 0 8 12 -/+ buffers/cache: 6 21 Swap: 24 0 24 если вы про это - то да в кэше 21Gb :) --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/131164198.20131018152...@hoster.kg
Re: NFS high cpu usage
LA - load average: ввиду того, что на серваке только крутиться nfsd в top - он только и есть... типа\ 30842 root 20 0 000 S 16 0.0 1:01.17 nfsd 30896 root 20 0 000 S 13 0.0 1:30.96 nfsd 30955 root 20 0 000 R 13 0.0 0:39.93 nfsd 30840 root 20 0 000 S 11 0.0 0:53.49 nfsd 30948 root 20 0 000 S 10 0.0 0:54.35 nfsd 30963 root 20 0 000 S9 0.0 1:20.05 nfsd 30914 root 20 0 000 S8 0.0 0:59.11 nfsd 30960 root 20 0 000 S8 0.0 0:53.85 nfsd 30957 root 20 0 000 S7 0.0 1:09.49 nfsd 30882 root 20 0 000 R3 0.0 1:46.03 nfsd 30915 root 20 0 000 S2 0.0 1:42.61 nfsd или так 30842 root 20 0 000 D 23 0.0 1:03.34 nfsd 30963 root 20 0 000 S 22 0.0 1:21.67 nfsd 30955 root 20 0 000 D 22 0.0 0:41.79 nfsd 30889 root 20 0 000 D 20 0.0 1:03.72 nfsd 30966 root 20 0 000 D 17 0.0 1:12.57 nfsd 30840 root 20 0 000 S 16 0.0 0:55.29 nfsd 30914 root 20 0 000 S 15 0.0 0:59.71 nfsd 30967 root 20 0 000 D 13 0.0 1:33.34 nfsd 30882 root 20 0 000 S 10 0.0 1:47.53 nfsd --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/238395068.20131018154...@hoster.kg
Re: NFS high cpu usage
да есть рабочие процессы nfsd данная папка /storage монтируется на 8 веб нод + 1 основная нода на веб нодах - апач для отдачи динамики 1 основной - nginx для отдачи статики на просторах тырнета написано, что нужно 2 коннект от nfs client в один кабель т.е. грубо говоря nfs client1 nfs client2 идут по одному ethrnet cable nfs client3 nfs client4 идут по след. ethrnet cable --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/887486349.20131018163...@hoster.kg
Re: NFS high cpu usage
я просто не то вырезал через grep :) нужно было грепать по processor cat /proc/cpuinfo | grep processor | wc -l 8 8 процессоров --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/668235670.20131018163...@hoster.kg
Re: NFS high cpu usage
iostat Total DISK READ: 323.37 K/s | Total DISK WRITE: 166.33 K/s TID PRIO USER DISK READ DISK WRITE SWAPIN IOCOMMAND 30847 be/4 root7.43 K/s 360.53 K/s 0.00 % 57.73 % [nfsd] 30845 be/4 root0.00 B/s 341.95 K/s 0.00 % 49.46 % [nfsd] 30955 be/4 root 118.94 K/s 397.70 K/s 0.00 % 41.39 % [nfsd] 30914 be/4 root 78.05 K/s 293.63 K/s 0.00 % 36.32 % [nfsd] 30899 be/4 root0.00 B/s0.00 B/s 0.00 % 30.57 % [nfsd] 30940 be/4 root0.00 B/s 193.28 K/s 0.00 % 14.35 % [nfsd] 30852 be/4 root 26.02 K/s7.43 K/s 0.00 % 13.66 % [nfsd] 30848 be/4 root 52.04 K/s 341.95 K/s 0.00 % 11.67 % [nfsd] 30948 be/4 root 40.89 K/s 557.53 K/s 0.00 % 9.70 % [nfsd] 30925 be/4 root0.00 B/s 449.74 K/s 0.00 % 9.39 % [nfsd] вот поймал load average: 2.10, 2.53, 2.55 atop PRC | sys 16.22s | user 0.08s | #proc350 | #zombie0 | #exit 0 | CPU | sys157% | user 1% | irq 23% | idle589% | wait 30% | cpu | sys 21% | user 0% | irq 3% | idle 75% | cpu006 w 1% | cpu | sys 20% | user 0% | irq 3% | idle 71% | cpu000 w 6% | cpu | sys 20% | user 0% | irq 3% | idle 77% | cpu001 w 0% | cpu | sys 20% | user 0% | irq 3% | idle 76% | cpu002 w 1% | cpu | sys 20% | user 0% | irq 3% | idle 77% | cpu007 w 0% | cpu | sys 19% | user 0% | irq 3% | idle 78% | cpu004 w 0% | cpu | sys 19% | user 0% | irq 3% | idle 70% | cpu003 w 8% | cpu | sys 19% | user 0% | irq 3% | idle 65% | cpu005 w 14% | CPL | avg1 1.92 | avg52.54 | avg15 2.56 | csw 188389 | intr 100103 | MEM | tot 27.5G | free 373.6M | cache 12.6G | buff8.7G | slab5.6G | SWP | tot 24.1G | free 24.1G | | vmcom 101.6M | vmlim 37.9G | DSK | sdb | busy 19% | read 56 | write336 | avio4 ms | DSK | sda | busy 0% | read 0 | write 1 | avio0 ms | NET | transport | tcpi 59236 | tcpo 59143 | udpi 0 | udpo 0 | NET | network | ipi59249 | ipo59156 | ipfrw 0 | deliv 59250 | NET | eth1 0% | pcki 29809 | pcko 29547 | si 5636 Kbps | so 7564 Kbps | NET | eth0 0% | pcki 29747 | pcko 29295 | si 5632 Kbps | so 7537 Kbps | NET | bond0 | pcki 59556 | pcko 58842 | si 11 Mbps | so 15 Mbps | но думаю нужно подождать когда будет опять нагрузка --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/10110572803.20131018171...@hoster.kg
Re: проблема с NFS
Спасибо будем наблюдать!!! --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/4110225686.20130930092...@hoster.kg
Re: mysqld_safe 'Can't connect to local MySQL server through socket' from bash
ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: YES) пароль не подходит .. mysql --socket=/tmp/mysqld_safe.socket --password=12345678 вот такт нуна --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1661457179.20130927135...@hoster.kg
Re: mysqld_safe 'Can't connect to local MySQL server through socket' from bash
как это не используется #!/bin/bash mysql -u root --password=12345678 mysql -e 'show databases;' тут видно что пароль вводиться, а ошибка говорит о том, что у пользователя root есть пароль и он не обходим для доступа --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1967092658.20130927143...@hoster.kg
Re: проблема с NFS
Добрый день на сервере настроен bonding для двух интерфейсов, auto bond0 iface bond0 inet static address 192.168.15.71 netmask 255.255.255.0 network 192.168.15.0 gateway 192.168.15.230 slaves eth0 eth1 # jumbo frame support mtu 9000 -- ну уверен нужно ли это, т.к у всех остальных машинах 1500 # Load balancing and fault tolerance bond-mode balance-rr bond-miimon 100 bond-downdelay 200 bond-updelay 200 dns-nameservers 192.168.15.230 я пробовал hard вместо soft... не особо лучше было а зачем nginx на nfs ? с нфс монтится chroot окружение, которое используется на клиентских машинах, от общего низя =( на счет железа, вообщем-то мы планируем перейти на другую полку, уже на сас винтах, правда винты там 7.2к =( спасибо за вектор движения на счет интерфейсом тоже дельное предложение сеть точно 1Gb --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1841871536.20130926104...@hoster.kg
проблема с NFS
Доброе всем утро!! У меня возникла проблема с NFS (вернее она уже давно существует) проблема такая имеется 1 NFS сервер (DELL 6800 CPU Intel(R) Xeon(TM) MP CPU 3.16GHz x 8, Памяти 27 гигов) к нему подключена полка с SCSI винтами U320 15k .. в RAID 5 смонтирован сюда этот диск /dev/sdb1 807G 681G 86G 89% /storage Монтируется так /dev/sdb1 /storage ext4 defaults,usrjquota=aquota.user,grpjquota=aquota.group,jqfmt=vfsv0,noatime,nodiratime,noacl,errors=remount-ro 0 1 раздается через nfs так /storage 192.168.15.0/24(rw,async,secure,no_root_squash,no_all_squash,no_subtree_check,fsid=root,no_acl) apt-cache showpkg nfs-kernel-server Package: nfs-kernel-server Versions: 1:1.2.2-4squeeze2 (/var/lib/apt/lists/ftp.ru.debian.org_debian_dists_stable_main_binary-amd64_Packages) (/var/lib/dpkg/status) Description Language: File: /var/lib/apt/lists/ftp.ru.debian.org_debian_dists_stable_main_binary-amd64_Packages MD5: 899bf536fe9edad1d8a30a8fada5180d Reverse Depends: zfs-fuse,nfs-kernel-server rgmanager,nfs-kernel-server nfs-common,nfs-kernel-server 1:1.0.7-5 ltsp-server,nfs-kernel-server ltsp-server-standalone,nfs-kernel-server harden-servers,nfs-kernel-server fai-server,nfs-kernel-server fai-quickstart,nfs-kernel-server education-main-server,nfs-kernel-server Dependencies: 1:1.2.2-4squeeze2 - libblkid1 (2 2.16) libc6 (2 2.3) libcomerr2 (2 1.01) libgssapi-krb5-2 (2 1.6.dfsg.2) libgssglue1 (0 (null)) libk5crypto3 (2 1.6.dfsg.2) libkrb5-3 (2 1.6.dfsg.2) libnfsidmap2 (0 (null)) librpcsecgss3 (0 (null)) libwrap0 (2 7.6-4~) nfs-common (5 1:1.2.2-4squeeze2) ucf (0 (null)) lsb-base (2 1.3-9ubuntu3) knfs (0 (null)) nfs-server (0 (null)) knfs (0 (null)) nfs-server (0 (null)) Provides: 1:1.2.2-4squeeze2 - nfs-server knfs Reverse Provides: cat /etc/default/nfs-kernel-server # Number of servers to start up RPCNFSDCOUNT=100 # Runtime priority of server (see nice(1)) RPCNFSDPRIORITY=0 # Options for rpc.mountd. # If you have a port-based firewall, you might want to set up # a fixed port here using the --port option. For more information, # see rpc.mountd(8) or http://wiki.debian.org/?SecuringNFS RPCMOUNTDOPTS=--manage-gids # Do you want to start the svcgssd daemon? It is only required for Kerberos # exports. Valid alternatives are yes and no; the default is no. NEED_SVCGSSD= # Options for rpc.svcgssd. RPCSVCGSSDOPTS= На этом серваке стоит Debian 6 root@nas2-backup:~# uname -a Linux nas2-backup 2.6.32-5-amd64 #1 SMP Sun Sep 23 10:07:46 UTC 2012 x86_64 GNU/Linux root@nas2-backup:~# root@nas2-backup:~# cat /etc/debian_version 6.0.5 root@nas2-backup:~# Данная шара /storage раздается на 10 компов Монтируется так 192.168.15.71:/ /storage nfs4 rw,rsize=65000,wsize=65000,proto=tcp,soft,intr,noatime,noauto,actimeo=240,acregmin=10,acdirmin=30,timeo=50,async 0 0 так вот в логах можно найти такое 2013/09/24 18:56:17 [crit] 10657#0: *847376 open() summer-camp-block.jpg failed (5: Input/output error), client: 95.108.158.234, server: blc.com.kg, request: GET /sites/default/files/images/summer-camp-block.jpg HTTP/1.1, host: www.blc.com.kg причем много.. потом это сообщение пропадает и все вроде бы работает, но во время такой ошибки.. ессно файлы не зачитываются так это происходит ночью в основном (пред. ошибка была когда сервер nfs был не доступен) так вот ночью с nfs сервера делается rsync На другой сервер.. возможно из-за этого и выходит такая ошибка так же есть такие ошибки Sep 25 02:30:52 ispcp kernel: [25965.872151] nfs: server 192.168.15.71 not responding, timed out Sep 25 02:30:52 ispcp kernel: [25965.872159] nfs: server 192.168.15.71 not responding, timed out Sep 25 02:30:52 ispcp kernel: [25965.872163] nfs: server 192.168.15.71 not responding, timed out Sep 25 04:12:37 ispcp kernel: [32071.136033] nfs: server 192.168.15.71 not responding, timed out Sep 25 05:38:37 ispcp kernel: [37230.976215] nfs: server 192.168.15.71 not responding, timed out Sep 25 05:43:14 ispcp kernel: [37507.584032] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:49 ispcp kernel: [38803.232052] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296104] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296116] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296120] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296125] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296129] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296133] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296136] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296140] nfs: server 192.168.15.71 not responding, timed out Sep 25
Доброе утро, Гуру!!
Доброе всем утро!! У меня возникла проблема с NFS (вернее она уже давно существует) проблема такая имеется 1 NFS сервер (DELL 6800 CPU Intel(R) Xeon(TM) MP CPU 3.16GHz x 8, Памяти 27 гигов) к нему подключена полка с SCSI винтами U320 15k .. в RAID 5 смонтирован сюда этот диск /dev/sdb1 807G 681G 86G 89% /storage Монтируется так /dev/sdb1 /storage ext4 defaults,usrjquota=aquota.user,grpjquota=aquota.group,jqfmt=vfsv0,noatime,nodiratime,noacl,errors=remount-ro 0 1 раздается через nfs так /storage 192.168.15.0/24(rw,async,secure,no_root_squash,no_all_squash,no_subtree_check,fsid=root,no_acl) apt-cache showpkg nfs-kernel-server Package: nfs-kernel-server Versions: 1:1.2.2-4squeeze2 (/var/lib/apt/lists/ftp.ru.debian.org_debian_dists_stable_main_binary-amd64_Packages) (/var/lib/dpkg/status) Description Language: File: /var/lib/apt/lists/ftp.ru.debian.org_debian_dists_stable_main_binary-amd64_Packages MD5: 899bf536fe9edad1d8a30a8fada5180d Reverse Depends: zfs-fuse,nfs-kernel-server rgmanager,nfs-kernel-server nfs-common,nfs-kernel-server 1:1.0.7-5 ltsp-server,nfs-kernel-server ltsp-server-standalone,nfs-kernel-server harden-servers,nfs-kernel-server fai-server,nfs-kernel-server fai-quickstart,nfs-kernel-server education-main-server,nfs-kernel-server Dependencies: 1:1.2.2-4squeeze2 - libblkid1 (2 2.16) libc6 (2 2.3) libcomerr2 (2 1.01) libgssapi-krb5-2 (2 1.6.dfsg.2) libgssglue1 (0 (null)) libk5crypto3 (2 1.6.dfsg.2) libkrb5-3 (2 1.6.dfsg.2) libnfsidmap2 (0 (null)) librpcsecgss3 (0 (null)) libwrap0 (2 7.6-4~) nfs-common (5 1:1.2.2-4squeeze2) ucf (0 (null)) lsb-base (2 1.3-9ubuntu3) knfs (0 (null)) nfs-server (0 (null)) knfs (0 (null)) nfs-server (0 (null)) Provides: 1:1.2.2-4squeeze2 - nfs-server knfs Reverse Provides: cat /etc/default/nfs-kernel-server # Number of servers to start up RPCNFSDCOUNT=100 # Runtime priority of server (see nice(1)) RPCNFSDPRIORITY=0 # Options for rpc.mountd. # If you have a port-based firewall, you might want to set up # a fixed port here using the --port option. For more information, # see rpc.mountd(8) or http://wiki.debian.org/?SecuringNFS RPCMOUNTDOPTS=--manage-gids # Do you want to start the svcgssd daemon? It is only required for Kerberos # exports. Valid alternatives are yes and no; the default is no. NEED_SVCGSSD= # Options for rpc.svcgssd. RPCSVCGSSDOPTS= На этом серваке стоит Debian 6 root@nas2-backup:~# uname -a Linux nas2-backup 2.6.32-5-amd64 #1 SMP Sun Sep 23 10:07:46 UTC 2012 x86_64 GNU/Linux root@nas2-backup:~# root@nas2-backup:~# cat /etc/debian_version 6.0.5 root@nas2-backup:~# Данная шара /storage раздается на 10 компов Монтируется так 192.168.15.71:/ /storage nfs4 rw,rsize=65000,wsize=65000,proto=tcp,soft,intr,noatime,noauto,actimeo=240,acregmin=10,acdirmin=30,timeo=50,async 0 0 так вот в логах можно найти такое 2013/09/24 18:56:17 [crit] 10657#0: *847376 open() summer-camp-block.jpg failed (5: Input/output error), client: 95.108.158.234, server: blc.com.kg, request: GET /sites/default/files/images/summer-camp-block.jpg HTTP/1.1, host: www.blc.com.kg причем много.. потом это сообщение пропадает и все вроде бы работает, но во время такой ошибки.. ессно файлы не зачитываются так это происходит ночью в основном (пред. ошибка была когда сервер nfs был не доступен) так вот ночью с nfs сервера делается rsync На другой сервер.. возможно из-за этого и выходит такая ошибка так же есть такие ошибки Sep 25 02:30:52 ispcp kernel: [25965.872151] nfs: server 192.168.15.71 not responding, timed out Sep 25 02:30:52 ispcp kernel: [25965.872159] nfs: server 192.168.15.71 not responding, timed out Sep 25 02:30:52 ispcp kernel: [25965.872163] nfs: server 192.168.15.71 not responding, timed out Sep 25 04:12:37 ispcp kernel: [32071.136033] nfs: server 192.168.15.71 not responding, timed out Sep 25 05:38:37 ispcp kernel: [37230.976215] nfs: server 192.168.15.71 not responding, timed out Sep 25 05:43:14 ispcp kernel: [37507.584032] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:49 ispcp kernel: [38803.232052] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296104] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296116] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296120] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296125] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296129] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296133] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296136] nfs: server 192.168.15.71 not responding, timed out Sep 25 06:04:57 ispcp kernel: [38811.296140] nfs: server 192.168.15.71 not responding, timed out Sep 25
Re: Доброе утро, Гуру!!
Это было лишнее сообщение ... можно заигнорить его! --- Старший Системный Администратор Алексей Шалин ОсОО Хостер kg - http://www.hoster.kg ул. Ахунбаева 123 (здание БГТС) h...@hoster.kg -- To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org Archive: http://lists.debian.org/1944042817.20130925090...@hoster.kg
