Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Dê uma olhada no documento abaixo: http://www.fug.com.br/historico/html/freebsd/2006-08/msg00040.html Uma coisa que vc pode aumentar de cara sao seus mbuf clusters que sao reponsaveis pela parte de rede do kernel. Dê uma pesquisada melhor sobre mbuf clusters Mensagem Original: Data: 19:48:33 09/01/2007 De: Rodrigo Mufalani [EMAIL PROTECTED] Assunto: Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão ! Sistemas operacionais Unixes são diferentes.: O kernel é diferente nas duas plataformas assim os programas se comportaram diferentesm tente configurar o seu kernel para se comportar o mais proximo do kernel do solaris. Dê uma tunada no seu kernel pode ser este o problema, se vc roda o squid e somente ele te processo pesado configure o seu kernel voltado para isto. Não vai adiantar term uma ferrari se o motor dela esta preso. Mensagem Original: Data: 11:22:26 09/01/2007 De: Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] Assunto: Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão ! Olá Joao ! Cara esta máquina que estou migrando (X236 IBM) e apresentando CPU 100% e muito boa com discos scsi´s de 15K com 2GB de memoria e 2 Processadores Xeon 3.0, o que esta me deixando maluco é que na máquina com Solaris o squid se comporta muito bem ... Minhas regras são sim extensas mas não uso filtro externo eu mesmo as alimento ... e com o Solaris nesta maquina funciona sem problemas ... isso que esta me encabulando ... se fosse regras e tal teria que acontecer no Solaris tambem nao ? Ou o Solaris esta administrando melhor o Squid ... Cara ja estou fazendo testes a um bom tempo e nao chego a nenhum lugar para solucionar esta questao: Linux+squid.+5k de IP´s . Obrigado. On 1/9/07, Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] wrote: Olá Pessoal ! Novamente volto com uma questão antiga aqui, mas o forum do FUG é o mais completo sobre estes temas ... talvez consiga me ajudar. - Tenho uma máquina X236 com RAID 0 - 420 GB, 2GB Mem., 2 Processadores Xeon 3.0 e tal ...; - Tenho um acesso diário na faixa de 5000 hosts(IP) aproximadamente 35 GB de trafego; Hoje consigo uma boa performance em uma V65 Sun com Solaris 9 Intel sem problemas o Squid funciona sem problemas e com uso habitual de aproximadamente de 45 a 60 % de CPU; Se uso as mesmas configurações em uma máquina GNU/Linux (Slackware, Red Hat Enterprise 5 ...) a CPU vai a 100 % e fica lenta as conexões, se volto a mesma configuração e compilação do Squid para a máquina Sun com Solaris 9 Intel a performance e CPU voltam a situação ideal. Tem listas muito grandes de filtros? Como elas estão? Dá para simplificar? Eu acrescentei algumas regras que baixei do site www.malware.com.br e o índice de CPU aumentou de 20% de CPU para 40% de CPU, nas horas de pico. Estou usando um AMD64 3000+ 939, com um 1 GB DDR 400de memória para cerca 400 usuários de rádio e cabo. Quando estava usando um K7 2 mil e algo, o índice de uso de CPU pelo squid era o dobro. A velocidade de acesso à memória no squid parece ser, e eu acho que é, algo muito importante, e nos AMD64 939 isto parece ser muito bom. João Rocha. Compilação Squid: **('-prefix=/usr/local/squid' '--enable-removal-policies=heap lru' '--enable-delay-pools' '--enable-snmp' '--enable-arp-acl' '--enable-underscores' '--enable-basic-auth-helpers=PAM YP SMB SASL NCSA LDAP' '--enable-digest-auth-helpers=password' '--enable-ntlm-fail-open' '--enable-large-cache-files' '--enable-x-accelerator-vary' '--enable-storeio=ufs diskd' ** - Verificado DNS (resolv.conf. hosts, nsswitch.conf, nscd.conf etc) - /var/logs/messages (tudo ok ) - Memoria e cache (ok) - Link (ok) - Alguem teria ideia ? poderia ser o maximo de conexoes TCP setadas ? - Existe compatibilidade da placa SCSI server raid 7k da IBM com FREEBSD ? Obrigado se alguem poder me sugerir algo ( Ja postarao a sugestao de ter varios squid´s rodando para maquina dual processor mas tambem nao funcionou ! e as outras sugestoes postadas no forum sobre isso tambem nao ...) Obs.: O Squid fica com CPU razoavel no GNU/Linux quando estou com 1/5 de Hosts(IP) requisitando este servico mas quando estou com carga total a CPU vai a 100% e arria. Obrigado a todos. - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd -- Cândido Henrique M. de Souza Técnico em Suporte de Redes Gerência de Tecnologia Tribunal de Justiça - MG Tel.: 55-31-3237-6319 / 55-31-9164-6261 Fax.: 55-31-3237-6321 [EMAIL PROTECTED] http://www.tjmg.gov.br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd Isso não é muito correto afirmar, Atenciosamente, Rodrigo Mufalani [EMAIL PROTECTED] (21) 910739169
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Se uso as mesmas configurações em uma máquina GNU/Linux (Slackware, Red Hat Enterprise 5 ...) a CPU vai a 100 % e fica lenta as conexões, se volto a mesma configuração e compilação do Squid para a máquina Sun com Solaris 9 Intel a performance e CPU voltam a situação ideal. Não sei muito de linux, mas tem algo nele que vê o estado do processo do squid? Se houver, você pode verificar o q ele está esperando, se é I/O, memória, etc etc. - Alguem teria ideia ? poderia ser o maximo de conexoes TCP setadas ? - Existe compatibilidade da placa SCSI server raid 7k da IBM com FREEBSD ? É só ir no site do FreeBSD e verificar se o chipset é suportado. Se você puder parar a máquina algum momento, dê o boot com o FreeBSD 6.1. Se ele achar os discos fica garantido :) Obs.: O Squid fica com CPU razoavel no GNU/Linux quando estou com 1/5 de Hosts(IP) requisitando este servico mas quando estou com carga total a CPU vai a 100% e arria. Deve ser acesso a disco, mas isso só dá pra saber utilizando as ferramentas de monitoramento do linux. No free vc pode usar o gstat, systat, iostat e afins pra verificar o que está acontendo com os processos. - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
On 1/9/07, Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] wrote: Olá Pessoal ! Novamente volto com uma questão antiga aqui, mas o forum do FUG é o mais completo sobre estes temas ... talvez consiga me ajudar. - Tenho uma máquina X236 com RAID 0 - 420 GB, 2GB Mem., 2 Processadores Xeon 3.0 e tal ...; - Tenho um acesso diário na faixa de 5000 hosts(IP) aproximadamente 35 GB de trafego; Hoje consigo uma boa performance em uma V65 Sun com Solaris 9 Intel sem problemas o Squid funciona sem problemas e com uso habitual de aproximadamente de 45 a 60 % de CPU; Se uso as mesmas configurações em uma máquina GNU/Linux (Slackware, Red Hat Enterprise 5 ...) a CPU vai a 100 % e fica lenta as conexões, se volto a mesma configuração e compilação do Squid para a máquina Sun com Solaris 9 Intel a performance e CPU voltam a situação ideal. Tem listas muito grandes de filtros? Como elas estão? Dá para simplificar? Eu acrescentei algumas regras que baixei do site www.malware.com.br e o índice de CPU aumentou de 20% de CPU para 40% de CPU, nas horas de pico. Estou usando um AMD64 3000+ 939, com um 1 GB DDR 400de memória para cerca 400 usuários de rádio e cabo. Quando estava usando um K7 2 mil e algo, o índice de uso de CPU pelo squid era o dobro. A velocidade de acesso à memória no squid parece ser, e eu acho que é, algo muito importante, e nos AMD64 939 isto parece ser muito bom. João Rocha. Compilação Squid: **('-prefix=/usr/local/squid' '--enable-removal-policies=heap lru' '--enable-delay-pools' '--enable-snmp' '--enable-arp-acl' '--enable-underscores' '--enable-basic-auth-helpers=PAM YP SMB SASL NCSA LDAP' '--enable-digest-auth-helpers=password' '--enable-ntlm-fail-open' '--enable-large-cache-files' '--enable-x-accelerator-vary' '--enable-storeio=ufs diskd' ** - Verificado DNS (resolv.conf. hosts, nsswitch.conf, nscd.conf etc) - /var/logs/messages (tudo ok ) - Memoria e cache (ok) - Link (ok) - Alguem teria ideia ? poderia ser o maximo de conexoes TCP setadas ? - Existe compatibilidade da placa SCSI server raid 7k da IBM com FREEBSD ? Obrigado se alguem poder me sugerir algo ( Ja postarao a sugestao de ter varios squid´s rodando para maquina dual processor mas tambem nao funcionou ! e as outras sugestoes postadas no forum sobre isso tambem nao ...) Obs.: O Squid fica com CPU razoavel no GNU/Linux quando estou com 1/5 de Hosts(IP) requisitando este servico mas quando estou com carga total a CPU vai a 100% e arria. Obrigado a todos. - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd -- Sempre se apanha mais com as menores besteiras. Experiência própria. [EMAIL PROTECTED] [EMAIL PROTECTED] http://www.goffredo.eti.br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Olá Joao ! Cara esta máquina que estou migrando (X236 IBM) e apresentando CPU 100% e muito boa com discos scsi´s de 15K com 2GB de memoria e 2 Processadores Xeon 3.0, o que esta me deixando maluco é que na máquina com Solaris o squid se comporta muito bem ... Minhas regras são sim extensas mas não uso filtro externo eu mesmo as alimento ... e com o Solaris nesta maquina funciona sem problemas ... isso que esta me encabulando ... se fosse regras e tal teria que acontecer no Solaris tambem nao ? Ou o Solaris esta administrando melhor o Squid ... Cara ja estou fazendo testes a um bom tempo e nao chego a nenhum lugar para solucionar esta questao: Linux+squid.+5k de IP´s . Obrigado. On 1/9/07, Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] wrote: Olá Pessoal ! Novamente volto com uma questão antiga aqui, mas o forum do FUG é o mais completo sobre estes temas ... talvez consiga me ajudar. - Tenho uma máquina X236 com RAID 0 - 420 GB, 2GB Mem., 2 Processadores Xeon 3.0 e tal ...; - Tenho um acesso diário na faixa de 5000 hosts(IP) aproximadamente 35 GB de trafego; Hoje consigo uma boa performance em uma V65 Sun com Solaris 9 Intel sem problemas o Squid funciona sem problemas e com uso habitual de aproximadamente de 45 a 60 % de CPU; Se uso as mesmas configurações em uma máquina GNU/Linux (Slackware, Red Hat Enterprise 5 ...) a CPU vai a 100 % e fica lenta as conexões, se volto a mesma configuração e compilação do Squid para a máquina Sun com Solaris 9 Intel a performance e CPU voltam a situação ideal. Tem listas muito grandes de filtros? Como elas estão? Dá para simplificar? Eu acrescentei algumas regras que baixei do site www.malware.com.br e o índice de CPU aumentou de 20% de CPU para 40% de CPU, nas horas de pico. Estou usando um AMD64 3000+ 939, com um 1 GB DDR 400de memória para cerca 400 usuários de rádio e cabo. Quando estava usando um K7 2 mil e algo, o índice de uso de CPU pelo squid era o dobro. A velocidade de acesso à memória no squid parece ser, e eu acho que é, algo muito importante, e nos AMD64 939 isto parece ser muito bom. João Rocha. Compilação Squid: **('-prefix=/usr/local/squid' '--enable-removal-policies=heap lru' '--enable-delay-pools' '--enable-snmp' '--enable-arp-acl' '--enable-underscores' '--enable-basic-auth-helpers=PAM YP SMB SASL NCSA LDAP' '--enable-digest-auth-helpers=password' '--enable-ntlm-fail-open' '--enable-large-cache-files' '--enable-x-accelerator-vary' '--enable-storeio=ufs diskd' ** - Verificado DNS (resolv.conf. hosts, nsswitch.conf, nscd.conf etc) - /var/logs/messages (tudo ok ) - Memoria e cache (ok) - Link (ok) - Alguem teria ideia ? poderia ser o maximo de conexoes TCP setadas ? - Existe compatibilidade da placa SCSI server raid 7k da IBM com FREEBSD ? Obrigado se alguem poder me sugerir algo ( Ja postarao a sugestao de ter varios squid´s rodando para maquina dual processor mas tambem nao funcionou ! e as outras sugestoes postadas no forum sobre isso tambem nao ...) Obs.: O Squid fica com CPU razoavel no GNU/Linux quando estou com 1/5 de Hosts(IP) requisitando este servico mas quando estou com carga total a CPU vai a 100% e arria. Obrigado a todos. - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd -- Cândido Henrique M. de Souza Técnico em Suporte de Redes Gerência de Tecnologia Tribunal de Justiça - MG Tel.: 55-31-3237-6319 / 55-31-9164-6261 Fax.: 55-31-3237-6321 [EMAIL PROTECTED] http://www.tjmg.gov.br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
2007/1/9, Alex Moura [EMAIL PROTECTED]: On 1/9/07, Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] wrote: Cara esta máquina que estou migrando (X236 IBM) e apresentando CPU 100% e muito boa com discos scsi´s de 15K com 2GB de memoria e 2 Processadores Xeon 3.0, o que esta me deixando maluco é que na máquina com Solaris o squid se comporta muito bem ... Minhas regras são sim extensas mas não uso filtro externo eu mesmo as alimento ... e com o Solaris nesta maquina funciona sem problemas ... (...) Ou o Solaris esta administrando melhor o Squid ... Cara ja estou fazendo testes a um bom tempo e nao chego a nenhum lugar para solucionar esta questao: Linux+squid.+5k de IP´s . O hardware onde roda o Solaris é o mesmo IBM x236 (no caso seria Solaris x86), ou você está comparando com o desempenho do IBM com uma máquina RISC rodando Solaris? Qual é a versão do Solaris? O Solaris tem um escalonador dos mais sofisticados dentre todos os S.O.s, particularmente da v.9 em diante. Outros itens que podem fazer diferença são a arquitetura RISC aliada à especificação (CPU, barramento, RAM, discos) da máquina com Solaris em relação ao IBM (se forem máquinas distintas, claro). Este tipo de comparação é muito difícil, tanto como comparar maçãs e laranjas. Só olhando vários dados de desempenho (I/O, escrita, leitura etc.) com diferentes ferramentas (fstat, systat, vmstat, netstat, top, iostat, sar, iostat, kstat, mpstat, prstat, trapstat, vmstat, ptree etc.) para verificar em que itens a máquina com Solaris difere da IBM com Linux... (esta não era uma lista técnica sobre FreeBSD? :-) ). Alex - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd Ao inves de colocar linux no IBM porque vc nao roda o FreeBSD+squid nesta maquina e roda como vai se comporta. -- Alessandro de Souza Rocha Administrador de Redes e Sistemas Freebsd-BR User #117 - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Cândido Henrique - Linux user 276876 wrote: Olá Alessandro ! È o que vou fazer, gostaria de ter instalado Solaris mas o mesmo não suporta a placa controladora SCSI Server Raid 7K IBM por isso a escolha por GNU/Linux (Slackware) Estou baixando as ISOS do FREEBSD para ver se o mesmo suporta esta placa. Obrigado. 2007/1/9, Alex Moura [EMAIL PROTECTED]: On 1/9/07, Cândido Henrique - Linux user 276876 [EMAIL PROTECTED] wrote: Cara esta máquina que estou migrando (X236 IBM) e apresentando CPU 100% e muito boa com discos scsi´s de 15K com 2GB de memoria e 2 Processadores Xeon 3.0, o que esta me deixando maluco é que na máquina com Solaris o squid se comporta muito bem ... Minhas regras são sim extensas mas não uso filtro externo eu mesmo as alimento ... e com o Solaris nesta maquina funciona sem problemas ... (...) Ou o Solaris esta administrando melhor o Squid ... Cara ja estou fazendo testes a um bom tempo e nao chego a nenhum lugar para solucionar esta questao: Linux+squid.+5k de IP´s . O hardware onde roda o Solaris é o mesmo IBM x236 (no caso seria Solaris x86), ou você está comparando com o desempenho do IBM com uma máquina RISC rodando Solaris? Qual é a versão do Solaris? O Solaris tem um escalonador dos mais sofisticados dentre todos os S.O.s, particularmente da v.9 em diante. Outros itens que podem fazer diferença são a arquitetura RISC aliada à especificação (CPU, barramento, RAM, discos) da máquina com Solaris em relação ao IBM (se forem máquinas distintas, claro). Este tipo de comparação é muito difícil, tanto como comparar maçãs e laranjas. Só olhando vários dados de desempenho (I/O, escrita, leitura etc.) com diferentes ferramentas (fstat, systat, vmstat, netstat, top, iostat, sar, iostat, kstat, mpstat, prstat, trapstat, vmstat, ptree etc.) para verificar em que itens a máquina com Solaris difere da IBM com Linux... (esta não era uma lista técnica sobre FreeBSD? :-) ). Alex - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd Ao inves de colocar linux no IBM porque vc nao roda o FreeBSD+squid nesta maquina e roda como vai se comporta. Cândido, http://www.freebsd.org/cgi/man.cgi?query=ipssektion=4manpath=FreeBSD+6.2-RELEASE E seja feliz! :) -- Atenciosamente, Felippe de Meirelles Motta FreeBSD Brasil LTDA. http://www.freebsdbrasil.com.br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Olá Alessandro ! È o que vou fazer, gostaria de ter instalado Solaris mas o mesmo não suporta a placa controladora SCSI Server Raid 7K IBM por isso a escolha por GNU/Linux (Slackware) Estou baixando as ISOS do FREEBSD para ver se o mesmo suporta esta placa. Até onde eu sei o FreeBSD não suporta essa placa. Fiz um teste com a versão 6.0-RELEASE e o mesmo não reconheceu a placa. -- Márcio Luciano Donada mdonada @ auroraalimentos . com . br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd
Re: [FUG-BR] Squid Lento 100% CPU - Velha Questão !
Em 09/01/07, Márcio Luciano Donada[EMAIL PROTECTED] escreveu: Olá Alessandro ! È o que vou fazer, gostaria de ter instalado Solaris mas o mesmo não suporta a placa controladora SCSI Server Raid 7K IBM por isso a escolha por GNU/Linux (Slackware) Estou baixando as ISOS do FREEBSD para ver se o mesmo suporta esta placa. Até onde eu sei o FreeBSD não suporta essa placa. Fiz um teste com a versão 6.0-RELEASE e o mesmo não reconheceu a placa. -- Márcio Luciano Donada mdonada @ auroraalimentos . com . br - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd olá Márcio Luciano Donada este linik que nosso amigo mostrou o FreeBSD 6.2 suporta olha abaixo. http://www.freebsd.org/cgi/man.cgi?query=ipssektion=4manpath=FreeBSD+6.2-RELEASE IBM ServeRAID 3H · ServeRAID 4L/4M/4H · ServeRAID Series 5 · ServeRAID 6i/6M · ServeRAID 7t/7k/7M -- Alessandro de Souza Rocha Administrador de Redes e Sistemas Freebsd-BR User #117 - Histórico: http://www.fug.com.br/historico/html/freebsd/ Sair da lista: https://www.fug.com.br/mailman/listinfo/freebsd