Websnarf Web Cache & Filtering

Websnarf Webcache CDN-a & Content Filtering

O Websnarf é um componente independente do Pro Apps, podendo ser utilizado de forma integrada com os demais componentes ou standalone. Esse componente tem duas funções principais:

Acelerador de navegação web (CDN-a): um poderoso e multidisciplinar webcache desenvolvido pela FreeBSD Brasil e integrado com o consagrado Thunder Cache Professional, desenvolvido para grandes provedores e empresas de telecom;
Filtro de conteúdo web: focado em mercado corporativo, pequenas, médias e grandes empresas e órgãos públicos, é um filtro completo de conteúdo web; permite o controle de navegação por categoria de websites, é capaz de detectar (e controlar) atividades de entretenimento web (Fun Snarf) que diminuem a produtividade em ambiente de trabalho;

Eleve a eficiência do seu consumo de banda e economize pelo menos 30% de seu link Internet. Integrado com Thunder Cache na base, o websnarf satisfaz necessidades de cacheamento de conteúdo volátil e dinâmico.

Conheça um pouco mais sobre o Websnarf acompanhando as imagens de tela abaixo.

1 tela inicial estatisticas gerais
10 consumo de CPU
11 consumo de memoria do servidor websnarf
12 consumo de swap do servidor websnarf
13 load average do websnarf
14 estatisticas de performance de acesso a disco
15 alocacao de espaco por particao
16 estatisticas de vazap em bits por segundo por placa de rede
17 controle de conexoes estabelecidas servidor
18 muito importante - economia do servidor de cache no trafego de rede media por minuto e por hora
19 relacao requisicao e hit de cache no websnarf
2 consumo de espaco em disco em cada particao de cache
20 consumo de cpu do lusca
21 consumo de threads do thunder
22 hardware CPU, memoria e cache de disco e memoria
23 cache DNS do thunder cache
24 menu de relatorios e detalhes estatisticos por dominio
25 informacoes por extensoes
26 resumo dia-a-dia da eficiencia do cache
27 Top 100 dominios em economia, agrupamento diverso
28 estatisticas IP por site, menu de estatisticas e filtro
29 logs de acesso aos subsistemas
3 estatisticas totais de trafego desde que o sistema foi implantado
30 gerenciamento de propagandas
4 estatisticas de economia dinamica desde a implantacao
5 estatisticas de economia estatica desde a implantacao
6 performance de acesso a disco
7 performance detalhada de acesso a disco
8 taxas de economia do websnarf apenas - sem thunder
9 consumo de CPU em detalhes

Dois Modos de Operação

O Pro Apps Websnarf pode atuar como proxy convencional, tratando do cache de conteúdo web e também filtro de conteúdo, mas principalmente como o mais completo e poderoso Web Cache de Aceleração de Conteúdo Web (CDN-a).

Webcache CDN-a

Web Content Delivery acceleration para cache e aceleração da experiência de navegação web. Ideal para provedores e telecoms. Atua como CDN-a de vídeo dinâmico (Youtube, Vimeo, Xvideos, etc), Netflix (muita economia!), Apple iTunes Store, Anti-virus Updates, Microsoft Update e muito mais.

Web Content Filtering

Otimize a produtividade da sua organização filtrando de forma categorizada ou inteligente os sites que seus funcionários podem acessar. Além de controle por categorias, URLs individuais e por características chave, existe ainda o filtro FunSnarf que detecta entretenimento web.

Cache para Aceleração de Navegação Web

Websnarf é um poderoso sistema de Web Cache que tem como principal característica fazer caching de conteúdo de dados dinâmicos, estáticos, e objetos de múltipropósito na web. A solução implementa com eficiência cache funcional onde a maioria dos outros sistemas de proxy falham: o conteúdo dinâmico e conteúdo não web que é trafegado por http.

Segundo o Gartner Group, a maior parte do conteúdo web na Internet hoje, especialmente depois da Web 2.0, é dinâmico. A Arbor Networks divulgou relatório no último trimestre de 2009 apontando a queda gradual e contínua de comunicação peer-to-peer, e aponta como causa a tendência da Web de acessar conteúdo multimídia por streaming, como acontece com YouTube, Last.FM e tantos outros sites, sobrando para p2p o compartilhamento de programas e não mais vídeos e música.

No primeiro semestre de 2012 segundo a CDN-Advisor, a entrega de conteúdo multimídia sob demanda é o tipo de tráfego web que tem o mais expressivo crescimento, puxado de perto por Netflix e iTunes Store que entregam filmes e séries de TV sob demanda, e por rádios via Internet como Last.FM ainda encabeçando esse segmento.

Entre 2011 e 2012 os usuários de sistemas de computação se mostraram cada vez menos preocupados em armazenar seus vídeos, filmes, e músicas localmente em suas residências, dando preferência ao armazenamento na nuvem devido a disponibilidade e praticidade de ter seu conteúdo em qualquer lugar.

As motivações primárias para ter um sistema como Websnarf CDN-a são:

Economia: o Websnarf CDN-a oferece economia no mínimo de 30% no seu tráfego web; tipicamente esses fatores alcançam taxas perto de 50% em alguns picos diários; essa economia real reflete-se em elevação da capacidade econômica do seu negócio e dar margens de lucro, enquanto entrega ao seu cliente o mesmo conteúdo só que tipicamente, um conteúdo já tratado e com uma performance maior, menor latência; tal economia de conectividade reflete-se, claro, em economia financeira;
ROI & TCO: as taxas de economia do sistema garante que o ROI (Retorno de Investimento) na aquisição de um servidor Websnarf seja diluído já nos primeiros (as vezes no primeiro) meses após sua implantação, melhorando o TCO (Custo Total de Propriedade) de seu circuito Internet; é uma das melhores e mais fáceis decisões de gestão de negócio que sua empresa pode tomar, com vantagens fáceis de se calcular;
Aceleração: muitos provedores e empresas de telecom não tem necessidade real de economia de link Internet, ou por participarem de Pontos de Troca de Tráfego ou por terem capilaridade de sobra em suas saídas de Internet, a baixo custo; no entanto essas empresas como as demais ganham outra vantagem na adoção do Websnarf: a entrega rápida, acelerada de conteúdo; diminuindo a latência, manter os dados cacheados mais próximo ao cliente garantem que a qualidade e velocidade na entrega do conteúdo sejam sentidos, melhorando a experiência da navegação web; afinal sabemos que Internet rápida não é só largura de banda: é latência;
Mitigação de upgrade de Link: muitas empresas simplesmente não podem ser atendidas de imediato nas regiões onde atuam, essa é uma realidade que não afeta apenas regiões remotas do país; tipicamente sair das grandes regiões metropolitanas já implica em impossibilidade de ser atendido por sua operadora ou distribuidora; muitas vezes em momento de pico sua organização sofre com taxas de 10% ou 20% de demanda acima do link existente, gerando sensação de queda de qualidade para seus clientes e usuários, e uma atualização de link quando possível eventualmente pode não ser justificada financeiramente se são apenas poucos momentos de pico que essa demanda extrapola; exatamente nesse momento o Websnarf resolve o problema, mitigando ou retardando a necessidade de atualização de capilaridade de banda;
Atraso de entrega de upgrades: mesmo em regiões privilegiadas sofrem com a falta de oferta imediata de conectividade Internet quando se precisa de uma atualização de circuíto; ainda que viável, alguns projetos de atualização levam meses para ser concluídos; isso acontece em muitas regiões metropolitanas privilegiadas como de São Paulo (Cotia, Diadema, Santo André), Rio de Janeiro (São Gonçalo, Belford Roxo, Tanguá, Nova Iguaçu), Belo Horizonte (Santa Luzia, Lagoa Santa, até mesmo Contagem e Betim) ou até mesmo dentro das grandes capitais do país (Recreio dos Bandeirantes, no Rio; Itaquera em São Paulo; Venda Nova em BH) um upgrade de link, quando viável, pode levar meses para ser efetivado; então se as necessidades de banda estão dentro dos padrões de economia que o Websnarf oferece, este torna-se uma solução que pode rapidamente ser implantada compensando o atraso efetivo de outras opções de escalabilidade;
CDN-a ou CDN-Full: A entrega acelerada de conteúdo (CDN-a) ou entrega de conteúdo em velocidade máxima (CDN-Full) também conhecidos como Full Caching (cache full como abrasileirado) é a técnica de garantir que os objetos cacheados sejam entregues em uma velocidade muito superior (CDN-a) a velocidade contratada pelo seu cliente, criando um padrão diferenciado de limite de banda para entrega de conteúdo cujo único custo é a infra-estrutura de entrega; pode-se ainda implementar uma entrega na velocidade máxima possível (CDN-Full) não havendo qualquer controle de banda na entrega de conteúdo cacheado; seu cliente recebe na maior velocidade que a sua infra-estrutura pode entregar; enquanto diferenciais importante na prestação de serviço a técnica de CDN-a é mais utilizada em redes com infra-estrutura mais sensíveis a saturação (como rádio) e CDN- Full em redes menos saturáveis (como redes cabeadas, Fast Ethernet, Gigabit Ethernet, Fibra, etc);
Modo Bridge: Implantação do websnarf com intervenção zero na sua topologia existente.

O dinamismo da Web é uma tendência inegável, e para acompanhar essa evolução, seja qual for sua motivação primária, Websnarf com Thunder Cache Pro é a solução mais completa no mercado.

Thunder Cache Professional

O Thunder Cache Professional, oferecido junto ao Websnarf, é o primeiro e único sistema brasileiro de CDN totalmente original.

É original, desenvolvido do zero, sem ser baseado em qualquer outro sistema hoje, começou como um sistema de rescrita de URL integrado ao Squid e evoluiu consideravelmente até se tornar um sistema independente, multithread, altamente escalável, funcional e com grande inovação tecnológica na forma de fazer cache de conteúdo web;

É mantido e desenvolvido primariamente pela BM Software, empresa parceira FreeBSD Brasil. Tem o apoio da FreeBSD Brasil no desenvolvimento efetivo do Thunder Center e da plataforma base (FreeBSD) onde o sistema roda, incluindo distribuição em imagem ISO para CD e Pen Drive.

Principais recursos Thunder Cache

Web cache de conteúdo dinâmico
Cache Netflix, Youtube, Vimeo, Apple iTunes Store, Microsoft Update, muitos outros;
Cache-full
Aceleração de navegação web;
Smart Plugins
Smart Resume
Resume de conteúdo parcial
Entrega de conteúdo parcial
Thunder Cleaner
Contas Premium
Conceito de Cache Patterns genéricos (capaz de fazer cache de conteúdo dinâmico e estático sem plugins especiais, para web sites menos complexos);
Suporte e Cache Black Lists por URL;
Controle de Concorrência de Downloads;
Controle de Resumo de Downloads;
Controle de Tamanho de Arquivos a Cachear;
Controle de tempo de Disk Flush - Gravação dos Dados de Memória no Disco
Suporte a Cache de Arquivos Estáticos (sem plugin);
Estrutura em Árvore de Sistema de Arquivos indexado de forma lógica;
Indexação de objetos cacheados
Reciclagem de threads automática e sob demanda (número de threads em uso variável);

Suporte a E-Tag (mais economia: evita que navegadores baixem novamente o conteúdo em seu próprio  cache);
Suporte a Resume de Download;
Suporte a Streaming Paralelo (se mais de um cliente está acessando o mesmo arquivo, apenas um  download desse arquivo é feito - mais economia);
Classificação de Pacotes por ToS (Type of Service) configurável (aumentando a eficiência de Cache  Full);
Suporte a Redirecionamento de Banners (personalização de banners MSN, Double Click, etc);
Suporte T-Proxy Real e Nativo;
Full Proxy – Thunder Cache Pro é criado para ser usado de forma independente, sem qualquer outro  Cache;
Autenticação Positiva ou Negativa no Plano Contratado: sobe quantas threads estiverem configuradas,  em modo proxy-only (sem cache) até que validação de login/senha (sem prejudicar o provedor em caso  de problema de autenticação);
Suporte a modo de operação em Cluster – Thunder Cluster;
Configuração fácil, através de Painel de Configuração Web;
Sistema a múltiplos Cache Dir (aceita configuração de múltiplos pontos de montagem);
Suporte à Carrier Upstream Caching: quando sua operadora faz cache, mesmo que não transparente, modificando as características originais da requisição;
- Por exemplo, GVT (plugins para YouTube, RedTube, etc);

PDF Datasheet Websnarf