Addon BFW Cache 1.0 - Parte 5

[brunovescovi]

Boa noite, pessoal.

Testei esse video
http://www.youtube.com/watch?v=sQKjxyuGoQI
No relatório mostra que ele entrou no cache, mais ao chamar novamente o mesmo video, ele não sai do cache
economia 0% e hits 0%.

Esse não entrou no cache
http://www.youtube.com/watch?v=-bzKCHS6Dzs

O plugin do youtube so está fazendo cache dos vídeos que são entregues pelo youtube em um único arquivo.
Os erros anteriores aconteciam porque o youtube entrega alguns vídeos em pedaços, e isso quebrava o esquema de cache.
Inclusive o mesmo video pode ser entregue numa hora em partes, noutra hora de uma vez só.
Por isso, às vezes, um vídeo pode entrar no cache (porque veio em uma única parte) e depois pode não ser retirado do cache, porque foi chamado em partes.
Isso tudo é variável. É só continuar usando o plugin e vocês vão ver que o cache vai crescer e também a economia.

Um abraço.

[apoliano]

Boa noite.

Os testes dos videos depois que entraram no cache foram feitos em outra máquina e com navegadores diferentes também.

Já tem varios videos no cache mais;
Economia 0%
Hits 0%
Eficiência 0%

O procedimento que eu fiz para substituir o plugin do youtube foi esse;

Código: Selecionar todos

cd /lib/bfwcache
rm youtube.com.so
wget http://www.brazilfw.com.br/users/brunovescovi/addons/3.0/bfwcache/youtube.com.so


E depois esse;

Código: Selecionar todos

cd /partition
package bfwcache
mt
rm /mnt/bfwcache.bfw
mv bfwcache.bfw /mnt
umt
backup

E limpei o cache;

Código: Selecionar todos

/etc/init.d/bfwcache remake

E dai comecei a fazer os testes, o 1º video não entrou no cache e o 2º também não, então executei esses comandos
para dar permissão de execução ao plugin;

Código: Selecionar todos

/etc/init.d/bfwcache stop
chmod 777 /lib/bfwcache/youtube.com.so
/etc/init.d/bfwcache start

Depois disso o relatório do cache começou a informar que os videos tavam sendo cacheados, mais alguns não, e agora já tem
13 videos do youtube no cache e como falei lá em cima
Economia 0%
Hits 0%
Eficiência 0%
para os videos do youtube.

Será alguma coisa errada que eu fiz para ocorrer esse problema?

E o 4shared só cacheia 1 arquivo e ;
Economia 0%
Hits 0%
Eficiência 0%

Qualquer coisa restauro o backup de ontem e faço tudo de novo...

[killerinstinc]

amigo apoliano, te recomiendo que actualizes a la version 3.257, yo tuve muchos probles con la version 0.256, al empaquetar el plugin se me desaparecia el bfwcache y quedaban todas las carpetas, eso si te recomiendo una instalacion limpia, el dia que reinstale probe los videos en otro navegados, y monitorie la red con bmon, y el eth1 marcaba solo 1Kbs, el eth0 65kbs mientras que el video corria en el otro navegador marcando hits por lo que te digo que funcionaba, aunque ahorita cada reinicio se para el squid y el bfwcache tengo que iniciarlo manualmente cada reinicio pero esta funcionando bien.

empaqueta de esta manera

Código: Selecionar todos

cd /partition
package bfwcache.pkg
mt
cp bfwcache.bfw /mnt
umt
rm bfwcache.bfw
/etc/init.d/bfwcache restart

suerte

[killerinstinc]

alguien tiene un plugin funcional para baycdn.com, he visto un plugin para el tc 3.1 pero no se si aun sea compatible con el bfwcache 1.1

[gerardonoh]

Boa noite, pessoal.

Testei esse video
http://www.youtube.com/watch?v=sQKjxyuGoQI
No relatório mostra que ele entrou no cache, mais ao chamar novamente o mesmo video, ele não sai do cache
economia 0% e hits 0%.

Esse não entrou no cache
http://www.youtube.com/watch?v=-bzKCHS6Dzs

O plugin do youtube so está fazendo cache dos vídeos que são entregues pelo youtube em um único arquivo.
Os erros anteriores aconteciam porque o youtube entrega alguns vídeos em pedaços, e isso quebrava o esquema de cache.
Inclusive o mesmo video pode ser entregue numa hora em partes, noutra hora de uma vez só.
Por isso, às vezes, um vídeo pode entrar no cache (porque veio em uma única parte) e depois pode não ser retirado do cache, porque foi chamado em partes.
Isso tudo é variável. É só continuar usando o plugin e vocês vão ver que o cache vai crescer e também a economia.

Um abraço.

Disculpen la molestia Bruno pero veo que para 64 bits no esta compilado el bfwcache, seria posible compilarlo para poder hacer mas prubeas del nuevo plugin y otros mas, ya que lo esoy probando en un servidor 64 bits con y un acceso de 67 a 85 usuarios en linea, o para cuado va a estar disponible el source ya que por el momento estoy recompilando para 64 bits los plugins y lo pruebo con la version antigua cd bfwcache64 pero los plugins lo estoy recompilando con los del thunder , Gracias. Atte Gnp

[apoliano]

Olá pessoal boa tarde.

Eu já atualizei o BFW para a versão 3.0.257.

Só to tendo prolemas com o plugin atual do youtube.

[brunovescovi]

Boa tarde, pessoal.

Disculpen la molestia Bruno pero veo que para 64 bits no esta compilado el bfwcache, seria posible compilarlo para poder hacer mas prubeas del nuevo plugin y otros mas, ya que lo esoy probando en un servidor 64 bits con y un acceso de 67 a 85 usuarios en linea, o para cuado va a estar disponible el source ya que por el momento estoy recompilando para 64 bits los plugins y lo pruebo con la version antigua cd bfwcache64 pero los plugins lo estoy recompilando con los del thunder , Gracias. Atte Gnp

O BFW Cache 2.0 já vai ter para 32 e 64 bits.

Um abraço.

[gerardonoh]

Ok gracias esperemos no tarde en salir la version 2 de bfwcache donde ya estaran para ambos 32 y 64 bits.

[goodposting]

Boa tarde.

o 4shared parece estar normal. acredito q esse pode ficar.

O do 4 shared foi revisado?, pois o que tenho aqui parece não está normal cacheia poucos arquivos
e não sai nada do cache.

Testei esse video
http://www.youtube.com/watch?v=sQKjxyuGoQI
No relatório mostra que ele entrou no cache, mais ao chamar novamente o mesmo video, ele não sai do cache
economia 0% e hits 0%.

Esse não entrou no cache
http://www.youtube.com/watch?v=-bzKCHS6Dzs

assistir também e não cacheou

vc´s instalaram o ultimo plugin q bruno disponibilizou aqui?

[fabio23]

sim!
muitos videos funciona direito e outros não. tipo esse ai do amigo

[goodposting]

blz. entendi.

é como o bruno já disse. hora o vídeo estará no cache, hora não. por enquanto vai ser asssim. até achar uma solução definitiva pros videos recebidos em partes.

alguém aí tem uma luz ?

[williamsio]

si hay solución definitiva, es la que esta aplicando BM, hacer cache tanto de los completos y las partes, pero requiere tocar el core, estamos esperando la publicación del código fuente y instrucciones para poder compilar el nuevo core,

bruno publica el código y instrucciones de compilación plz plz.
ademas que por razones de performance cuando nuestro cache ya sobrepasa los 100 000 archivos, nos conviene separar cada dominio en un tabla diferente, y crear el indice de búsqueda, el cuello de botella esta siendo MYSQL.

[apoliano]

Bom dia pessoal.

Acabei de fazer um teste com esses videos:
http://www.youtube.com/watch?v=AtqoT1X8vLQ&feature=related
http://www.youtube.com/watch?v=TlAELfMNx3I
e ele não foi cacheado.

[goodposting]

obrigado pela luz.

rsrsrsr o código fonte acredito q logo estará disponível.

[edutech]

Bom dia pessoal.

Acabei de fazer um teste com esses videos:
http://www.youtube.com/watch?v=AtqoT1X8vLQ&feature=related
http://www.youtube.com/watch?v=TlAELfMNx3I
e ele não foi cacheado.

Também testei em todos navegadores e não fez cache e quando se pausa o vídeo também para de carregar.
o importante é que os erros pararam!

[janesley]

Engraçado pessoal.... Vejam.. o que o Bruno diz.. a respeito dos videos do youtube... Gente logo no inicio desta pagina!

Boa noite, pessoal.

Testei esse video
http://www.youtube.com/watch?v=sQKjxyuGoQI
No relatório mostra que ele entrou no cache, mais ao chamar novamente o mesmo video, ele não sai do cache
economia 0% e hits 0%.

Esse não entrou no cache
http://www.youtube.com/watch?v=-bzKCHS6Dzs

O plugin do youtube so está fazendo cache dos vídeos que são entregues pelo youtube em um único arquivo.
Os erros anteriores aconteciam porque o youtube entrega alguns vídeos em pedaços, e isso quebrava o esquema de cache.
Inclusive o mesmo video pode ser entregue numa hora em partes, noutra hora de uma vez só.
Por isso, às vezes, um vídeo pode entrar no cache (porque veio em uma única parte) e depois pode não ser retirado do cache, porque foi chamado em partes.
Isso tudo é variável. É só continuar usando o plugin e vocês vão ver que o cache vai crescer e também a economia.

Um abraço.

[williamsio]

Bfwcache no respeta las reglas de smart route como estas

acl SR_ACL0 dstdomain .youtube.com
tcp_outgoing_address 10.0.0.10 SR_ACL0


alguien conoce la forma de hacer funcionar smart route con dominios ademas de BFwcache??

[brunovescovi]

Boa noite, pessoal.

Bfwcache no respeta las reglas de smart route como estas

acl SR_ACL0 dstdomain .youtube.com
tcp_outgoing_address 10.0.0.10 SR_ACL0


alguien conoce la forma de hacer funcionar smart route con dominios ademas de BFwcache??

Crie as regras de smartroute para a rede ao invés de proxy.
As requisições do youtube, como foi o seu exemplo, não serão resolvidas pelo squid e sim pelo BFW Cache. Sendo assim, as regras "proxy (que são para o squid) não vão "pegar" no BFW Cache, mas as regras de rede são universais pois são aplicadas no iptables e não nas ACLs squid.

Um abraço.

[goodposting]

é isso aí companheiro bruno!

[apoliano]

Boa tarde galera.

O plugin do youtube so está fazendo cache dos vídeos que são entregues pelo youtube em um único arquivo.
Os erros anteriores aconteciam porque o youtube entrega alguns vídeos em pedaços, e isso quebrava o esquema de cache.
Inclusive o mesmo video pode ser entregue numa hora em partes, noutra hora de uma vez só.
Por isso, às vezes, um vídeo pode entrar no cache (porque veio em uma única parte) e depois pode não ser retirado do cache, porque foi chamado em partes.
Isso tudo é variável. É só continuar usando o plugin e vocês vão ver que o cache vai crescer e também a economia.

Realmente o cache apareceu e a economia também

Mais os videos que eu já assistie aqui, e vejo ele várias vezes e eles sempre carregam usando o link de internet
carregam pela velocidade controlada no QoS do servidor.

E demoram para aparecer no relatório.

[jeferson_s2004]

Boa tarde a todos como já sabemos o youtube mudou e de repente os melhores plugins para o thunder pararam de funcionar o interessante e que agora a mudança foi completa por isso o plugin atual parou de responder.....existe um bate papo no link a seguir que diz que migrou para html5 melhorando a velocidade de reprodução do video pois cada video é transmitido dividido e de fato percebi que cada pedaço tem 1.7mb..... tem um plugin funcionado neste link http://ompldr.org/vZGZmcQ .....e realmente o cache funciona a velocidade ficou menor e salva o video porem utiliza apenas alguns pedaços que o thunder consegue utilizar.........o comentario é de Anisio Machado......percebi que a velocidade de resposta aumenta com a troca de videoplayback para .flv.........quem precisar testar o plugin esta funciondo........infelizmente não consegui enviar por email para o brunovescovi.........

Quem precisar colocar o plugin na pasta pode utilizar o wiscp faz o seguinte abre o promp do wiscp digita :

para o bfwcache/thunder
mt
cd /mnt
fecha e copia o plugin para a pasta lib thunder substituindo o existente abra o prompt salve (backup)
digite:
umt
cd /mnt
este comando fecha a pasta mnt, inicie o bfwcache/thunder E salve de novo....

Outra coisa eu não apago meu cache.....por favor já existe um plugin que poderia ser utlizado para corrigir os videos porem só criaram para tc3.0

[goodposting]

valeu pelos plugins companheiro, mas precisamos dos fontes.

vc tem?

quem é o autor desses plugins? sabe informar?

o pacote parece conter plugins do tc 3.1 q muitos de nós já utilizamos no passado. a maioria deles não funcionam mais nos dias de hoje. a menos q alguém os tenha corrigido recentemente. o q tb acho muito difícil, considerando as datas de modificação dos aquivos q vc passou. foram modificados em 2010. só o youtube é desse mês/2012.

vc tem pelo menos o fonte do youtube q vc passou no pacote?

[jeferson_s2004]

boa noite a pasta tem outros plugins ma só youtube é atual....

[brunovescovi]

Boa noite, pessoal.

boa noite a pasta tem outros plugins ma só youtube é atual....

Só tem o plugins do youtube mesmo, por enquanto, porque é o que o pessoal mais usa e que precisava (e ainda precisa) de revisão urgente.

Um abraço.

[jeferson_s2004]

Boa noite... será que é possivel criar uma pagina para criar os plugins semelhante ao que os caches proficionais usam... isso facitaria a padronização do plugin e facilitaria os testes e todos poderiam contribuir de alguma forma.....os videos do youtube estão tb em outro padrão meu player de flv não abre mais os videos .....vou pesquisar outros padrões para confirmar...

[mtavares.junior]

Se não for pedir muito, alguma alma caridosa poderia postar todos os plugins funcionando e o bfwcache.acl já configurado? Já testei várias combinações aqui, mas a única coisa que ele cacheou até agora foi:

Relatório do Sistema BFW Cache 1.0:

Data de geração: Mon, 30 Apr 12 01:56:01 -0300
Uso do disco: 1.53 %

Domínio Arquivos Tamanho Economia Hits Eficiência %
ytimg 64 292.6 KiB 97 KiB 9 33.14 %
Total 64 292.6 KiB 97 KiB 9 33.135 %


Abs!

[goodposting]

http://www.mediafire.com/?0h0391...

esse link externo tem um plugin youtube q está muito bom. mas o problema é o fonte, como sempre.

alguém aí tem conhecimento pra abrir o código desse plugin a força??? acho mais viável do q ficar por aí pedindo o fonte a alguém q não quer passar.

[jeferson_s2004]

boa tarde parabens o plugin está otimo testei nos videos mais problematicos aqui........para quem esta percebendo que o cache tem algum problema veja esta discursão http://www.brazilfw.com.br/forum/viewtopic.php?f=77&t=83236.......basicamente tem adicionar ao squid.lst
acl bfwcache_lst url_regex -i "/etc/brazilfw/custom/bfwcache.acl"
never_direct allow bfwcache_lst
cache deny bfwcache_lst
cache_peer 127.0.0.1 parent 8080 0 proxy-only no-digest
dead_peer_timeout 2 seconds
cache_peer_access 127.0.0.1 allow bfwcache_lst
cache_peer_access 127.0.0.1 deny all

o problema é que quando for reiniciado vai ter que corrigir a posição da linha o bfwcache não esta no etc/init.d/bfwcache......quem souber para onde foi me avisa.....
estou legal na 252 testei hoje a 257 esta excelente rapida e leve.....
uma dica para que gostaria de usar apenas uma placa de rede:na pasta etc/brazil/logical
LINK_ALIAS="interneT" (nesta linha coloque o nome que o brazilfw atribui a placa local) a minha ficou assim" LINK_ALIAS="local" "
LINK_CONNECTION="internet"
LINK_TYPE="static"
###uso um mk desse jeito +++modem e bfwcache no suit===>mk gat de entrada o modem===

[brunovescovi]

Boa tarde, pessoal.

esse link externo tem um plugin youtube q está muito bom. mas o problema é o fonte, como sempre.

Não podemos testar plugins sem source aqui. Removendo o link.

alguém aí tem conhecimento pra abrir o código desse plugin a força??? acho mais viável do q ficar por aí pedindo o fonte a alguém q não quer passar.

Código compilado em C/C++ não tem engenharia reversa que dê jeito.

boa tarde parabens o plugin está otimo testei nos videos mais problematicos aqui.

E agora, qual plugins é esse que o colega está falando?
Jeferson, organize seu post usando as tags corretas e melhore a explicação, porque você falou sobre umas três coisas diferentes nesse post.

Um abraço.

[jeferson_s2004]

boa noite brunovescovi o link acima tem mais um plugin esse plugin consegue ler 60% dos videos sem separar em partes como o do colega que eu postei anteriormente mas os 40% restante vem com a mensagem de erro ok.....

[goodposting]

alguém aí tem conhecimento pra abrir o código desse plugin a força??? acho mais viável do q ficar por aí pedindo o fonte a alguém q não quer passar.

Código compilado em C/C++ não tem engenharia reversa que dê jeito.

[williamsio]

Las fuentes de bfwcache para corregirlas :( cuando saldran

[williamsio]

>| Las fuentes de bfwcache para corregirlas :( cuando saldran

ya tengo la forma de hacer cache a youtube sea por partecitas y archivos completos pero publiquen las fuentes

[brunovescovi]

Boa tarde, pessoal.

Atendendo aos pedidos de usuários que desejam ajudar no desenvolvimento, estamos disponibilizando o source do BFW Cache 2.0.

Por favor, acompanhem a news sobre o assunto, e atentem para as orientações, sobretudo para essas abaixo:

Ressalto a importância de que esse source não pode ser disponibilizado no fórum para uso em produção. Ou seja, o source é apenas para desenvolvimento e testes daqueles que desejam auxiliar no desenvolvimento do BFW Cache.

Como se trata de um addon homologado pela equipe BFW, o local para discutirmos questões que envolvam o source, bem como alterações e sugestões de mudança no source, será um tópico na área de desenvolvimento para podermos levar lá o assunto em linguagem mais técnica. Dessa forma, deixamos o fórum atual de acompanhamento do BFW Cache apenas para tratar da versão que estiver oficial homologada pelo projeto, e o tópico de desenvolvimento vai tratar apenas das questões de programação.

O tópico para desenvolvimento é esse:
http://www.brazilfw.com.br/forum/viewtopic.php?f=12&t=83337

O source atual vai sofrer alterações até a data de lançamento oficial da versão 2.0, portanto não é permitida a criação de links (internos ou externos) para download do source modificado. Toda e qualquer alteração no source deve ser disponibilizada para todos em forma de script dentro do tópico de desenvolvimento, com as devidas instruções.

Mãos à obra.

Um abraço.

[inishi01]

Los plugins tambien pueden funcionar en thundercache 3 o 3.1??...

[brunovescovi]

Boa noite, pessoal.

Los plugins tambien pueden funcionar en thundercache 3 o 3.1??...

Não.
A partir do BFW Cache 2.0 os plugins ficaram incompatíveis.
Porém ainda são muito semelhantes, etntão quem quiser adaptar e recompilar, por sua conta e risco, os fontes estão disponíveis para todos.

Pedimos encaricidamente que quem fizer alterações, que possa postar tudo lá no tópico de desenvolvimento, por favor.

Diga não aos sangue-sugas. Seja um colaborador.

Um abraço.

[NetoGO25]

Galera desculpa ai mais gostaria de saber se ja tem o BFW Cache para 64bits?

Desde já obrigado!

[xtanctp]

Galera desculpa ai mais gostaria de saber se ja tem o BFW Cache para 64bits?

Desde já obrigado!

http://www.brazilfw.com.br/forum/viewtopic.php?f=54&t=82877&start=120#p291009

[joao isaquias]

Olá bruno sei que não tem nada a ver com o a discursão aqui, mas queria só relatar aqui que vejo muita gente dizer que o bfw não soma os links da mesma operadora, pois aqui e em vários que eu monto aqui sempre somou. Deixo a disposição meu servidor para a hora que quem quiser entrar e ver.

[brunovescovi]

Bom dia, pessoal.

Olá bruno sei que não tem nada a ver com o a discursão aqui, mas queria só relatar aqui que vejo muita gente dizer que o bfw não soma os links da mesma operadora, pois aqui e em vários que eu monto aqui sempre somou. Deixo a disposição meu servidor para a hora que quem quiser entrar e ver.

Obrigado pelo seu relato, João.

É bom saber essas coisas porque se aparecer alguém falando o contrário eu já posso citar o seu caso de sucesso.

Aproveitando seu relato, você consegue certificar que o acesso do BFW Cache também está dividido entre seus links de mesma operadora? Seria uma grande importante informação para nós. Estou certo que funciona, mas com testes específicos a coisa fica mais sólida.

Um abraço.