Instalación de ThunderCache 3.1 paralelo a Mikrotik

Publicado en 'Redes Inalámbricas' por joemg6, 8 Ago 2011.





  1. MikroRAT

    MikroRAT Miembro maestro

    Registro:
    22 Oct 2009
    Mensajes:
    415
    Likes:
    48
    Temas:
    1




    Posiblemente , algunos no le funcionen , sepan que squid.conf es secuencial , por ello el redireccionamiento para aquellos incredulos :D.

    En todo caso aqui dejo un squid.conf de lo que uso Para darse una idea .

    http://www.sendspace.com/file/mabmna

    SALUDOS,

    BERNARDO PILLACA G.
     
    Última edición: 3 Abr 2012


  2. elivick

    elivick Miembro nuevo

    Registro:
    30 Mar 2012
    Mensajes:
    12
    Likes:
    1
    Temas:
    0
    alguien que tenga la amabilidad de por favor decirme cual es la linea de comando que debo borrar.. es que ya hice todo y cuando abro un video no carga mas de 49 seg y si lo recargo aveces le da hit a esos 49 seg pero aveces no y vuelve a guardarlo ocea si tengo 10 videos guardados cuando recargo el video y vuelvo a ver el relatorio me dice que tengo 12..??? alguana ayuda o sugerencia de antemano gracias..

    ----- mensaje añadido, 03-abr-2012 a las 09:49 -----

    echame una manito xfa mikrorat
     
  3. luistec

    luistec Miembro frecuente

    Registro:
    5 Mar 2012
    Mensajes:
    206
    Likes:
    19
    Temas:
    0
    Ahi joemg puso el squid.conf a remplazar, abre el archivo y copialo completamente igual en tu squid.conf, reinicias y listo, esta funcionando OK
     
  4. elivick

    elivick Miembro nuevo

    Registro:
    30 Mar 2012
    Mensajes:
    12
    Likes:
    1
    Temas:
    0
    mira este es el squid mio xq chequealo haber si hay esta el danio o algo asi sendspace.com/file/6isdd6

    ----- mensaje añadido, 03-abr-2012 a las 09:58 -----

    pon el www y blablabla es que las reglas de foro no me dejan publicar enlaces ayuda porfa

    ----- mensaje añadido, 03-abr-2012 a las 10:00 -----

    ok gracias luis pero segun ley hay que cambiarlo si se habia instalado la actualizacion y yo no la habia instalado ocea tengo la instalacion limpia solo con lo que el amigo joemg dio al principio mas nada mejor dicho como recien formateada que es exactamente asi porq la formatie aller
     
  5. ed182

    ed182 Miembro de oro

    Registro:
    5 Jun 2009
    Mensajes:
    5,392
    Likes:
    1,228
    Temas:
    232
    La swap no me convence ! a mi parecer mucho ! maximo 4GB
     
  6. luistec

    luistec Miembro frecuente

    Registro:
    5 Mar 2012
    Mensajes:
    206
    Likes:
    19
    Temas:
    0
    El squid.conf no varia en toda sus actualizaciones, salvo en la que actualizaron para usar con el store.pl, si no actualisaste al store, no hay que cambiar nada en el squid.conf, sobre los videos eso te pasa con todo los videos? por que en una parte del tema lei que los videos de youtube aveces no salen del mismo servidor por lo que tiene que cargar de nuevo el video para que haga hit.
     
  7. elivick

    elivick Miembro nuevo

    Registro:
    30 Mar 2012
    Mensajes:
    12
    Likes:
    1
    Temas:
    0
    si es con todos los videos e intentado como con 12 o 15 y no carga hasta el final se para al segundo 49 max y por mas que recargue no funciona sale como si ya estuviece cargado todo pero enrealidad esta cargado solo 49seg que puede ser..?
     
  8. dgonzaleznet

    dgonzaleznet Miembro maestro

    Registro:
    24 Oct 2011
    Mensajes:
    406
    Likes:
    41
    Temas:
    18
    Prueba este video de 16 mins dime si te pasa lo mismo, porque a mi no me dió problemas... además, se me pasa por la cabeza de que tu proveedor de internet también está haciendo caché y tengas algún problema con la conexión.



    Me hizo HIT a pesar de ser video de 16 mins y también me salió en el relatorio... una aclaración cuando vemos en el log del access.log de thunder no se marca el HIT hasta que el video haya terminado de cargar en nuestro navegador, siempre ha sido y aún es así... el relatorio marca el hit enseguida en la página eso si aunque recien empiece el video....

    Pilas

    ----- mensaje añadido, 03-abr-2012 a las 11:35 -----

    Supuestamente siempre debe ser el doble del tamaño de tu memoria física por eso los 16 gb
     
    Última edición: 3 Abr 2012
  9. ed182

    ed182 Miembro de oro

    Registro:
    5 Jun 2009
    Mensajes:
    5,392
    Likes:
    1,228
    Temas:
    232
    Dijiste lo correcto pero ese supuesto era cuando se tenia memorias con capacidades expresadas en MB , asi que ahora ya no es necesario .

    Mas info en google .. dale 4GB
     
  10. tonyvzla

    tonyvzla Miembro frecuente

    Registro:
    6 Ene 2012
    Mensajes:
    203
    Likes:
    5
    Temas:
    2

    Nada cargo el video y me vuelve a descargar de internet, tengo el squid.conf original y descomentado en el thunder.lst algunos videos si los entregas otros no, [Sera que tengo que volver a instalar el thunder?) algun tuto bien explicado de como instlar thunder en un disco y hacer cache en otro para que cuando suceda estos casos de reinstalcion se vuele el sistema y quede lo cacheado? :errr:

     
  11. dgonzaleznet

    dgonzaleznet Miembro maestro

    Registro:
    24 Oct 2011
    Mensajes:
    406
    Likes:
    41
    Temas:
    18
    Que raro no? según la lógica un video mayor de 10 minutos no debería cachearlo, no se porque me cacheo ese video voy a ver si pruebo con otros mas...
     
  12. Lord Acero

    Lord Acero Miembro frecuente

    Registro:
    11 Nov 2011
    Mensajes:
    59
    Likes:
    5
    Temas:
    0
    No tiene nada de raro, en youtube hasta videos de 45 minutos se han cacheado con Thunder sin problema alguno, porque no debería cachear videos mayores a 10 minutos? Saludos :hi:
     
  13. dgonzaleznet

    dgonzaleznet Miembro maestro

    Registro:
    24 Oct 2011
    Mensajes:
    406
    Likes:
    41
    Temas:
    18
    Simón! mil disculpas estaba confundiendo todo con el storeurl.pl, si debería cachear todo listo doc gracias por la aclaración
     
  14. elivick

    elivick Miembro nuevo

    Registro:
    30 Mar 2012
    Mensajes:
    12
    Likes:
    1
    Temas:
    0
    amigos hice una nueva instalacion limpia borre el scrip que trae de youtube y pegue el nuevo no se si a ustedes tambien les pasa pero ahi veces que no entrega los videos y hay que actualizar una y otra y otra vz para q los entregue pero noto tambien que los guarda una y otra y otra vz no se si sera normal ejemplo e visto 10 videos de youtube pero me aparecen 30 archivos de joutube en el relatorio es normal...?
     
  15. GilBytes

    GilBytes Miembro nuevo

    Registro:
    19 Set 2011
    Mensajes:
    49
    Likes:
    0
    Temas:
    0
    Pilas con los navegadores y las versiones FLASH tienen que estar actualizadas y si le activastes el HTML5 al FIREFOX desactivalo

    ----- mensaje añadido, 04-abr-2012 a las 01:59 -----

    Yo cache uno de youtube con 1 hora 37min y perfecto

    ----- mensaje añadido, 04-abr-2012 a las 02:01 -----

    Para que borrastes el script ? dejalo todo normal como se te instala solo tienes que reemplazar el plugins de youtube y listo ...
     
  16. williamsio

    williamsio Miembro maestro

    Registro:
    17 May 2009
    Mensajes:
    439
    Likes:
    28
    Temas:
    3
    :w0w: eh notado la gran emocion que causa el plugin de thunder nueva para youtube:
    Explicacion de la logica:

    Primeramente no hace Hit al 100% algunas veces quizá un 90% otra vez se le puede ocurrir quizá estar por el 50% el porque es muy simple, youtube no parte los archivos con un algoritmo fijo, los cortes son aleatorios, como también serán los hits.

    Para ejemplificar un poco la logica es la siguiente:
    GET /videoplayback?itag=34&sparams=algorithm,burst,cp,factor,id,ip,ipbits,itag,source,expire&sver=3&range=13-1781759&ip=190.0.0.0&keepalive=yes&fexp=909327&ipbits=8&expire=1332587599&burst=40&signature=20B13CDA94DB9643B219F24EA287A3FC2F07E624.548E3B512392AA64758C746DFE70736ADF5313E7&source=youtube&algorithm=throttle-factor&cp=U0hSR1VTVV9OU0NOMl9NTVlGOmVRVloxbVZsN2pw&
    id=3235d4ec8e9a0690&factor=1.25&key=yt1&cm2=1

    Hit OK

    /videoplayback?sver=3&sparams=algorithm,burst,cp,factor,id,ip,ipbits,itag,source,expire&range=8908800-10690559&ip=190.0.0.0&keepalive=yes&algorithm=throttle-factor&signature=20B13CDA94DB9643B219F24EA287A3FC2F07E624.548E3B512392AA64758C746DFE70736ADF5313E7&itag=34&factor=1.25&burst=40&cp=U0hSR1VTVV9OU0NOMl9NTVlGOmVRVloxbVZsN2pw&expire=1332587599&source=youtube&ipbits=8&fexp=909327&
    id=3235d4ec8e9a0690&key=yt1&cm2=0 HTTP/1.1

    hit false el video va salir de inter para no fallar
    si alguien se ah estado imaginando que los videos de mas o menos mb se cachean o no estan en un error, lo de partirse en pedacitos es aleatorio.

    Espero haber ayudado:hi:
    Nota:
    Los que estaban usando el plugin original de thunder tienen que borrar todo el cache de youtube a 0 y comenzar de nuevo, porque de seguro se gravo en su cache mucha basura.
    Nota2
    Ya hay una versión un poquito mas estable que la anterior que la tiene microrat, Seguro la estara posteando el dia de mañana.

    ----- mensaje añadido, 04-abr-2012 a las 02:40 -----

    si bien parece correcto pensar que los videos pequeños son los que terminaron fallados, no es cierto: cray: :cray:

    ya que tienes la facilidad de hacer shel scripts, te pasare un pequeño dato para un cleaner verdaderamente Eficiente.

    tienes que revisar archivo por archivo, tu find del antiguo sh podría servir, Luego tienes que revisar archivo por archivo y borrar todos los archivos que no tengan como 3 primeros caracteres Hexadecimales las letras FLV.

    Espero haber ayudado una vez mas:hi:
     
    Última edición: 4 Abr 2012
    A aqp.wifi, tonyvzla, joemg6 y 1 otra persona les gustó este mensaje.
  17. dgonzaleznet

    dgonzaleznet Miembro maestro

    Registro:
    24 Oct 2011
    Mensajes:
    406
    Likes:
    41
    Temas:
    18
    Tengo operativo y en producción el Thunder con mi proveedor 1 no ha habido problemas y todo bien, lo hice con el tutorial tal cual en la primera página lo único que actualicé fue el plugin de youtube y está funcando bien...

    Yo tengo 2 proveedores de internet y tengo una duda, en caso de que cambie las máscaras de red en el thunder y en mis 2 routers mikrotik, ¿Puedo usar el único thundercache para mis 2 Mikrotiks? tanto para proveedor 1 y proveedor 2

    Alguien lo ha probado ya?
     
  18. joemg6

    joemg6 Miembro maestro

    Registro:
    5 May 2010
    Mensajes:
    455
    Likes:
    198
    Temas:
    4
    Buena información Williamsio, siempre es bueno tener tu participación en el foro, para hacer el plugin uno tiene que partir desde ese punto, estuve probando pero tenía algunos detalles que no me convencían hasta que he encontrado en un foro Basileño el código de fuente del plugin de Youtube que ahora se está utilizando, y analizando estuve cerca jeje, como menciona williamsio para no tener errores con el caché se tiene que borrar todo el caché del youtube, para eso borrar la carpeta youtube en "/thunder/" y en la base de datos del Mysql:

    Código:
    # mysql -uroot thunder -pthunder31
    mysql> DELETE FROM thunder WHERE domain="youtube";
    mysql>exit;
    
    Ese script fue solo para uso temporal, porque habían videos que en su mayoría eran de 1.7 MB, en el caso de los videos que estan por partes y no dejaban cargar el resto del video al final terminaban corrompiendo el video, sobre el cleaner buena sugerencia, pero sería mejor trabajar en la mejora del plugin, pero de todos modos no estaría mal un cleaner de todas maneras.
     
    Última edición: 4 Abr 2012
  19. leandro1979

    leandro1979 Miembro frecuente

    Registro:
    9 Set 2011
    Mensajes:
    63
    Likes:
    4
    Temas:
    0
    buenos dias
    queria hacerles una consulta yo uso squid o lusca en modo tproxy funciona perfecto
    lo que queria saber si a este cache se puede implementar el thunder ya que intente y cuando activo tproxy el thunder deja de funcionar
    saludos
    Leandro
     
  20. williamsio

    williamsio Miembro maestro

    Registro:
    17 May 2009
    Mensajes:
    439
    Likes:
    28
    Temas:
    3
    Jaja exacto hermano yo soy yoboss en brazil fw y yo fui el que postio el codigo ahi :hi:

    necesitaba un hermano de habla hipana para ahora pasar al siguinte level, notaras que nuestra correccion solo trabaja con archivos completos, y estamos evitando de todas las formas posibles hacer hit de los archivos que vienen desarmados, pero hay un problema adicional que se puede solucionar

    Asume que pasa esto.
    Miras un video, primera pasada: lo tienes completo sin range y sin cm2=0 :wow: Cache Hit y gravado correctamente.

    Segunda pasada:
    el mismo video pero lastimosamente viene en partes:cray: lo logico que es pueda hacer hit con mi vídeo completo, pero no!! hare un cache miss, porque como habrás notado en el código posteado, se localiza range o CM2 y zzas es miss, entonces lo bajara de Internet.

    para evitar esto ultimo tenemos que lograr que el plugin acceda a la db lea la tabla youtube y verifique el id del video contra la tabla de mysql, y entonces tendremos un hit casi en el 90% de las veces
     
    Última edición: 4 Abr 2012
    A aqp.wifi, ozito1992, tonyvzla y otras 2 personas les gustó este mensaje.
Etiquetas: