Instalación de ThunderCache 3.1 paralelo a Mikrotik

mi storeurl.pl tiene como peso 5852 ahora mismo estoy poniendo a prueba el storeurl.pl anterior con el nuevo squid.conf de joemg a ver que tal

----- mensaje añadido, 23-mar-2012 a las 17:26 -----

a la mier... jaja se fue todo a la mier... cuando hice el cambio de squid y storeurl nada y quise a regresar a la configuración anterior no me funcionó ya he tratado de todo y nada se fregé mi thunder voy a reinstalar todo desde el principio a ver si se soluciona con una instalación limpia

 

Es mucho más liviano pero si lo abrís te vas a dar cuenta porque... el storeurl.pl no solo se creo en un principio para Youtube, sino también para otras páginas de contenido dinámico. El primer storeurl.pl venía con comandos para esas otras páginas. El nuevo viene depurado solo para Youtube y al parecer completamente reescrito por nuestro amigo JOEMG.

Por cambiar el squid.conf y el storeurl.pl si mantuviste los archivos anteriores no tiene porque haberse corrompido nada, yo que vos reviso porque a mi lo que me pasó (por dar un ejemplo) fue quedarme sin inodes en el HDD de cache por un cambio en el squid.conf. Fijate busca si podes solucionar el problema sin borrar, porque perder el cache de thunder es pesado de recuperar por la red (al menos la mia) durante varios días se siente. Saludos.

 

si los mantuve y luego quise regresar colocando los anteriores y no se pudo, según conversaba con mi pana Tachinoli le ha pasado lo mismo, que raro si solo lo que se hizo fue regresar a poner los anteriores squid y storeurl no entiendo la verdad y mandé todo abajo porque ya tenía muchas quejas de que los videos se quedaban y para mi mala suerte los clientes querian ver esos videos y tenía muchisimos ya con error eso me obligo a tomar una pistola... no no jajajaja paro paro... me obligo a reinstalar todo a ver que sucede con una instalación limpia sin tantos cambios y por recuperar lo cacheado... ya está espero se pueda hacer algo

 

Porque mientras arreglas el problema no das de baja la redirección en el mikrotik al Squid/Thunder asi la navegación continua y vos arreglas tranquilo, te recomiendo arreglar los problemas antes que siempre reinstalar, porque quizas repitas la misma falla cada tanto y nunca termines de saber que fue. Saludos.

 

Si algunos tienen problemas al actualizar el Storeurl y se les bloquea, fíjense que el squid este reiniciando correctamente a veces necesita que se efectué dos veces seguidas el reinicio, hasta que reinicie correctamente, como se muestra en la imagen en el primer reinicio no se realiza correctamente y en el segundo recién hace el proceso correcto y también darle permisos antes de hacer el reinicio "chmod 777 /etc/squid/storeurl.pl".

 

hola a todos y a los que me dieron una mano con el tema de instalacion del thunder en el debiam, les paso a comentar que logre instalarlo sin ningun problema era un error mio pero antes no tenia este problema ya que no sabria como explicarlo para los demas y mas para los novatos en linux como yo en estos dias estare pasando con lujos y detalles como lo logre. Desde ya muchas gracias a todos

 

Si tenia con privilegios el storeurl y aun asi no me iniciaba el squid ahora lo q vooy a intentar es una instalacion limpia con tu actualizacion joemg para ver si funciona ya tenia muchos videos con problemas y mis clientes me lo comunicaron esperemos a ver q sucede

----- mensaje añadido, 23-mar-2012 a las 21:30 -----

Claro man lmande abajo la regla del mk por los videos con fallaa toco reinstalar

 

Gracias por todo el apoyo, pero que tal si hacen un manual alternativo con thunder + storeurl.pl desde una instalación limpia y así hacemos las 2 pruebas a ver como nos va, saludos

 

Bueno a mi el problema por el que no me levantaba squid al cambiar el store.pl era que no le habia dado permisos.... le dilos permisos y tambien tuve que reiniciarlo... dos veces para que agarrara como explico el amigo joemg.. y ahora si anda al pelo....

 

Tienes problemas con los videos? volviste a cachear videos que ya habias tenido cacheado antes? te sale el problema de intente de nuevo? comenta tus pruebas man por fa es importante para todos nosotros, grax

 

Haciendo pruebas y les comento...

 

Saludos me paso algo extraño, me sigue saliendo el error normal de los vídeos pero algo curioso hice y observen:



al volver a ver el video en ventana normal nº3 no se reproduce el video, pero si lo paso a ventana mediana nº3 si comienza a rodar el video nº1 alli la barra roja ya tiene reproducido cierta parte del video se nota el nº2 al fondo el video mostrado y nº4 y nº5 la velocidad de entrega, aver si sirve este tips para un estudio, saludos

 

A mi también me sucedía eso pero cuando regresé a mi storeurl anterior... me marcaba hasta 6 Mbps pero el video se quedaba en "intente de nuevo"

 

Me esta funcionando bien este store nuevo... Bueno.. probé con unos 15 videos y anda al pelo... los cachea y los entrega bien... algo que note con un vídeo que deje que cacheara hasta la mitad y luego cerré la pagina... volví a probar para ver si comenzaba el vídeo desde donde había cacheado.. pero no... comenzó a correr a velocidad normal.... lo que me lleva a preguntar algo... para que cachee el vídeo hay que dejar que el mismo se cargue completo ???

 

sip... debia cargar completo el video

 

waaaa que felicidad gracias maestroo tu store esta funcionando de maravilla!! con el anterior store cuando no veia completo el video me salia errores y ya no podia volverlo a cargar completo ahora voy probando varios videos con este nuevo estore y esta superr! mi unico inkietud es como limpio mis anteriores videos erroneos que cuando los vuelvo a ver esos si me ocasionan problemitas saludos maestro y gracias
PD:aun no puedo solucionar mi problemita con el facebook que le comente que no puedo ver su biografia cuando tengo activo el thunder,saludos y mil gracias por el nuevo store xD

----- mensaje añadido, 24-mar-2012 a las 14:15 -----

que tal amigo dgonzaleznet como te va con el nuevo estore del amigo joem lo has probado? haber si comentas tu experiencia.

saludos,atte ozito1992 xD

 

en realidad aun no lo he puesto porq me da meeeeeeyo jajaja en la madrugada probare pilas entonces

 

No me inicia el squid me he matado haciendo el restart probe con stop y start nada... por si acaso mande un killall squid y me aparece que no hay proceso, estoy googelando a ver si encuentro algo pero por ahora nada...

Por cierto me pegue una vueltita por los logs y encontre:
Squid Parent: child process xxxx exited due to signal 6

las x muestran el numero del proceso pero bueno... no se a que se debe

----- mensaje añadido, 25-mar-2012 a las 05:37 -----

FUUUUUUUUUUUUUUUUUCKKKKKKKKK!!!! lo encontré! encontré el maldito error... yo estaba copiando el archivo de storeurl.pl por Filezilla dandole vueltas en google me decía que leyera los logs de squid y me hacían referencia a algo de:
FATAL: The store_rewriter helpers are crashing too rapidly, need help!
me maté cambiando algunas cosas y reversando hasta que recorde que alguna vez cuando configuraba servidores en mi antiguo trabajo al copiar algunos archivos desde windows a un linux no me funcionaban pero el problema se solucionaba creando nuevamente el archivo en el linux mismo, entonces probé esto:

Solución: hice un vi del storeurl.pl que había subido por el maldito Filezilla a mi thunder y copie el contenido en un block de notas luego respalde el archivo storeurl.pl como bkp.storeurl.pl y cree un nuevo storeurl.pl pegando el contenido del storeurl.pl de joemg y voila! hice un squid -z primero y luego mande a reiniciar el squid y al segundo intento funco!

Mi pregunta ahora es... si hay una línea en el crontab que indica que a las 4 de la mañana se reinicie el servidor que vamos a hacer para que el squid se reinicie porque recordemos que "algunas veces" hay que reiniciar por segunda vez el squid y la regla que tenemos en el mk hace que por el ping a la 192.168.10.2 la regla que direccione el tráfico de internet pase por nuestro thunder y si el squid no esta up (porque se supone que hay que reiniciarlo) nadie va a poder navegar hasta q reiniciemos manualmente el squid...


Compa! Tachinoli! aplique y comente!

 

Mi pregunta ahora es... si hay una línea en el crontab que indica que a las 4 de la mañana se reinicie el servidor que vamos a hacer para que el squid se reinicie porque recordemos que "algunas veces" hay que reiniciar por segunda vez el squid y la regla que tenemos en el mk hace que por el ping a la 192.168.10.2 la regla que direccione el tráfico de internet pase por nuestro thunder y si el squid no esta up (porque se supone que hay que reiniciarlo) nadie va a poder navegar hasta q reiniciemos manualmente el squid...


Compa! Tachinoli! aplique y comente![/QUOTE]

POR QUE NO LE DAS ESA ORDEN AL CRON-?? QUE EL REINICIE EL SQUID COMO AL SERVIDOR NO CREES?? LAS VECES QUE UNO QUIERA Y EN EL HORARIO NO TE PARECE??

 

Buenas, anoche logré solcionar el "por que no levantaba el squid"
Fue simplemente por que no identificaba el contenido del storeurl.pl encontré la solución en el siguiente foro
http://aacable.wordpress.com/2012/01/19/youtube-caching-with-squid-2-7-using-storeurl-pl/
donde a alguien le pasa exactamente lo mismo

Spoiler

1. Hello i have a problem, and I don’t know what’s wrong, can you help me, difference from tour config is only IPaddress, and different dir for cache
   here is whats happening::::
   2012/02/06 00:48:26| Starting Squid Cache version 2.7.STABLE9 for x86_64-pc-linux-gnu…
   2012/02/06 00:48:26| Process ID 8837
   2012/02/06 00:48:26| With 1024 file descriptors available
   2012/02/06 00:48:26| Using epoll for the IO loop
   2012/02/06 00:48:26| Performing DNS Tests…
   2012/02/06 00:48:26| Successful DNS name lookup tests…
   2012/02/06 00:48:26| DNS Socket created at 0.0.0.0, port 54307, FD 6
   2012/02/06 00:48:26| Adding domain enet.rs from /etc/resolv.conf
   2012/02/06 00:48:26| Adding nameserver 192.168.2.129 from /etc/resolv.conf
   2012/02/06 00:48:26| helperOpenServers: Starting 7 ‘storeurl.pl’ processes
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| User-Agent logging is disabled.
   2012/02/06 00:48:26| Referer logging is disabled.
   2012/02/06 00:48:26| logfileOpen: opening log /var/log/squid/access.log
   2012/02/06 00:48:26| logfileOpen: opening log /var/log/squid/access.log
   2012/02/06 00:48:26| Swap maxSize 174080000 + 1048576 KB, estimated 13471428 objects
   2012/02/06 00:48:26| Target number of buckets: 673571
   2012/02/06 00:48:26| Using 1048576 Store buckets
   2012/02/06 00:48:26| Max Mem size: 1048576 KB
   2012/02/06 00:48:26| Max Swap size: 174080000 KB
   2012/02/06 00:48:26| Local cache digest enabled; rebuild/rewrite every 3600/3600 sec
   2012/02/06 00:48:26| logfileOpen: opening log /var/log/squid/store.log
   2012/02/06 00:48:26| Rebuilding storage in /var/spool/squid (DIRTY)
   2012/02/06 00:48:26| Using Least Load store dir selection
   2012/02/06 00:48:26| Current Directory is /var/spool
   2012/02/06 00:48:26| Loaded Icons.
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| Accepting transparently proxied HTTP connections at 192.168.1.202, port 3128, FD 21.
   2012/02/06 00:48:26| HTCP Disabled.
   2012/02/06 00:48:26| WCCP Disabled.
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   2012/02/06 00:48:26| Ready to serve requests.
   2012/02/06 00:48:26| WARNING: store_rewriter #1 (FD 7) exited
   2012/02/06 00:48:26| WARNING: store_rewriter #2 (FD 8) exited
   2012/02/06 00:48:26| WARNING: store_rewriter #3 (FD 9) exited
   2012/02/06 00:48:26| WARNING: store_rewriter #4 (FD 10) exited
   2012/02/06 00:48:26| Too few store_rewriter processes are running
   2012/02/06 00:48:26| ALERT: setgid: (1) Operation not permitted
   FATAL: The store_rewriter helpers are crashing too rapidly, need help!
   i really don’t know what to do anymore… Thanks
   Comment by nenad — February 6, 2012 @ 4:52 AM
   Reply
2. There might be some problem with the storeurl.pl content, either its not copy pasted correctly.
   First try without storeurl.pl
   IF it works ok , then Try to create storeurl.pl from following URL.
   http://aacable.wordpress.com/2012/0...and-bypass-cached-videos-from-mikrotik-queue/
   Comment by Syed Jahanzaib / Pinochio~ — February 6, 2012 @ 8:53 AM
   Reply
   • Thanks, it was problem with storeurl.pl
     Now squid starts, and another thing i have to comment out log parameters, because squid don’t understand it…
     Now Ill test it…
     Thanks again
     Comment by nenad — February 6, 2012 @ 11:43 PM

lo estoy probando desde ayer!

saludos.