Esa frase se me ha pasado por la cabeza varias veces durante estos tres ultimos dias, desde que recibi un mail de parte de dreamhost respondiendo a una pregunta que les hacia sobre por que el servidor devolvia de vez en cuando un error 500, error interno del servidor.
Segun ellos, bjdoll.net esta generando mas carga de la que el servidor es capaz de gestionar, asi que de vez en cuando, llega al limite de ram asignada para el, y dice “no, jomio, te tienes que esperar a que se liberen recursos”.
Esto no esta provocado por la transferencia, de hecho es lo que mas nos sobra, esta generado por tener tantas visitas, y es que lo creais o no, bjdoll.net recibe muchas visitas, ya no solo desde españa y latinoamerica, sino desde japon, korea y china, desde estados unidos, desde varias partes de europa e incluso de australia, todo eso se ve mirando los logs del servidor.
Y son visitas reales, me he tomado la molestia de comparar las ips con mas de 50 bots de motores de busqueda, como los conocidos yahoo, google, altavista, ask jeeves, etc etc…
En parte este exceso de tiempo de proceso y ram lo generan estos bots de busqueda, asi que he bloqueado el acceso al servidor a esos 50 bots basandome en su user-agent, menos a google.
Y bueno, aun el googlebot tiene restricciones, no puede mirar en la busqueda, ni en la lista de usuarios, ni en el calendario ni otras cosas.
Tambien he copiado todo el contenido importante del wiki al foro y lo he eliminado del servidor.
Me jode muchisimo, porque fue lo primero que hice para bjdoll, tambien fue un proyecto que quise hacer con la colaboracion de la gente, pero al final solo colaboraron 4 o 5 personas, y el archivo esta demostrando tener mucha mas aceptacion y mas contenido, asi que lo dejamos asi y ya esta.
El servidor ha mejorado, en definitiva, pero habra que esperar unos dias a ver el cambio, a ver si podemos mantenernos asi, ya que aunque tengamos solo 400 y pocos usuarios registrados… la realidad es que tenemos una cantidad de visitas bastante importante, en ocasiones mas visitantes que usuarios registrados.
Pero bueno, de todo esto se saca algo bueno, se puede partir de cero y conseguir algo grande, contamos con el apoyo de unos cuantos fabricantes, y en ocasiones colaboran con nosotros enviandonos noticias por ejemplo.
Es posible que tengamos una via de escape gracias a eso, aunque implicara tener publicidad en la pagina, pero si otros sitios como DOA se mantienen gracias a eso, nosotros podriamos intentarlo tambien.
No me interesa el dinero, he pagado dos hostings de mi bolsillo en menos de un año de vida que tiene la pagina y nunca he pedido ayuda a nadie, lo unico que me interesa es poder mantener la web online, y si es posible que se autofinancie, ya seria perfecto.
Ya veremos lo que pasa.
Ains!!1 Pobre hombre!!!
Ya sabes que aqui estoy para lo que sea… que yo sabÃa que la procesión iba en el cargo XDDD
Y cuando digo para lo que sea, coño, que al otro lado del msn o lo que sea siemrpe estoy… que soy una friki.. desponsable…
Ya pensaremos que podemso ahcer
Hijo, recomiéndole usar betterawstats para la identificación de bots, si no lo hace ya:
http://betterawstats.com/ > http://betterawstats.com/betterawstats/index.php
Otra recomendación para el htaccess:
http://perishablepress.com/press/2007/10/15/ultimate-htaccess-blacklist-2-compressed-version/
Unas graciosas reglas para bloquear unos poquitos graciosos bots, via la identificación del agente.
p.d. Maldito captcha