Casi siempre todo funciona bien, el servidor es robusto y responde sin muchas preocupaciones pero el problema llega cuando uno de estos robots se vuelve loco. Seguramente esta locura es producida por algún cambio en alguna variable que fuerza el número de escaneados diarios que realiza el bot, de esa forma el humano “snifante” prueba con diversos valores subiendo a veces sin saberlo la cantidad de peticiones por minuto de forma exponencial, el no ve las repercusiones en el servidor de origen, probablemente se dice, que bien ahora así tengo el contenido nuevo tan pronto como se publica, si soy el primero posiciono mejor, lo voy a dejar así. Y sin saberlo está haciendo un ataque DDOS o de denegación de servicio.

En este caso concreto es tal el consumo que en hora punta de tráfico las peticiones se enletecen hasta más allá de los 3 segundos por página peticionada.

Lo primero es detectar que algo paso, esto por suerte te lo dicen los clientes del servicio web en cuestión con emails técnicos del tipo:

“La web va lenta”, “La web va como el c…”

Recibido el tercer email de este tipo y tras comprobar que no es un problema de la conexión del cliente hacia la red, que también reportan, toca averiguar que está pasando.

1. Vemos el estado de saturación de la máquina. En Windows con el Administrador de Tareas.

2. Lo primero es ver que tal estamos de RAM, que consumo tenemos.

3. Luego vemos el espacio en disco que nos queda

4. El consumo de CPU

5. Ahora vamos a ver con ese mismo administrador de tareas que “programas” son los que más consumen

Si es MYSQL y la RAM va cargada tocará ampliar RAM, al igual de que si es disco.

Si es APACHE y la CPU va saturada, pues tocará ver cuantas peticiones y de quien son recibe el servidor web.

Para conocer cuantas peticiones recibe nuestro server hay muchas cosas y programas, pero en este caso no hay ningún sistema estadístico instalado, bueno si, Google Analytics, el cual pinta y colorea los datos que da gusto, pero a nivel técnico no nos sirve pues estamos buscando excesos y errores y me da a mi que Analytics los obvia, a saber porque con la todopoderosa y sus manías, que ya me cansan.

Aunque no tengamos nada instalado en server siempre nos podemos bajar los archivos de log del Apache para analizarlos en casita, con nuestra maquinita.

Ten en cuenta que estos archivos pueden ser gigantes, depende de como esté configurado el server, los hay con rotaciones y sin, pero puedes encontrartes con archivos de 2Gb. en servidores de alto tráfico, lidia con ellos si puedes. Lo mejor es rotarlos manualmente en el momento de máximo tráfico o ataque.

Para ello, detén el servicio de Apache, renombra los access.log y error.log y vuelve a iniciarlo, dejarás a tu cliente sin servicio un minuto escaso. Aguanta un ratito con el ataque, un par de horas a lo sumo, y vuelve a hacer lo mismo, de esa forma tendrás una muestra sanguínea del ataque o del momento de saturación del server y trabajarás única y exclusivamente con esos datos, localizando más rápidamente si existen direcciones IPs que un consumo excesivo de datos.

De Windows a Ubuntu y tiro porque me toca

Una vez muevas ese log a una carpeta accesible por FTP o HTTP faltará bajártela para analizarla en tu flamante workstation Ubuntu, que mola más que un OS X… al menos más que un Snow Leopard, pues falta ver si este próximo lunes día 6 de Junio lo que nos maravilla OS X Lion de la mano de Steve Jobs, palabra de AppleFun arrepentido venido a Ubuntu.

Analizando los archivos .log de Apache

Para analizarlo en nuestro Ubuntu vamos a usar Webzilla, para instalártela:

sudo apt-get install webalizer

Luego la configuramos con un:

sudo gedit /etc/webalizer/webalizer.conf

Aquí en principio sólo falta tocar el lugar, ruta y archivo donde está el access.log

LogFile                   /var/www/logs-para-analizar/access.log
OutputDir              /var/www/webalizer
Incremental           yes

Grabamos y ejecutamos el Webalizer con un complejísimo, es broma:

sudo webalizer

Unos segunditos y tachán, apunta tu navegador a:

http://localhost/webalizer

Selecciona el mes actual, y en la siguiente pantalla la opción “Clientes” aquí verás las IPs que han visitado más la página durante el ataque o la bajada de rendimiento del server, busca las más abultadas que vamos a revisarlas.

Ahora nos faltará saber el Quién es quién de cada IP

¿Quién es quién?

Para eso podemos usar varias opciones, entre ella una via web:

http://whois.domaintools.com/67.195.112.52

Donde 67.195.112.52 es la IP sobre la que quieres conocer información y la otra es usar las herramientas de red del sistema que incorpora Ubuntu.

Con ellas puedes realizar un WHOIS, un LOOKUP , etc.

Si entras en “Explorar los puertos”, cosa que tarda un rato podrás también detectar si detrás hay un servidor web, un servidor FTP, o un emule abierto. Datos que te permitirán determinar con algo más de certeza si se trata de una empresa o un usuario.

También puedes rastrear la ruta para más o menos ver de donde es el país de origen, si este por ejemplo es de Ukrania o de la conchinchina probablemente se trate de un buscador en el que no te importe perder posicionamiento.

Cuidadín cuidadín con los GoogleBots y familia

Pues eso, asegúrate que de todas esas IPs no te apuntes ninguna que sea de un buscador conocido en el que te quieras posicionar, pues si la anotas y luego la baneamos perderás el posicionamiento en ese buscador pues tu Apache no le dejará entrar.

Ya tenemos las IPs localizadas y correctamente anotadas, ahora vamos a banearlas

Baneando IPs en Apache bajo Windows

Bueno esto a decir verdad es más o menos igual en Windows que en Linux que un radiocassette donde sea capaz de correr Apache.

Busca el fichero de configuración de Apache httpd.conf

En la sección Directory

Introduce al final, justo antes del cierre de la directiva </Directory> y una en cada línea la siguiente instrucción:

deny from TU-NO-PASAS

por ejemplo si quisiéramos banear a Yahoo, NO lo hagas!

deny from 67.195.112.52

Graba el fichero y reinicia Apache, en Windows desde “Accesorios -> Herramientas del Sistema -> Servicios -> Apache” botón de la derecha reiniciar.

Listas negras de IPs malignas

También de paso y por el mismo precio que nos ponemos a banear, una práctica aceptable sería el banear sistemáticamente aquellas IPs que se han detectado en el mundo recientemente como IPs malignas.

Yo he sacado una lista desde:

http://isc.sans.org/ipsascii.html

y desde:

http://isc.sans.org/sources.html

Baneando que es gerundio.

Páginas relacionadas con este artículo:

1. Test de carga web
2. Personalizar un virtual host de Apache bajo Plesk
3. Bloquear muchos intentos fallidos de acceso a servidor

Con este comandito podrás hacer un backup en un fichero de texto de las bases de datos en servidores remotos a la máquina donde ejecutes el “comandito”:

mysqldump -h direccion_ftp_remoto –password=claveRemota –user=usuarioRemoto nombre_base_de_datos_remota –routines> /home/backup/mysql-servidor_talytal.sql

Hay otras combinaciones de este efectivo comando de Mysql, por ejemplo este que me sirve para realizar copias de una base de datos de un servidor a otro:

mysqldump –host=direccion_host_origen –password=clave_mysql_origen –user=usuario_origen tabla a copiar | mysql –password=clave_mysql_local –user=usuario_mysql_local tabla_destino

La tabla de destino tiene que existir, es indiferente si tiene datos o no, o si las estructuras son diferentes pues mysqldump la machacará con los datos que vienen del origen.

Además podrás despreocuparte un poquito de tus datos si añades esta copia a una tarea con cron para ello haz un:

sudo crontab -e

Y métele algo así como:

00 21 * * * mysqldump –host=… y toda tu comando

Esto copiará la tabla todos los días de la semana a las 21.00H.

Páginas relacionadas con este artículo:

1. Optimizar bases de datos Mysql
2. Optimizar bases de datos Mysql
3. Cambiar clave root a Mysql por línea de comandos Windows

Hoy me dejo un apunte de cómo renombrar las extensiones de muchos archivos que estén en el mismo directorio, esto por ejemplo sirve cuando tienes en un servidor linux archivos con extensiones .JPG i .jpg es decir mezclando mayúsculas con minúsculas, etc.

rename ‘s/\.jpg/\.jpg/’ *.JPG

Esto le dice a Ubuntu renaméame todo lo que empiece contenga jpg por jpg siempre que el fichero acabe en lo que sea .JPG mayúsculas

Ahora una variante:

rename 's/\.jpeg/\.jpg/' *.jpeg

Todo lo que tenga la extensión .jpeg me lo cambias por jpg

Esta otra nos serviría para los ficheros pdf:

rename ‘s/\.pdf/\.pdf/’ *.PDF

Pues na… qie casi que abrimos blog del estilo… no-sin-mi-ubuntu.com no?

Páginas relacionadas con este artículo:

1. Instalar archivos .bin en Ubuntu
2. Instalar archivos .bin en Ubuntu
3. Recuperar archivos borrados en Ubuntu

Ahora nos quedaría hacer una especie de script y añadirlo a las tareas “cron” de forma que la sincronización o backup se hicies de forma automatizada sin que tengamos que mediar en ello. Para cargar un script de comando vamos a utilizar el siguiente comando lftp lftp -f <script_file> donde <script_file> será un archivo de texto con los comandos a ejecutar, esos comandos tienen la siguiente sintaxis:

Páginas relacionadas con este artículo:

1. Bloquear muchos intentos fallidos de acceso a servidor
2. Cómo cambiar la clave de phpMyAdmin en Ubuntu
3. Backup online gratis

Protegiendo Apache, FTP y los servidores de correo con Fail2Ban

Funciona de una forma muy sencilla, Fail2Ban lee los archivos de log de accesos por password o los errores del fichero de errores de apache error_log vetando a través del Firewall aquellas IPs que fallan muchas veces

Para instalarlo, desde Ubuntu o Debian:

sudo apt-get install fail2ban

Páginas relacionadas con este artículo:

1. Baneando direcciones IPs en Apache bajo Windows
2. Test de carga web
3. Optimizar servidor MySQL

Para hacerlo, abre un terminal o conéctate por SSH si se trata de un servidor remoto y escribe:

mysqladmin -u root password nuevaclave

Recuerda reiniciar el servicio, en Ubuntu ahora puedes hacerlo con un:

service mysql restart

Páginas relacionadas con este artículo:

1. Cambiar clave root a Mysql por línea de comandos Windows
2. Nginx y phpMyAdmin
3. Alternativa a phpMyAdmin con Ajax

Esto se hace editando el facilísimo, ejem, .htaccess de Apache, con sus directivas, que ninguna está buena ni te pone, al revés son la repera, difíciles por ser casi todas iguales, así que traes leer en ellas en diferentes blogs y comprobar que no me ha servido ninguna para este, mi caso, he decidido hacer un “brevepost” para que aquí quede si alguien debe en el futuro lidiar con ello:

Redirect 301 “/Longboard-completo/”  http://www.tulongboard.es/longboards-bambu-series/
Redirect 301 “/Mochilas-Skate/”  http://www.tulongboard.es/mochilas-longboard/
Redirect 301 “/Longboard/”  http://www.tulongboard.es/longboards-baratos/

Es decir:

Redirect 301 “página en servidor A sin las http://www.dominioA.com, es decir solo el QUERY_STRING” http://www.dominioB.es/pagina-html-destino

Así de fácil!

Páginas relacionadas con este artículo:

1. Ocultar los datos de registro de un dominio
2. Extensiones de dominio disponibles en el mundo
3. Personalizar un virtual host de Apache bajo Plesk

Además este portátil tiene una partición “mu rara” de HP donde meten todo ese software inservible con el que sobrecargan la máquina, pero no ocupa mucho y la hemos dejado por aquello de si me cambio de portátil y lo vendo en segundamano.es click click y gracias a ese pequeño lastre HPero, la máquina queda como de origen.

En fin que el niño además con la partición del Swapp de disco tiene la friolera de 4 particiones y al cambiarme de disco duro me ha tocado clonar el disco, antes, en mis épocas de Windows hubira tirado de alguna copia de Norton Ghost de esas que te presta un amigo que lo tiene todo, pero ahora con mi conversión a Linux he encontrado una utilidad que quiero compartir con todos vosotros, Clonezilla, ¿a que mola el nombre? Auí lo tienes: http://clonezilla.org/downloads.php

Bueno pues esta utilidad gratuita me ha clonado un disco de 320 Gb. con sólo 100Gb. libres a uno de 500 Gb. en algo menos de dos horas y eso que uno de los discos, el destino estaba conectado por un USB 2.0, de los de antes, los que eran y son más lentos que el caballo del malo.

Vayamos por partes, lo primero, el disco duro nuevo es un Seagate Momentus XT de 500Gb con un formato de 2.5″ es decir pequeñico para portátiles aunque también lo puedes montar con unos adaptadores en una bahía de disco de 3.5″ standard para tu equipo de sobremesa. Este disco duro gira a 7.200 RPM, al igual que el disco de origen del portátil un Western Digital Black Scorpio, que no es en absoluto nada malo, al revés más bien es bueno, bueno.

La particularidad de este disco duro Seagate Momentus XT es que es un disco duro híbrido, es decir combina una pequeña memoria SSD de 4 gb. con un disco duro de toda la vida, el resultado… prometo publicarlo en unos días.

Para clonarlo lo primero ha sido bajarse el Clonezilla, he preferido la imagen .iso y quemar un “cederun” de esos que me quedan por aquí en las estanterías. Tras quemarlo he apagado el ordenador.

Después he cogido el disco destino, en mi caso el Seagate y lo he conectado al puerto USB con una caja de esas externas que te convierten cualquier disco duro en portátil, la mía es de aquí: Caja externa disco duro USB

Reiniciamos en el ordenador, entrando en la Bios, que curioso! en un portátil HP se hace pulsando la tecla de escape o ESC en lugar de la tecla Suprimir, he cambiado para que bote desde el CD y he reiniciado.

En uno o dos minutos ya tienes al Clonezilla delante, me he limitado a decirle que sí a todo, asegurándome de lo de disco de origen y disco destino y ha empezado a clonar el disco.

Tras clonarlo, apagas ordena, pinchas el destino en el lugar del origen y todo está en su sitio.

Ahora bien, tendrás un espacio vacío. Para reparticionar el disco sin pérdida de lo que tenía he utilizado otro LIVE Linux, esta vez con el programa Gparted instalado, puedes bajártelo de: http://gparted.sourceforge.net/livecd.php

Una vez tienes la imagen la vuelves a quemar… cuidado con los incendios, y nada a particionar se ha dicho!

Páginas relacionadas con este artículo:

1. Resucitar disco duro
2. Resucitar disco duro
3. Google se queda sin disco duro

http://www.db.ripe.net/whois?form_type=simple&searchtext=IP

Sustituye la IP por el numerito que te trae de cabeza y te dirá donde está alojada esa web, es válido para los .es

Esto sirve por ejemplo para decir, si quiero migrar de ISP y a mi competencia le va bien o le va mal vamos a investigar, y de esa forma podemos descartar unos cuantos proveedores, que los hay muy malos, todo hay que decirlo.

Páginas relacionadas con este artículo:

1. Saber el uptime en Windows
2. Saber el uptime en Windows
3. Medir la velocidad de una web

Tanto es así que me voy a ir dejando algunos post con las cositas que más me han costado configurar, porque la información que popula por la red a es tan maravillosa como incompleta, equívoca en muchos casos.

El servidor FTP que he tenido el placer de configurar a pelo no es otro que Proftpd y si bien lo he realizado desde un Ubuntu, cualquier distribución linux puede utilizarlo, la diferencia es mínima.

Instalarlo es la mar de sencillo a la par que barato, desde un terminal copiaypastea el siguiente palabro:

sudo apt-get install proftpd

Luego creamos una Shell falsa editando el archivo de shells con vuestro editor favorito, en mi caso nano, el Vim para los suelos, que los deja como el oro (broma, con poca gracia, todo hay que decirlo, en modo años 80)

sudo nano /etc/shells

Aquí añadimos lo siguiente al final del texto, tal cual

/bin/false

Nos aseguramos de tener creados los directorio de subida de ficheros, en nuestro caso están en: /var/www/miftp

Si tenemos que crear el directorio recuerda:

mkdir /var/www/miftp

Luego dale permisos de lectura y escritura, los famosos 777

sudo chmod 777 /var/www/miftp

Ahora vamos a tocar un poco el archivo de configuración general de ProFTPd para ello volvemos a ejecutar el editor nano:

sudo nano /etc/proftpd/proftpd.conf

En nuestro caso aquí hemos tocado bien poco, tan sólo hemos cambiado el usuario de proftpd por nobody, busca “user” que estará justo antes que “group” y allí cámbialo, para buscar en nano utiliza CTRL+W

Graba el archivo con un CTRL+O Enter y continuamos

Ahora vamos a añadir un usuario FTP en Proftpd, aquí es donde los diferentes blogs que he consultado la lían parda, te meten un comando useradd con tres parámetros básicos, nombre de usuario, clave y directorio, pues bien, la clave, la clave, la clave de las pelotas debe ir encriptada, de lo contrario todos los intentos de login contra el servidor de FTP serán del todo improductivos. Al final en un foro he visto la luz, tal es así que vamos a realizarlo nosotros en dos pasos, en dos líneas de comandos en lugar de una, la primera sin la clave y la segunda con el encriptador de claves.

useradd –d /home/ftp pepepalotes

Y ahora el encriptador que no es otro que el comando pasword de linux:

passwd pepepalotes

El sistema te pedirá la clave, la introduces tal cual y ya se guardará encriptada.

Ahora reniciamos el servicio de FTP con el siguiente comando y a conectarse!

sudo /etc/init.d/proftpd restart

Páginas relacionadas con este artículo:

1. Instalar archivos .bin en Ubuntu
2. Habilitar cURL en Ubuntu
3. Desinstalar kernels antiguos en Ubuntu