Filtrar datos y archivos

Resto de entradas con intenciones didácticas en la etiqueta Aprendizaje.

En ocasiones será necesario recurrir a comandos que nos ayuden a localizar archivos binarios (ejecutables), paquetes, simples ficheros de trabajo o determinados contenidos dentro de ellos. Hoy vamos a hablar de algunas órdenes que nos ayudarán en la tarea de filtrar los resultados deseados ya sea en la búsqueda de ficheros o de sus datos.

grep
Conviene aprender bien como opera este comando ya que nos resultará muy útil para encontrar cadenas de texto dentro de ficheros, lo cual conviene cuando son extensos. Es básicamente un filtro que concreta la búsqueda en función del argumento que le acompañe. Algunas de sus opciones son:

grep -i: para no distinguir entre mayúsculas y minúsculas.

grep -n: muestra el nº de línea dentro de un archivo especificado según el patrón introducido.

grep -v: muestra las líneas no coincidentes con el patrón especificado.

grep -c: en lugar de mostrarlas líneas coincidentes con el patrón introducido muestra el número de líneas que coinciden.

grep -r: busca recursivamente dentro de los subdirectorios existentes en el directorio actual.

grep -o: para que en el listado solo aparezca la parte de la línea que coincide con el patrón.

Para entender la potencia de este comando conviene que veamos algunos ejemplos:

grep opciones docu.txt: para listar todas las líneas que contengan la cadena "opciones" dentro de docu.txt.

grep "expresiones regulares" docu.txt: para listar todas las líneas que contengan la cadena "expresiones regulares" dentro de docu.txt. Cuando se trate de dos o más palabras hay que entrecomillarlas.

grep -v "compras" departamentos.txt: para excluir del listado todas las líneas que contengan la cadena "compras" dentro de departamentos.txt.

grep guitarra dredg anathema dreamtheater rush > guitarras.txt: nos envía las líneas que contengan la palabra "guitarra" de los archivos dredg, anathema, dreamtheater y rush al archivo guitarras.txt.

grep guitarra dredg anathema dreamtheater rush | tee guitarras.txt: visualiza el mismo resultado que anteriormente por pantalla y, a través de una tubería, usamos el comando tee para enviarlo al archivo guitarras.txt.

sed
Comando que permite borrar líneas y registros o sustituir cadenas de caracteres dentro de las líneas. Estas modificaciones solo se dan a efectos de visualización y los archivos originales no se ven alterados salvo que utilicemos el comando de una manera muy concreta.

sed "3d" lista.lst: elimina la línea nº 3 del archivo lista.lst.

sed "3,5d" lista.lst: elimina el rango de líneas de la 3 a la 5 del archivo lista.lst.

sed "3,$d" lista.lst: elimina el rango de líneas de la 3 en adelante del archivo lista.lst.

sed "/^$/d" lista.lst: elimina las líneas en blanco del archivo lista.lst. 

sed "s/cadena1/cadena2/g" lista.lst: sustituye cadena1 por cadena2  en el archivo lista.lst.

sed "5 s/USUARIO/usuario/g" lista.lst: sustituye USUARIO por usuario en la línea nº 5 del archivo lista.lst. 

sed -i "3,5d" lista.lst: mismo efecto que el anterior, pero esta vez los cambios sí se realizan en el archivo.

sort
Comando para ordenar registros y líneas de uno o más archivos.

sort listado.txt: ofrece por pantalla las líneas del archivo listado.txt  ordenadas por orden alfabético.

sort listado.txt >  listado2.txt: crea un duplicado de listado.txt con nombre listado2.txt y con sus líneas ordenadas alfabéticamente.

sort -o listado.txt listado.txt: ordena las líneas del archivo sin ofrecerlo por pantalla.

sort -r listado.txt: muestra por pantalla las líneas del archivo ordenadas en orden inverso.

sort -n listado.txt: ordena las líneas por número; útil cuando dichas líneas comienzan con un carácter numérico.

sort -u salida.txt: elimina las líneas repetidas al ordenar el archivo salida.txt. 

sort -m lista1.txt lista2.txt: combina ambos archivos asumiendo que los dos están previamente ordenados.

sort -b: ignora los espacios en blanco. 

tr (translate)
Permite cambiar unos caracteres por otros dentro de un archivo. Primero especificamos lo que vamos a sustituir y seguidamente lo que lo sustituye. Escribamos su sintaxis y la aclararemos después con ejemplos:

tr [opción] SET1 [SET2].

Las opciones pueden ser

-d: elimina los caracteres incidados en SET1.

-s: elimina o reemplaza los caracteres indicados en SET1. 

-c: todos los caracteres que no estén indicados en SET1 los convierte a SET2.

-t: trunca la longitud de SET1 a la de SET2.

Veamos algunos ejemplos:

echo ejemplo | tr -d emp: elimina los caracteres emp de la palabra ejemplo. Aquí ejemplo sería SET1 y emp sería SET2.

echo ejjemmpplo | tr -s [a-zA-Z]: elimina cualquier letra (representada por la expresión comodín [a-zA-Z]) duplicada de la palabra ejjemmpplo.

echo "nací el 02 de enero de 1947" | tr -c [0-9] $: sustituye todo carácter no numérico (incluidos espacios en blanco -de nuevo ver comodines-) de la expresión "nací el 02 de enero de 1947" por el carácter $.

echo murcielago | tr aeiou AEIOU: lo que aquí decimos es que de murcielago cojamos las letras aeiou y las sustituyamos por AEIOU.

Como vengo insistiendo, esto no son más que pequeños ejemplos. Documentarse y practicar es la mejor receta para aprovechar las prestaciones de estos comandos.

Y como no podría ser más a propósito, ya que hemos hablado de filtros terminemos con un vídeo de la banda de Cleveland Filter y este potente "Welcome to the fold".