Taller de Programacion en SHELL
Taller de Programacion en SHELL
Taller de Programacion en SHELL
cl/luxa Industrial Pipe Products Iron / Stainless / Brass / Steel Fittings, Nipples, Flanges, Valves www.msi-products.com Wall Street Institute Aprende Ingls en Wall Street Institute. Inscripciones 2011! www.wsi.cl
Tabla de contenidos 1. Introduccin: Qu es un shell? 2. Manejo bsico del shell 2.1. La linea de comandos 2.2. Patrones de sustitucin 2.3. Redireccin de ficheros 2.3.1. Redireccin stdout a fichero 2.3.2. Redireccin stderr a fichero 2.3.3. Redireccin stdin a fichero 2.3.4. Aadir redireccin a fichero 2.3.5. Redireccin "documentos empotrados" 2.4. Tuberas 2.5. Control de procesos 3. Comandos UNIX 4. Programacin shell 4.1. Mira mam, soy un script! 4.2. Variables 4.3. Linea de comandos 4.4. La salida de los programas 4.5. Operaciones aritmticas 4.6. Condicionales 4.6.1. if ... then ... [ else ... ] 4.7. Bucles 4.7.1. for ... in ... 4.7.2. Rompiendo un bucle: break 4.7.3. while ... A. Ejercicios resueltos B. Inicio del CD-ROM del taller (Knoppix) C. Documentacin adicional
1. Introduccin: Qu es un shell?
Es una parte fundamental de todo sistema operativo que se encarga de ejecutar rdenes bsicas para el manejo del
Hay muchos:
z
command.com cmd.exe - DOS y derivados ksh - korn shell de UNIX chs - C shell, similar en sitaxis al lenguaje de programacin C bsh - Bourne shell tcsh, zsh, ash, ... bash - Bourne Again shell, el shell mayoritario de sistemas Linux
echo : repite los argumentos en la salida estndar (ej. pantalla) ls : lista el contenido de un directorio cat : muestra el contenido de un fichero more : muestra el contenido de un fichero haciendo pausas entre pantallas si el fichero es muy largo
Pulsamos ENTER. En la linea de comandos podemos usar las siguientes (combinaciones de) teclas:
IZQUIERDA Se mueve a la izquierda (anda!) DERECHA Se mueve a la derecha
ARRIBA Vamos hacia atrs en el historial de comandos ABAJO Volvemos hacia adelante en el historial de comandos FIN CTRL + e Vamos al final de la linea INICIO CRTL + a Vamos al principio de la linea CRTL + d Fin de fichero CRTL + l Borra la pantalla Maysculas + RePag Hace scroll hacia arriba en la pantalla Maysculas + AvPag Hace scroll hacia abajo en la pantalla
su definicin clsica: abrir, cerrar, leer, escribir, etc. Ficheros estndar que estn abiertos para todo programa en ejecucin:
z
Entrada estndar /dev/stdin (ej. Teclado) Salida estndar /dev/stdout (ej. Pantalla) Salida de error /dev/stderr (ej. Pantalla)
/dev/null -> "la nada de UNIX" /dev/zero -> fuente infinita de ceros /dev/random -> datos aleatorios
2.4. Tuberas
Una tubera es un fichero especial con dos extremos de, forma que lo que escribimos en un lado de la tubera va a parar al otro. En ingls: pipe.
$ ls /usr/bin | more
La salida del comando ls /usr/bin va a parar a la entrada del comando more. Las tuberas permiten combinar la funcionalidad de distintos comandos. Para ello la mayor parte de los programas permiten acceder a sus funcionalidades desde la linea de comandos.
Desde el shell podemos, a parte de crear procesos, manipular a los hijos creados por ese shell. Control de procesos del shell:
CRTL + c finaliza el proceso comando & permite ejecutar un comando en segundo plano Ejemplo: $ ls & bin/ doc/ [1] 23704 [1] + Done CTRL + z
mail/ src/
tmp/ ls -F
parar un proceso en primer plano el shell toma el control y 'duerme' al proceso que estaba en ejecucin Ejemplo: $ ls /bin/ | more CTRL + z [1] + Done Stopped jobs muestra informacin sobre los procesos parados dependientes de este shell Ejemplo: $ jobs [1] + Done Stopped fg continua un proceso parado, en primer plano. Si existen varios procesos parados, podemos ponerle como argumento el ndice que el comando jobs nos mostr. bg continua un proceso parado, en segundo plano. Si existen varios procesos parados, podemos ponerle como argumento el ndice que el comando jobs nos mostr.
ls -F /bin/ | more
ls -F /bin/ | more
3. Comandos UNIX
Hay ms de 300 comandos UNIX distintos. Vamos a estudiar por encima las caractersticas de unos cuantos, los suficientes como para poder hacer pequeos programas. Aunque los nombres de los comandos siguen una lgica, muchas veces esta se ha perdido con el tiempo. En consecuencia tenemos muchos comandos que no sabemos lo que hacen y, por lo tanto, no los utilizamos. No hay que saber como funcionan todos los comandos, pero s es interesante conocerlos y ms o menos saber que hacen. Para un uso ms en profundidad consultaremos la pgina del manual.
ls muestra el contenido de un directorio echo hace eco en pantalla Ejemplo: $ echo hola mundo! cat muestra el contenido de un fichero more muestra el contenido de un fichero haciendo pausas entre pantallas si el fichero es largo
clear borra la pantalla cp copia ficheros y directorios Ejemplo: $ cp fichero_original fichero_copia mv mueve ficheros Ejemplo: $ mv fichero fichero2 rm borra ficheros Ejemplo: $ rm fichero ln enlazar (referenciar) ficheros Ejemplo de enlace "duro" (hardlink): $ ln fichero enlace Ejemplo de enlace "suave" (softlink): $ ln -s fichero enlace_simblico cd cambia de directorio de trabajo si no se indica directorio, nos traslada a $HOME Ejemplo: $ cd directorio pwd muestra el directorio de trabajo actual mkdir crea directorios Ejemplo: $ mkdir directorio rmdir borra directorios (vacos) Ejemplo: $ rmdir directorio env muestra las variables de entorno del programa head
muestra las n primeras lineas de un fichero (10 por defecto) Ejemplo: $ head fichero tail muestra las n ltimas lineas de un fichero (10 por defecto) Ejemplo: $ tail fichero grep busca ocurrencias de una cadena en un fichero Ejemplo: $ grep cadena fichero ps muestra los procesos en el sistema kill Enva una seal a un proceso indicando su PID (Process IDentifier, o nmero nico que identifica a cada proceso) Ejemplo: $ kill 1002 export Exporta una variable al entorno del programa Ejemplo: $ export VARIABLE=valor read Lee una linea de la entrada estndar y la almacena en una variable Ejemplo: $ read linea $ Delante de una variable permite acceder a su contenido Ejemplo: $ echo $SHELL ; Separa dos comandos en una misma linea Ejemplo: $ read linea ; echo se ha ledo: $linea file indica de qu tipo es un fichero cal muestra el calendario del mes actual
wc cuenta lineas, palabras o bytes en ficheros Ejemplo: $ echo hola que tal | wc date muestra hora y fecha actuales Ejemplo: $ date Ejemplo de fecha en formato yyyy-mm-dd: $ date "+%Y-%m-%d" passwd cambia la contrasea de un usuario chmod cambia los permisos de un fichero chown cambia el propietario de un fichero chgrp cambia el grupo propietario de un fichero reset restaura la terminal de texto whereis indica donde se puede encontrar un fuente, binario o manual Ejemplo: $ whereis ls which indica donde est un comando Ejemplo: $ which ls locate busca ficheros find bsqueda avanzada de ficheros who quin tiene sesin abierta en la mquina tac concatena ficheros y los muestra a la inversa touch actualiza la fecha y hora de un fichero, si no existe lo crea Ejemplo: $ touch fichero_inexistente
less una versin ms elaborada de more que permite desplazarnos por el texto, hacer bsquedas, etc. df muestra el espacio libre y ocupados de los discos du calcula el espacio de disco usado mail programa simple para enviar y leer correo tar empaquetar ficheros Ejemplo empaquetar: $ tar cvf fichero.tar directorio Ejemplo desempaquetar: $ tar xvf fichero.tar gzip comprimir un fichero gunzip descomprimir un fichero comprimido con gzip zcat muestra el contenido de un fichero comprimido con gzip ldd muestra las libreras que usa un programa halt apaga la mquina reboot reinicia la mquina shutdown apaga o reinicia la mquina true cierto, o uno false falso, o cero exit termina la sesin y muestra el login del sistema logout termina la sesin y muestra el login del sistema seq genera una secuencia de nmeros Ejemplo: $ seq 1 10
cut elimina partes de ficheros Ejemplo: $ echo hola que tal | cut -d " " -f 2 awk escner de patrones y lenguaje de programacin para procesar textos Ejemplo: $ echo hola que tal | awk '{ print $1 "!", tr elimina o traduce caracteres Ejemplo: $ echo hola que tal | tr a A sed realiza transformaciones en flujos de bytes Ejemplo: $ echo hola que tal | sed 's/a/A/g' (substituye las 'a' por 'A' en todo el flujo) fmt da formato a cada prrafo de un fichero sort ordena ficheros de texto sleep detiene el proceso durante n segundos Ejemplo: $ sleep 5 ; echo Han pasado 5 segundos uniq lee de stdin y compara lineas adyacentes escribiendo las lineas nicas a stdout $2, $3 "?" }'
4. Programacin shell
Ahora que sabemos manejarnos con el shell y conocemos unos pocos comandos, vamos a comenzar a hacer pequeos programas que interpretar el shell. En esta parte necesitaremos un editor de texto plano, como pueden ser: vi, emacs, joe, mcedit, nano, kwrite, gedit, etc. Cualquiera de ellos vale, siempre que guardemos el texto como text/plain.
Intentamos ejecutarlo con ./script.sh y no funciona. Esto es porque la extensin sh no es lo que hace que sea ejecutable. Para que se pueda ejecutar tenemos que darle permisos de ejecucin:
$ chmod +x script.sh
Un comentario, desde la aparicin de # hasta el final de esa linea, donde se indica al shell con la secuencia #!/bin/sh que /bin/sh es el programa que se debe usar para ejecutar este fichero. Un comando que muestra un texto en stdin. Es la primera linea "ejecutable", ya que los comentarios son ignorados por el intrprete.
4.2. Variables
Una variable es un contenedor. Consta de un identificador que la distingue de otra (su nombre) y de un contenido. La relacin entre variable y contenido es de equivalencia. Por lo general las variables en shell no tienen tipos asociados y se definen de la siguiente forma:
identificador = contenido Ejemplos: # i vale 1 i=1 # I vale echo I=echo # msg vale Hola mundo! msg="Hola mundo!"
Cuidado: si dejamos espacios entre el = y el identificador o el valor el shell creer que son comandos a ejecutar y no la asignacin de una variable. Para acceder al contenido de una variable empleamos $ delante de su identificador:
$identificador Ejemplos: $ i=1 ; echo $i $ msg="Mola mundo!" ; echo $msg $ fu=echo; $fu goo!
Cuando empleamos $identificador el shell busca el valor almacenado en la variable asociada a ese identificador y lo utiliza para reemplazar esa ocurrencia de $identificador.
Ejercicio 1: realizar un script que dado un directorio, cree un archivo tar comprimido con gzip y con nombre igual a la fecha en formato yyyy-mm-dd seguido del nombre del directorio acabado en .tar.gz. Ejemplo: aplicado sobre tmp obtendramos -> 2004-04-03tmp.tar.gz.
Ejercicio 2: realizar un script que dado un nmero 'n' muestre los diez primeros elementos de su tabla de multiplicar, mostrando el resultado en la forma: i x n = resultado.
4.6. Condicionales
Existe un comando para evaluar condiciones, y que nos permitir que nuestros programas "tomen decisiones":
test expresion [ expresion ]
Este comando evalua expresion, y si evalua a cierto, devuelve cero (true), o en otro caso 1 (false). Si no hay expresin, test siempre devuelve falso. Este comportamiento puede ser algo confuso, ya en lgica los valores cierto y falso suelen ser al contrario. test soporta gran cantidad de operadores, algunos son:
-d fichero cierto -e fichero cierto -f fichero cierto -r fichero cierto -s fichero cierto -w fichero cierto -x fichero
si fichero existe y es un directorio si fichero existe, independientemente del tipo que sea si fichero existe y es un fichero normal si fichero existe y se puede leer si fichero existe y tiene tamao mayor que cero si fichero existe y es se puede escribir sobre l
cierto si fichero existe y es ejecutable n1 -eq n2 cierto n1 -ne n2 cierto n1 -gt n2 cierto n1 -ge n2 cierto que n2 n1 -lt n2 cierto n1 -le n2 cierto que n2 s1 = s2 cierto s1 != s2 cierto s1 < s2 cierto s1 > s2 cierto -n cadena cierto
si los enteros n1 y n2 son iguales si los enteros n1 y n2 no son iguales si el enteros n1 es mayor que n2 si los enteros n1 y n2 son iguales o n1 es mayor
si las cadenas de texto s1 y s2 son idnticas si las cadenas de texto s1 y s2 no son idnticas si la cadena de texto s1 es menor que s2 si la cadena de texto s1 es mayor que s2 si la longitud de la cadena de texto es distinta de cero
expresion es falsa (negacin) expresion2 expresion1 y expresion2 son ciertas expresion2 expresion1 o expresion2 son ciertas
Adems existen los operadores lgicos && (AND, multiplicacin lgica) y || (OR, suma lgica), que se puede aplicar al valor de salida de los programas:
$ $ $ $ $ $ $ $ true && true ; echo $? true && false ; echo $? false && true ; echo $? false && false ; echo $? true || true ; echo $? true || false ; echo $? false || true ; echo $? false || false ; echo $?
El sistema de evaluacin del shell es perezoso y va de izquierda a derecha. Si se encuentra la suma lgica true || ALGO, ALGO no se evaluar porque se asume que cierto o falso o cierto o cierto siempre es cierto (toma ya).
4.6.1. if ... then ... [ else ... ] Esta es la principal estructura que nos permitir ejecutar un bloque de cdigo, o (alternativamente) otro, dependiendo de como se evalue una condicin.
if CONDICION; then bloque de comandos
En el primer caso el bloque de comandos se ejecutar solo si la condicin es evaluada a cierto. En el segundo caso el bloque b1 se ejecutar si la condicin es evaluada a cierto, y sino se ejecutar el bloque b2. La condicin puede ser, por ejemplo, una llamada al comando test o una operacin lgica entre los valores de salida de diferentes comandos.
read linea # comparamos cadenas de texto, as que usamos comillas if [ "$linea" = "secreto" ]; then echo bingo! fi if ! $(ping -c 1 192.168.0.100 > /dev/null); then echo La mquina 192.168.0.100 no responde else echo La mquina 192.168.0.100 est ah! fi
Ejercicio 3: realizar un script que, dado un nmero, indique si es o no divisible entre 101. Si no se proporciona un nmero debe mostrar como usar el programa.
4.7. Bucles
El shell aporta mecanismos para realizar tareas repetitivas mediante el empleo de estructuras que permiten repetir un bloque de comandos.
4.7.1. for ... in ... Esta estructura permite repetir un bloque de comandos asignando valores de una serie a una variable en cada iteracin.
for VARIABLE in SERIE; do bloque de comandos done
En cada iteracin la variable VARIABLE toma un valor de SERIE, que en caso de no contener elementos har que no se ejecute nada y se devuelva un valor 0. En caso de que se ejecuten comandos, el resultado devuelto tras el bucle es el del ltimo comando ejecutado. Ejemplos de bucle:
# equivalente a seq 1 5 for i in 1 2 3 4 5; do echo $i done
# lo mismo pero con palabras for palabra in uno dos tres cuatro cinco; do echo $palabra done
Ejercicio 4: realizar un script que dado un nmero 'n' muestre los diez primeros elementos de su tabla de multiplicar, mostrando el resultado en la forma: i x n = resultado. Emplear un bucle y seq (si est disponible). Si no se proporciona un nmero, mostrar como se usa el programa. Ejercicio 5: realizar un script que dado una lista de directorios, cree un archivo tar comprimido con gzip con nombre igual a la fecha en formato yyyy-mm-dd.tar.gz. Adems se generar un fichero yyyy-mm-dd.lst con los nombres de los directorios contenidos en el archivo tar, UNO POR LINEA usando un bucle. Si el fichero lst existe, mostrar un error y terminar el programa. Si alguno de los elementos no es un directorio, mostrar un error y finalizar el programa.
4.7.2. Rompiendo un bucle: break En cualquier momento un bucle puede ser interrumpido mediante el uso de break, de forma que tras ser ejecutado ese comando el control pasa al siguiente comando despus del done. Ejemplo de uso de break:
for elemento in *; do echo Primer elemento $elemento break echo Esto nunca se llega a ejecutar done echo Seguimos con el programa
4.7.3. while ... Se trata de otra estructura de bucle que permite ejecutar un bloque de comandos mientras se evalue una condicin a cierto:
while CONDICION; do bloque de comandos done
Cada iteracin se evalua la condicin y en el momento que no sea cierta, el bucle termina. Ejemplos de bucles:
# equivalente a seq 1 5 i=1 while [ $i -lt 6 ]; do echo $i i=$(($i+1)) done # lee de stdin hasta que se introduzca 'quit'
Ejercicio 6: realizar un script que permita adivinar al usuario cual es su PID. El script pide un nmero al usuario y cada vez que lo haga debe indicar al usuario si el PID es mayor o menor que el nmero introducido. Cuando se adivina el valor, se deben mostrar los intentos empleados.
A. Ejercicios resueltos
Ejercicio 1
#!/bin/sh tar cvfz $(date "+%Y-%m-%d")$1.tar.gz $1
Ejercicio 2
#!/bin/sh echo echo echo echo echo echo echo echo echo echo 1 x $1 = $((1*$1)) 2 x $1 = $((2*$1)) 3 x $1 = $((3*$1)) 4 x $1 = $((4*$1)) 5 x $1 = $((5*$1)) 6 x $1 = $((6*$1)) 7 x $1 = $((7*$1)) 8 x $1 = $((8*$1)) 9 x $1 = $((9*$1)) 10 x $1 = $((10*$1))
Ejercicio 3
#!/bin/sh if [ $# -ne 1 ]; then echo Uso: $0 numero exit 1 fi if [ $(($1%101)) -eq 0 ]; then echo $1 es divisible entre 101 else echo $1 no es divisible entre 101 fi
Ejercicio 4
#!/bin/sh for i in $(seq 1 10); do echo $i x $1 = $(($i*$1)) done
Ejercicio 5
#!/bin/sh if [ $# -eq 0 ]; then echo Uso: $0 directorios exit 1 fi FECHA=$(date "+%Y-%m-%d") if [ -e $FECHA.lst ]; then echo Error: El fichero lst ya existe. exit 1 fi for directorio in $*; do if ! [ -d $directorio ]; then echo Error: $directorio no es un directorio exit 1 fi done # podra ser: echo $* | tr " " "\n" > $FECHA.lst # pero no se usara el bucle ;) touch $FECHA.lst for directorio in $*; do echo $directorio >> $FECHA.lst done tar cfz $FECHA.tar.gz $*
Ejercicio 6
#!/bin/sh PID=$$ INTENTOS=1 echo -n "Cual es mi PID? " read linea while [ $linea -ne $PID ]; do if [ $linea -gt $PID ]; then echo Mi PID es menor que $linea else echo Mi PID es mayor que $linea fi echo -n "Cual es mi PID? " read linea INTENTOS=$(($INTENTOS+1)) done echo Acertaste! Has empleado $INTENTOS intentos
El CD que se entrega contiene la distribucin de Linux llamada Knoppix. Esta distribucin se caracteriza por ser ejecutada desde el propio CD-ROM, sin alterar ningn dato del disco duro. Para arrancar el sistema com la distribucin Knoppix, encenderemos el ordenador, y durante la secuencia de inicio veremos un mensaje que nos indica qu tecla o combinacin de teclas debemos pulsar para acceder a la configuracin de la BIOS (Basic Input/Output) del sistema. Normalmente suele ser pulsando la tecla "Supr", "F2" o "Esc". Una vez dentro de la BIOS, buscaremos un men llamado "Boot", "Bios Features" o "Boot Sequence". sto cambia entre los distintos fabricantes de BIOS, e incluso entre distintas versiones de un mismo fabricante. Lo ideal ser buscar una opcin que nos permita modificar la secuencia de arranque. Posiblemente tengas la siguiente configuracin: "A,C,CDROM". Esto significa: primero intentar arrancar desde la unidad "A:" (el disquete), en caso de fallo intentar con la unidad "C:" (el primer disco duro), y por ltimo el CD-ROM. Pues bien, para poder arrancar con el CD de Knoppix debemos configurar esta opcin para que la unidad CDROM sea probada ANTES que la unidad C. Cualquier combinacin servir: CDROM,A,C ,o CDROM,C,A , o CDROM,SCSI,A, son algunos ejemplos. Anota en un papel la configuracin original para dejarla conforme estaba cuando hayas terminado. Una vez configurada la secuencia de arranque, elegimos la opcin "Save Changes and Exit". Antes de confirmar la salida, abrimos la bandeja del CD, insertamos el CDROM de Knoppix, y cerramos la bandeja. Confirmamos en la BIOS que queremos guardar los cambios y seguidamente el ordenador reiniciar. Antes de ejecutar la distribucin Knoppix, se nos presenta un "prompt" en el que pone "boot:". En ese "prompt" podemos escribir una serie de parmetros que configurarn de inicio la distribucin Knoppix. Pulsando F2 veremos la ayuda, y los distintos parmetros que podemos poner. Desde ah podemos cambiar el lenguaje del teclado, o el entorno grfico, e incluso desactivar el hardware que no vayamos a usar. Recuerda: Knoppix se ejecuta directamente desde el CDROM, as que no tengas miedo, ningn dato del disco duro del ordenador se borrar si tu no quieres.
C. Documentacin adicional
Algunos enlaces interesantes sobre programacin shell:
z
Advanced Bash-Scripting Guide: http://www.tldp.org/LDP/abs/html/ Korn Shell (ksh) Programming: http://www.bolthole.com/solaris/ksh.html BASH Programming - Introduction HOW-TO: http://www.tldp.org/HOWTO/Bash-Prog-IntroHOWTO.html Bourne Shell Programming: http://steve-parker.org/sh/sh.shtml Pgina de la asociacin, Kleenux.org: http://www.kleenux.org/