Linux pipe

Sekant mūsų kalbininkų pėdomis straipsnis galėjo vadintis "Vamzdžiai", bet tai palikime tautinės OS kūrėjams ;) Geriau iš karto griebti velnią už ragų, jei naudojate freeBSD, o jei naudojate Linux ... tiek to, užteks beletristikos :D Strapsnyje toliau bus minimas tik Linux, nes naudoju Debian, bet tai tinka ir daugeliui kitų POSIX sistemų.

Kiekviena linux'o programa (naudojama konsolėje) turėtų: priimti duomenis (STDIN - standard input), grąžinti duomenis (STDOUT - standard output), bei grąžinti klaidas, jei tokių buvo vykdant programą (STDERR - standard error). Duomenis kuriuos gražina viena programa galima "sumaitinti" kitai programai. Duomenys "sumaitinami" naudojant vamzdį ( | - pipe ).

cat access.log | awk '{print $1}' | sort | uniq -c | sort -n | tail -n 20

Šis pavyzdys padės išsiaiškinti kam naudojami pipe Linux komandinėje eilutėje:

cat access.log - nuskaitomas failas access.log ir jo turinys grąžinamas į ekraną.
| - Į ekraną mes grąžinti nenorime (tarkime, kad failas labai didelis), taigi rašome " | " simbolį ir duomenis duosime kitai komandai.
awk '{print $1}' - filtras, kuris iš kiekvienos eilutės grąžina tik pirmą žodį. Jei tai apache log'as, pirmas žodis bus lankytojo adresas.
| - Nufiltravus turime daug eilučių, jose tik po vieną žodį - lankytojo adresą.
sort - Surūšiuojame visus adresus.
| - Surūšiuotus adresus perduodame kitai komandai
uniq -c - kuri suskaičiuoja kiek yra vienodų adresų ir grąžina unikalius adresus, bei skaičių - kiek kartų jie pasikartojo
| sort -n | - dar kartą surūšiuojame, šį kartą naudojame raktą -n, kad filtras žinotų, kad rūšiuojami skaičiai (ir 10 turi eiti po 2) .
tail -n 20 - darbas baigtas, į ekraną grąžiname 20 paskutinių įrašu.

Atlikus šią ilga komandą iš access.log failo gauname 20 dažniausiai pasikartojančių adresų surūšiuotų didėjimo tvarka, bei nurodant pasikartojimų skaičių.

Jei duomenis norime nukreipti į failą, kad ir mūsų pavyzdyje - išsaugoti statistiką galima naudoti nukreipimo simbolius:

programa > failas - išvedami programos duomenis įrašomi į failą. Jei failo nebuvo - jis sukuriamas, jei failas buvo grąžinami duomenys įrašomi vietoje senų. (sena informacija dingsta)
programa >> failas - išvedami programos duomenys papildo failą.
programa < failas - programai pateikiamas failas, kaip duomenys. Nors nemažai programų naudoja failo pavadinimą kaip parametrą, ši operacija gali būti labai naudinga.

Keli pavyzdžiai pabaigai :

echo "Laikas:" > informacija.txt
date >> informacija.txt
df -h >> informacija.txt

Į failą informacija.txt bus įrašytas tekstas "Laikas:", programa date papildys failą konkrečiu laiku ir df -h įrašys į failą informaciją apie failų sistemos užimtumą.

mysql -u root -p duombaze < failas.sql

Taip galima patogiai importuoti failą (failas.sql) į duomenų bazę. Ši komanda veikia ir Windows sistemose, praverčia kada reikia importuoti didelius sql failus.

mysql -u root -p duombaze < failas.sql.gz | gzip

Jei failas yra suarchyvuotas, galime panaudoti ir pipe.