Unixboard.de - Shell-Skripte

dev/zeo in ZIP umleiten. wie geht das??

sirjayjay — Tue, 07 Sep 2010 10:27:42 GMT

hi @all

damit ihr nicht denkt, der Typ hat nen Vogel :) m�chte ich euch zun�chst erkl�ren wie ich auf diese Idee kam: Mein Onkel, totaler DAU und Windows-Nutzer, m�chte hin und wieder seine Festplatten verl��lich komplett l�schen. Das w�rde nur mit Linux gehen, und da das f�r ihn etwas ist was er sich nicht an tun will und da ich auch nicht immer seine Platten mit dev/zero �berschreiben will (hab ja auch besseres zu tun), so dachte ich mir in seiner Wohnung als wir zusammen sitzten, ich mache etwas mit DOS-Batch auf seiner Windowskiste so dass er in k�rzester Zeit mehrere GB Text-File mit Nullen erstellen kann. Aus dieser Ideen heraus m�chte ich aber etwas genialeres basteln: eine ZIP Datei mit einen oder mehreren Terabyte. Bei seinem Windows konnten wir mit WinZIP eine 100-GB gro�e Datei mit Nullen auf 137 MB(!) komprimieren, verschachtelt dann �brigens auf 1 MB(!! geile Kompression). So musste er nur mehrere dieser ZIPs gleichzeitig mit Ziel-angabe dekomprimieren lassen um seine 3 Wechselmedien (alle 1 Terybate gro�) dann in aller ruhe mit Nullen bef�llen zu k�nnen wenn ich nicht mehr bei ihm sitze.

Aber es muss doch noch besser gehen, oder?
Unter Windows gibt es zwar auch das LinuxTool DD mit dem sich mein Onkel aber nicht befassen will, und meine Kenntnisse in Shellskripting w�ren auch noch ein bisschen schwach. Deshalb w�rde ich gerne folgendes von euch wissen:

Kann man von /dev/zero die Ausgabe direkt in eine ZIP Datei leiten? zb 1 Terybyte Nullen in einer ZIP-Datei als einfache Datei (muss nicht mal eine Dateiendung haben). Vorteil w�re so k�nnte mein Onkel mit nur einem Dekomprimier-Befehl auf die ZIP einen Terybyte Nullen auf seine Festplatte laden :) und da er Windows Nutzer und Voll-DAU ist w�re das der einfachste Weg f�r ihn. Er macht viel mit Fotos und filmt bei allen m�glichen Ereignissen und ist auch beruflich in den Medien wirksam. Er braucht auch st�ndig neue oder gr��ere Platten und die alten und kleineren will er dann auf ebay verkaufen.

Theoretisch m�sste es ja f�r Linux-Experten m�glich sein einen solchen Shellbefehl oder Befehlskette zu posten. Ziel ist die Umleitung von x-beliebig viel Daten aus /dev/zero nach "herk�mlicher ZIP-Datei". und das am besten noch ohne Zwischenlagerung auf der Platte (was bei 1TB witzlos w�re), was ja �ber pipes gehen m�sste, aber daf�r hab ich zu wenig shell-kenntnisse.

Subject aus Mail in Variable schreiben

Ildefonso — Mon, 06 Sep 2010 14:07:08 GMT

M�chte aus einem Textfile alles was nach "Subject:" kommt bis zum n�chsten Zeilenvorschub in eine Shell-Script-Variable schreiben. Das Textfile sieht ungef�hr so aus:

Code:

From: 

Subject:Jupiter



Body:

Lieber Franz!



Gerne .......

Code:

grep Subject: mail.txt

Subject:Jupiter

Ich m�chte "Subject:" davor abschneiden und das Ergebnis einer Variable zuweisen. Wie mache ich das?

Zeilenweise Mittelwert aus 3 Dateien

2casey — Mon, 06 Sep 2010 07:24:20 GMT

Hallo liebe Unix-Community!

Als vollkommener Linux Neuling habe ich starke probleme ein wohl relativ einfaches Skript zu schreiben.

Ich m�chte gern die Messdaten aus 3 Dateien zusammenfassen um den Mittelwert zu bilden. Die Daten stehen jeweils in der 3 Spalte jeder Datei.
Problem: manchmal sind Werte nicht vorhanden (NaN) und m�ssen deswegen beim Mittelwert nicht ber�cktsichtigt werden.

Super w�re es wenn ich dies noch automatisieren k�nnte, da ich mehre male jeweils aus 3 Dateien mittelwerte bilden muss.

�ltestes Textfile aus einem Verzeichnis ausdrucken.

Ildefonso — Wed, 01 Sep 2010 15:29:42 GMT

ls *.txt -1t|tail -1
Dieser Befehl druckt mir das �lteste *.txt-File aus dem aktuellen Verzeichnis aus (1=Spalte, t=sortiert nach Zeit und tail -1 = den letzten Eintrag).

Ich m�chte jetzt dieses Textfile gleich ausdrucken.
cat ls *.txt -1t|tail -1
funktioniert nicht.

Wei� jemand, wie das geht?

FTP �ber Proxy?

FrankSchmitz — Tue, 31 Aug 2010 08:26:28 GMT

Hallo zusammen,

mit u.g. Beispiel-Code hole ich mir aus einem Unix-Skript Dateien per FTP. Gut so.

Jetzt habe ich allerdings das Problem, dass ich zum FTP-Server �ber den Proxy m�sste.
Die Preisfrage: Kann ich den Proxy-User/PW irgendwie mit definieren?

Lieben Dank schon mal
Franky

Code:

ftp -n <
        open HOSTNAME

        user LOGIN PASSWD

        cd /home

        lcd /home/ftp-down

        binary

        get FILENAME

        close

        bye

XLBL

tree mit Verzeichnissen, OHNE Inhalt, aber mit sonstigen Dateien

case_74 — Sun, 29 Aug 2010 20:44:20 GMT

Servus Forum,

ich m�chte den Inhalt meines Musikordners ausgeben (reichlich Ordner mit Unterordner aber auch viele .mp3 Dateien im Wurzelordner)

Ich will ein tree --dirsfirst OHNE den Inhalt der Ordner aber MIT den .mp3 im Wurzelordner, weiss aber nicht wie ...

Probiere schon einige Zeit mit ls, find --maxdepth und tree herum, aber die Verzeichnisausgabe scheint die Anzeige der sonstigen Dateien auszuschlie�en.

Man k�nnte jetzt scripten und durch Filter in einem zweiten und dritten Schritt evtl. zur L�sung gelangen, geht das auch eleganter ohne Script, also auf Befehlsebene ?

Plage mich gerade mit einem ziemlich seltsamen Linux einer QNAP Turbo-NAS 109 herum (wohl eine Standard Bash, imho).

Herzlichen Dank,
case

rsync via ssh per http-Aufruf starten

stefangl — Sat, 28 Aug 2010 09:22:44 GMT

Hallo,

ich habe einen lokalen Benutzer der via rsync und ssh Dateien und Ordner auf einen Remote-Server speichert. Der Benutzer authenfiziert sich via Keyfile aus dem eigene .ssh Verzeichnis auf dem Remote-Server - soweit funktioniert auch alles.

Aufgrund der hohen Anzahl an zu synchronisierenden Daten (jpg-Bilder) die in durchnummerierten Verzeichnissen liegen, wollte ich den rsync-Aufruf gerne via Webaufruf t�tigen.

Also in etwa so: http://www.domain.tld/syncDir.php?dir=1000

syncDir.php sieht in etwa so aus:
passthru("/usr/bin/rsync -avzq -e 'ssh -i $keyfile' $localDir remoteuser@remotehost:$remoteDir");

Das Problem ist jetzt, dass der Webserver das Skript mit dem www-Benutzer startet und nicht mit dem lokalen Benutzer. Wenn ich das PHP-Skript lokal ausf�hre, klappt alles wie gew�nscht. Hat jemand ne Idee, was ich machen k�nnte, damit das wie gew�nscht auch via Webaufruf funktioniert?

Gru�,
Stefan

sed - Zeichen finden

zst — Thu, 26 Aug 2010 12:27:40 GMT

Hallo,

ich m�chte in einer Datei alle Zeilen finden, in denen ein Zeichen vorkommt, das kein Buchstabe und keine Zahl und kein Blank ist.
Ist das Problem mit sed l�sbar?

Danke f�r Eure Hilfe!
Gru� zst

Shell Skript sch�tzen -> Quellcode unlesbar machen

-eraz- — Thu, 26 Aug 2010 09:02:45 GMT

Ich w�rde gerne aus einem Skript von mir ein Binary machen. Dazu hat mich Tante Google zu SHC gef�hrt:
http://www.linuxsecurity.com/content/view/117920/171/

Leider ist auf allen Seiten immer der selbe Downloadlink verlinkt, dieser Link funktioniert aber nicht mehr. :( Hat das Ding vielleicht einer von Euch oder kennt jemand ein vergleichbares Tool?

wget zur Geschwindigkeitsmessung

xhiBseN — Tue, 24 Aug 2010 11:35:42 GMT

Hallo,

ich versuche eine rudiment�re L�sung f�r eine Geschwindigkeitsmessung �ber eine busybox zu implementieren.

wget -O /dev/null $SPEEDTESTURL 2> dllog.tmp ; tail dllog.tmp | grep 'MB/s' | cut -d "(" -f 2 | cut -d ")" -f 1; rm -r dllog.tmp

Das funktioniert wunderbar. Allerdings ist auf der Box ein embedded NVRAM. Die Logdatei Geschichte w�rde die cycles nun argh negativ beeinflussen.

wget -O /dev/null $SPEEDTESTURL 2>&1 | tail -n 2 | grep 'MB/s' | cut -d "(" -f 2 | cut -d ")" -f 1

Funktioniert auch, allerdings fehlen mir jetzt ca 20% der Bandbreite. Ich habe mal auf die CPU Auslastung geguckt wenn ich die Sachen als Job starte, sehe den Grund hier aber nicht. Gibt es eine M�glichkeit mit tail den Download nicht auszubremsen? :o

W�re f�r jede Idee dankbar!

//edit: PS: ich wei� dass ich nur eine abgespeckte wget Version habe, ist aber nicht mein prim�res Problem! :)

Gru�

xhiBseN

script per Cronjob ausf�hren

bigbee — Tue, 24 Aug 2010 08:20:54 GMT

Guten Tag,

ich habe das Problem, dass ein Batch Script von mir per Crontab ausgef�hrt nciht das macht was er soll.
Wenn ich den gleichen Script jedoch manuell ausf�hre funktioniert er prima.

Hier der Eintrag in der Crontab [/etc/crontab]:

Code:

0 3 * * * root /srv/www/htdocs/html/mandate/static/update

wenn ich mich im verzeichnis /etc/ befinde und dann

Code:

/srv/www/htdocs/html/mandate/static/update

eintippe funktioniert es.

Hier der Script selber:

Code:

#!/bin/bash

cd /srv/www/htdocs/html/mandate/static/

./static_blabla1

./static_blabla2

"blabla2" ist dabei der Script der nicht richtig ausgef�hrt wird. Hier dessen inhalt:

Code:

#!/bin/bash



rm -R ./abc/*

cd abc

wget -p -l inf -k -r  -nH -B http://domainname.com/mandate/abc/ --cut-dir=2 -E http://domainname.com/mandate/abc/

sed -i 's/ABQIAAAABDPEoQWZY4irqrQaZFVT4cYBrvdQavsZ2GWFSNrbll2xT3x8Jgek5SmfX7C2dachZ_xJneRA/ABQIAAAABDPEoQWZY4irqrQaZFVT4BTx8KUJwBySggmPXdHks03p64Wgzuh8fsnfz0lpfwTNW3A/g' ./startseite-kontakt/anfahrt.html

mv index.html index2.html

cd ..

mkdir ./abc/cache

mkdir ./abc/upload

mkdir ./abc/images

mkdir ./abc/js

cp -R /srv/www/htdocs/html/mandate/abc/js/* ./abc/js/

cp -R /srv/www/htdocs/html/mandate/abc/images/* ./abc/images/

cp -R /srv/www/htdocs/html/mandate/abc/cache/* ./abc/cache/

cp -R /srv/www/htdocs/html/mandate/abc/upload/* ./abc/upload/

cd abc

wput ./* ftp://beutzer:pw@domain2.de

cd ..

Der Script soll einfach aus einer dynamischen Seite die mittels eines CMS-Systems generiert wurde, eine statische Seite mit html Seiten machen und diese auf einen Anderen Server hochladen.
Per Crontab ausgef�hr, entsteht in einigen Seiten kaudawelsch, da steht dann anstatt "Adventsausstellung" pl�tzlich "Adventsausstelluhre". Dieser sed Befehl selber der die Google-Api austauscht funktioniert allerdings gut.

Vielleicht habt ihr ja eine Idee, wieso das nicht richtig klappt??

Gru� BigBee

find: nach Dateien suchen aber nur Ordner ausgeben

Bad_Rockk — Tue, 24 Aug 2010 06:56:35 GMT

Hallo zusammen,

habe momentan folgenden Code:

Code:

find . -name "*.sta"

dieser gibt mir alle .sta Dateien in und unterhalb des aktuellen Verzeichnisses an.
z.B.

Code:

/home/OrdnerA/DateiB.sta

/home/OrdnerB/DateiB.sta

/home/OrdnerC/DateiB.sta

Gibt es jetzt die M�glichkeit, sich nur die Pfade ohne die dazugeh�rige Datei anzeigen zu lassen? Also so:

Code:

/home/OrdnerA

/home/OrdnerB

/home/OrdnerC

Im Manual bin ich leider nicht f�ndig geworden und auch im Netz habe ich nichts in der Richtung gefunden. Wird wahrscheinlich wieder ein kleiner Kniff sein, den ich einfach nicht kenne. W�re spitze, falls mir da jemand weiterhelfen k�nnte.

Gru� Tim

edit:
habe es jetzt so gemacht, dass ich einfach alle Ordner der 2 Ebene anzeigen lasse. Da ich wei�, dass in allen Ordnern die gesuchte Datei ist. W�rde mich aber trotzdem interessieren, ob es auch wie oben beschrieben geht.

grep?

schlawiner — Sat, 21 Aug 2010 12:18:32 GMT

Hallo,

ich habe eine Variable $test1 die folgende ausgabe bringt

+set dedicated 2 +exec server.cfg +exec fastdl.cfg +set net_ip 213.89.12.5 +set net_port 28960 +set sv_maxclients 20 +set fs_basepath ./ +set fs_homepath ./.callofduty4 +set fs_game mods/promodlive204 +set sv_punkbuster 1 +g_password +map_rotate

wie filter ich nun da die 213.89.12.5 und mods/promodlive204 raus und setze die beiden in je eine variable.

Dachte mit grep aber komme auf keine l�sung da sich die ip (ausser die 84) und auch der mod (ausser mods/) �ndern kann.

cgi bash skripting

Adramelec — Tue, 17 Aug 2010 10:50:40 GMT

Hallo!

Ich habe eine Frage bez�glich CGI BASH Skripting.

Folgende Aufgabe es soll durch ein einfaches HTML Formular Dinge abgefragt werde, diese Dinge sollen dann in einen Bash Befehl (der auf das System direkt ausgef�hrt wird) verarbeitet werden.

ALso nehmen wir an .. das Formular besteht aus einem Feld, wo man eine Zahl von 1-3 eingeben soll.
Man gibt 2 ein und dr�ckt auf abschicken. Dann soll AUF dem System z.B. der Befehl "echo "2" > /etc/config_whatever_file" ausgef�hrt werden.

Wie mache ich das ? Funktioniert das �berhaupt so wie ich mir das vorstelle?

Danke schon mal im Vorraus!

Logs l�schen von einer Jumstation aus via ssh auf versch. Hosts

stella75 — Mon, 16 Aug 2010 12:25:47 GMT

Hallo Zusammen

Ich versuche gerade auf einer Jumstation einen Cronjob einzurichten, der dann auf die versch. Hosts zugreift und dort die logs l�scht die �lter sind als zB 21 Tage... da ich kein Cron/Shell experte bin, hoffe ich hier ein bisschen Hilfe zu erhalten.

Auf den Hosts selber ist Crontab & Logrotate ausgeschaltet.

Ich hab das mal so angefangen:

* * * * * cd /opt/app/home/user/logs ssh user@host find . *.log* -mtime +7 rm -f {}

irgendwo fehlen nat�rlich die Hochkommas etc... habe aber glaub ich schon alle Varianten probiert... kann mir hier jemand weiterhelfen?

Vielen Dank!