Script zum automatischen Download von Dateien (Perl/CGI)

[thread]18205[/thread]

Script zum automatischen Download von Dateien

Tags: perl5 CGI Ähnliche Threads

Leser: 18

Articles: hide open all | hide show old branches

+6 replies
PunkIT

2013-03-13 20:02

User since
2013-03-13
1 Artikel
BenutzerIn

Hi zusammen,

ich suche eine Möglichkeit aus Linux/SUSE über PERL Dateien zu denen
ich NUR den Download-Link habe herunter zu laden. Es handelt sich um
ca. 50-60 Files die jeden Monat neu erstellt werden.

FTP geht nicht!

Ich habe keine Idee wie ich es automatisieren kann.

Eigentlich könnte/kann ich in der Adress-Leiste des Firefox-Browsers
die Download-Adressen angeben. Dann wird der Download auch eingeleitet.
Aber nur für das eine File.

Wie könnte ich einen Download (ggf. über die Adress-Eingabe) starten,
dann auf das Ende des Downloads warten und dann den nächsten Download
starten?

Kann man so etwas automatisieren und wenn ja wie?

Vielen Dank für eure Hilfe.

Gruß

PunkIT
Last edited: 2013-03-13 21:39:18 +0100 (CET)
- Muffi
  
  2013-03-13 22:50
  
  User since
  2012-07-18
  1465 Artikel
  BenutzerIn
  
  Und was hat die Adressleiste mit Perl zu tun?
  1 + 1 = 10
- murphy
  
  2013-03-14 03:58
  
  User since
  2004-07-19
  1776 Artikel
  HausmeisterIn
  
  Schau Dir mal LWP::Simple oder WWW::Curl an.
  When C++ is your hammer, every problem looks like your thumb.
- GwenDragon
  
  2013-03-14 07:46
  
  User since
  2005-01-17
  14894 Artikel
  Admin1
  
  Schau dir mal die Beispiele von lwpcook an.
  die Drachin Gwen
  
  Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten
- +2 replies
- Linuxer
  
  2013-03-14 09:59
  User since
  2006-01-27
  3891 Artikel
  HausmeisterIn
  Geht's Dir nur um den reinen Download der Dateien? Wie werden die Download-Links bestimmt? Hast Du eine Liste von Adressen oder "errechnest" Du die Adressen?
  
  Ein einfaches Shell-Skript könnte das schon bewerkstelligen.
  
  Annahme: Die URLs liegen in einer Datei vor; pro Zeile eine URL
  Das Skript liest diese Datei zeilenweise ein und lädt die Datei
  von der URL und speichert sie lokal im aktuellen Verzeichnis ab
  
  Code (sh): (dl )
  
  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25
  
  #! /bin/bash # - dieses als Skript speichern und ausführbar machen # - Aufruf: ./skript.sh url_file.txt function Error { for MSG in "$@"; do echo "$MSG" >&2 done exit 255 } # keine Datei angegeben => Fehler mit Meldung [[ $# -eq 0 ]] && Error "No url file specified." # uebernehme angegebenen Dateinamen URL_FILE="$1" # lese zeilenweise aus Datei und lade einzeln runter while read URL; do wget -q -- "$URL" done < "$URL_FILE" exit 0
  
  meine Beiträge: I.d.R. alle Angaben ohne Gewähr und auf Linux abgestimmt!
  Die Sprache heisst Perl, nicht PERL. - Bitte Crossposts als solche kenntlich machen!
  - GwenDragon
    
    2013-03-17 09:11
    User since
    2005-01-17
    14894 Artikel
    Admin1
    
    Ich empfehle wget statt mit
    
    Code: (dl )
    
    wget -q -- "$URL"
    
    , mit Parameter -c (oder auch --continue) aufzurufen. Damit bei Abbruch de Verbindung der Download auch wiederaufgenommen wird.
    
    Code: (dl )
    
    wget -q -c -- "$URL"
    
    Last edited: 2013-03-17 09:14:57 +0100 (CET)
    die Drachin Gwen
    
    Meine Perl-Artikel · perldev – verschiedene Perl-Versionen unter Windows starten

View all threads created 2013-03-13 20:02.