Keresés: - Shell script topik - Mobilarena Hozzászólások

Legfrissebb anyagok

Mobilarena témák

PROHARDVER! témák

IT café témák

GAMEPOD témák

LOGOUT témák

Keresés

Új hozzászólás Aktív témák

#2112 olivera88 veterán olivera88 #2111

Új Válasz 2016-02-06 20:35:20 #2112
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz olivera88 #2111 üzenetére

Ja megvan működik, az én hibám volt, a linkben is beírtam a tokent, közben meg nem kellett volna. Köszi szépen.
#2111 olivera88 veterán dabadab #2110

Új Válasz 2016-02-06 20:21:03 #2111
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz dabadab #2110 üzenetére

Értem. Köszi. De a letöltés most se akar jó lenni valamiért. Most is HTML fájl töltődik.
#!/bin/bash # access token TOKEN="__5yLVTdr-sGeHoPitnFc7TZ6MhBcJxuSsoZp6y0leVHU__" # file size min and max values - if the file's size falls outside of this range it is considered faulty MIN_SIZE="38797312" MAX_SIZE="45088768" # time range - how many hour's data a single file contains RANGE=12 function download_file() { # end time TO="$1" # start time - it is calculated a little oddly FROM=$((${TO}-${RANGE})) if [ $FROM -gt 0 ] ; then FROM=$(($FROM+1)) fi # add leading zeroes if needed FROM="$(printf "%02d" "${FROM}")" RANGE="$(printf "%02d" "${RANGE}")" # url of the data URL="http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=${__5yLVTdr-sGeHoPitnFc7TZ6MhBcJxuSsoZp6y0leVHU__}&model=ARPEGE&grid=0.1&package=SP1&time=${FROM}H${TO}H&referencetime=$(date +'%Y-%m-%d')T${RANGE}:00:00Z" # output file name OUT_FILE="ARPEGE_SP1_${TO}H.grib2" while true ; do # get the file wget "${URL}" -O "${OUT_FILE}" # check the filesize size=$(stat -c \%s "${OUT_FILE}" ) if [ $size -ge "${MIN_SIZE}" -a $size -le "${MAX_SIZE}" ] ; then # size is OK, leave loop break else # something went wrong, wait a little and retry sleep 5m fi done } for TO in 12 24 36 48 60 72 ; do download_file "${TO}" sleep 5m done
#2109 olivera88 veterán dabadab #2108

Új Válasz 2016-02-06 19:46:17 #2109
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz dabadab #2108 üzenetére

Nincs semmi gond a tokennel, mert publikus mindenki számára a letöltés. Úgyhogy az első sor törölhető akkor ugye? Meg amúgy se tudnának semmit se kezdeni a grib2 fájlokkal.
Ezt hogy érted hogy size változó értékét felül írom? Mivel? Amúgy nem így akartam megoldani, hanem úgy hogy szétbontom az összes fájl ellenőrzést, és berakom a letöltések után, nem mint most hogy a végén ellenőrzi az egészet csak.
Nem működik a letöltés. Csak egy HTML fájl töltődik le a gribek helyett. Meg ez hogy van beállítva? Hogy egyszerre töltse le az összes fájlt? Mert úgy nem lehet, vagyis lehet, de én fokozatosan akarom, mivel nem egyszerre frissülnek a szerveren a fájlok, hanem fokozatosan.
#2107 olivera88 veterán dabadab #2106

Új Válasz 2016-02-06 17:59:12 #2107
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz dabadab #2106 üzenetére

Közben megoldódott done , + exit helyett break. Done + exittel mintha nem működött volna úgy emlékszem.
De a több fájlos ellenőrzés még se működik.
Jók a méretek, és mégis újra kezdi a letöltést.
Ez lenne az.
#!/bin/sh wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=00H12H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_12H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=13H24H&referencetime=$(date +"%Y-%m-%d")T06:00:00Z" -O ARPEGE_SP1_24H.grib2 # új letöltés sleep 6m continue wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=25H36H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_36H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=37H48H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_48H.grib2 # új letöltés sleep 5m continue wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=49H60H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_60H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=61H72H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_72H.grib2 while true do size=$(stat -c \%s ARPEGE_SP1_12H.grib2 ) size=$(stat -c \%s ARPEGE_SP1_24H.grib2 ) size=$(stat -c \%s ARPEGE_SP1_36H.grib2 ) size=$(stat -c \%s ARPEGE_SP1_48H.grib2 ) size=$(stat -c \%s ARPEGE_SP1_60H.grib2 ) size=$(stat -c \%s ARPEGE_SP1_72H.grib2 ) if [ $size -lt 38797312-o $size -gt 45088768 ] then # hiba, varj 10 percet sleep 5m # probald ujra continue fi wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=00H12H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_12H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=13H24H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_24H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=25H36H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_36H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=37H48H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_48H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=49H60H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_60H.grib2 wget "http://dcpc-nwp.meteo.fr/services/PS_GetCache_DCPCPreviNum?token=__xxx__&model=ARPEGE&grid=0.1&package=SP1&time=61H72H&referencetime=$(date +"%Y-%m-%d")T12:00:00Z" -O ARPEGE_SP1_72H.grib2 exit 0 done

[ Módosította: dabadab ]
#2105 olivera88 veterán olivera88 #2104

Új Válasz 2016-02-06 14:35:04 #2105
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz olivera88 #2104 üzenetére

Ez megoldva.
Egymás után beraktam ugyanezt többi fájlok nevével. És jó.
De lenne egy másik dolog.
Ezt hogy kellene kijavítani h működjön?
#!/bin/sh
while true
do
size=$(stat -c \%s ARPEGE_SP1_12H.grib2)
size=$(stat -c \%s ARPEGE_SP1_24H.grib2)
if [ $size -lt 38797312 -o $size -gt 45088768 ]
then
# hiba, varj 5 percet
sleep 5m
# probald ujra
continue
fi
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_00_12.py
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_13_24.py
SZERVER='x'
FELHASZNALO='x'
JELSZO='x'
ftp -n -v $SZERVER << EOF
ascii
user $FELHASZNALO $JELSZO
prompt
cd ARPEGE
bin
send ARPEGEPCP06.png
send ARPEGEPCP12.png
send ARPEGEPCP18.png
send ARPEGEPCP24.png
EOF
while true
do
size=$(stat -c \%s ARPEGE_SP1_36H.grib2)
size=$(stat -c \%s ARPEGE_SP1_48H.grib2)
if [ $size -lt 38797312 -o $size -gt 45088768 ]
then
# hiba, varj 5 percet
sleep 5m
# probald ujra
continue
fi
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_25_36.py
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_37_48.py
SZERVER='x'
FELHASZNALO='x'
JELSZO='x'
ftp -n -v $SZERVER << EOF
ascii
user $FELHASZNALO $JELSZO
prompt
cd ARPEGE
bin
send ARPEGEPCP30.png
send ARPEGEPCP36.png
send ARPEGEPCP42.png
send ARPEGEPCP48.png
EOF
while true
do
size=$(stat -c \%s ARPEGE_SP1_60H.grib2)
size=$(stat -c \%s ARPEGE_SP1_72H.grib2)
if [ $size -lt 38797312 -o $size -gt 45088768 ]
then
# hiba, varj 5 percet
sleep 5m
# probald ujra
continue
fi
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_49_60.py
python /home/oliver/Magics_PCP_T_script/arpegepcpmslvhu_61_72.py
SZERVER='x'
FELHASZNALO='x'
JELSZO='x'
ftp -n -v $SZERVER << EOF
ascii
user $FELHASZNALO $JELSZO
prompt
cd ARPEGE
bin
send ARPEGEPCP54.png
send ARPEGEPCP60.png
send ARPEGEPCP66.png
send ARPEGEPCP72.png
exit
EOF
Ezt a hibaüzenetet kapom így.
/Run_model3.sh: 120: ./Run_model3.sh: Syntax error: end of file unexpected (expecting "done")
Ha kiszedem az EOF okat a feltöltés végéről akkor lefut a script de nem jó, mert invalid commandokat ir a többi python script futtatására.
#2104 olivera88 veterán

Új Válasz 2016-02-05 10:41:07 #2104
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

Jester01 írta nekem pár napja ezt a fájl ellenőrzést scriptet.
while true do size=$(stat -c39845888 \%s ARPEGE_SP1_72H.grib2) if [ $size -lt -o $size -gt 45088768 ] then # hiba, varj 5 percet sleep 5m # probald ujra continue fi #csinald meg amit kell ... # kész nem kell újra exit 0 done
Na és az lenne a kérdésem hogy a méret ellenőrzésnél meglehetne e adni több fájl nevet, és ha igen hogyan? Mert többet szeretnék letölteni és több fájlt kellene ellenőrizni.
#2103 olivera88 veterán olivera88 #2102

Új Válasz 2016-01-31 23:53:35 #2103
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz olivera88 #2102 üzenetére

Ja persze hogy nem lett jó , a systemd ütemezés bukott el. Le se töltötte a gribet..
#2102 olivera88 veterán

Új Válasz 2016-01-31 23:47:01 #2102
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

Na most melyik ami a legjobb? Jester első megoldása végül is? Most valamiért nem lett jó, nem írta felül a régi grib fájlt, és megcsinálta tegnapiból. A letöltésbe még nem tettem bele az ellenőrzést.
#2086 olivera88 veterán Jester01 #2084

Új Válasz 2016-01-31 12:06:49 #2086
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2084 üzenetére

Bele kell tenni a letöltésbe is ezt ellenőrzést, mert ha nem jó töltődik le akkor próbálja újra egy idő után a letöltést. Mert ha futtatáshoz teszem a letöltést, és nem jól töltődik le, akkor újra kell futtatni letöltést pár perc múlva, és akkor ellenőrzés nem lesz benne ugye? És ha akkor is rossz fájl akkor megcsinálja hibás fájlal.
#2085 olivera88 veterán Jester01 #2084

Új Válasz 2016-01-31 11:19:22 #2085
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2084 üzenetére

Közben rájöttem az éjjel. Köszi. A letöltés külön scriptbe van, de látom ebbe is bele lehet tenni mivel nem fut le a modell generálás addig még nem töltődik le a grib fájl.
#2083 olivera88 veterán Jester01 #2082

Új Válasz 2016-01-31 00:12:21 #2083
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2082 üzenetére

Akkor ez az egész scriptre érvényes lesz ugye? Nem csak a fájl ellenőrizésre?
#2081 olivera88 veterán Jester01 #2080

Új Válasz 2016-01-30 23:58:42 #2081
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2080 üzenetére

Működik egyelőre. Nagyon szépen köszönöm.
Azt még be lehetne tenni esetleg ha hibás fájl töltödik le akkor megpróbálja x perc múlva futattni? Vagy azt már bízzam inkább systemd re? Habár azt nem tudom h lehet beállítani normálisan, be lehet állítani a restartot, mondjuk 10 percenként, de az nem jó, mert akkor állandóan azt fogja csinálni h 10 percenként lefut.
#2079 olivera88 veterán Jester01 #2077

Új Válasz 2016-01-30 23:43:30 #2079
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2077 üzenetére

Nem jó.
stat: stat ”foo” sikertelen: Nincs ilyen fájl vagy könyvtár
./RunArpegepcp.sh: 4: [: -lt: unexpected operator
#2078 olivera88 veterán Jester01 #2077

Új Válasz 2016-01-30 22:49:19 #2078
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

válasz Jester01 #2077 üzenetére

Ez 40 tól 45 mb ig?
#2076 olivera88 veterán

Új Válasz 2016-01-30 20:53:52 #2076
Új hozzászólás
Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra
Privát üzenet küldése

olivera88

veterán

Ide küldtek a problémámmal a Linux haladóknak topicból. Remélem van rá valami jó megoldás. Ajánlották a hash ellenőrizést, de az nem jó mert nem egyforma a hash.
Erről lenne szó. [link]
Ez futtatás scriptje, a letöltéshez másik van.
#!/bin/sh
python /home/oliver/Magics-PCP,T_script/arpegepcpmslvhu_72.py
python /home/oliver/Magics-PCP,T_script/arpegepcpmslhu_72.py
python /home/oliver/Magics-PCP,T_script/arpegepcpmslsrb_72.py
SZERVER='név'
FELHASZNALO='felhasznalol'
JELSZO='jelszo'
ftp -n -v $SZERVER << EOF
ascii
user $FELHASZNALO $JELSZO
prompt
cd ARPEGE
bin
send ARPEGEPCP72.png
send ARPEGEPCPHU72.png
send ARPEGEPCPRS72.png
exit
EOF