Pieni bash haaste liittyen covid-kuolemiin

Anonyymi

Viikonloppu tulossa, niin kaikilla joutavilla on aikaa.

Covid-kuolemat löytyvät csv-muodossa githubin osoitteesta:
https://raw.githubusercontent.com/CSSEGISandData/COVID-19/master/csse_covid_19_data/csse_covid_19_time_series/time_series_covid19_deaths_global.csv

Se on tällä hetkellä noin 600 kilotavua pitkä. Ensimmäisellä rivillä on viidennestä sarakkeesta alkaen päivämäärät (ensimmäinen 22. tammikuuta 2020).

Riveillä on sitten maatiedot ja päivämäärien kohdalla ko. päivän kohdalle rekisteröidyt kuolemat pandemian alusta alkaen kyseisessä maassa.

Tehtäisiin bash-skripti, joka palauttaa halutun maan kohdalta n-määrän lukuarvoja annetusta päivämäärästä taaksepäin. Jos päivämäärää ei anneta, niin käytetään kuluvaa päivää. Jos määrää ei anneta, haetaan viimeinen.

Syntaksi olisi:
kuolemat.sh Finland 7 10/1/21

Joka palauttaisi 7 päivän arvot päivästä 1.10.2021 taakse päin. Voi käyttää siis tuota päivämäärämuotoilua mikä on csv-tiedostossakin, mutta plussapisteitä saa, jos voi käyttää suomalaista muotoa.

Tulosteeksi päivämäärä ja lukuarvo per rivi:
9/25/21 1066
9/26/21 1069
9/27/21 1069
9/28/21 1072
9/29/21 1072
9/30/21 1079
10/1/21 1078

Plussaa saa "cachettamisesta", eli ettei csv-taulukkoa käydä kuin kerran ja se tallennetaan paikalliselle levylle. Haettaisiin uudelleen vasta kuin vanha on poistettu. Etenkin testausvaiheessa tuolla saadaan vähennettyä turhaa palvelimen kuormitusta.

Taulukon saa haettua esimerkiksi wget-komonnolla.

18

208

    Vastaukset

    Anonyymi (Kirjaudu / Rekisteröidy)
    5000
    • Anonyymi

      #! /usr/bin/bash
      timeline=`cat time_series_covid19_deaths_global.csv | grep Prov`; echo $timeline | tr ',' '\n' > f2; DATA=`cat time_series_covid19_deaths_global.csv | grep $1`; echo $DATA | tr ',' '\n' >f1; paste f1 f2 | grep $3 -B $2
      Kelpaako tämä?

      • Anonyymi

        Näppärän yksinkertainen toteutus, antaa tosin yhden päivän liikaa. Paste-komento on itselleni uusi tuttavuus.

        Itse aloin virittelemään vähän monimutkaisempaa, jossa saisi nuo päivämäärät samalla Suomi-muotoon.


      • Anonyymi
        Anonyymi kirjoitti:

        Näppärän yksinkertainen toteutus, antaa tosin yhden päivän liikaa. Paste-komento on itselleni uusi tuttavuus.

        Itse aloin virittelemään vähän monimutkaisempaa, jossa saisi nuo päivämäärät samalla Suomi-muotoon.

        No, joku -B $(expr $2 - 1) voisi toimia. Onnea yritykselle!


    • Anonyymi

      Kannattaisi silti mennä rokotettavaksi ettei kuormittaisi sairaalalaitosta.
      Suurin osa sairaaloissa olevista on nyt rokottamattomia.

      • Anonyymi

        Ei pidä ottaa mitään elimistöön kuulumattomia myrkkyjä itseensä, ellei ole sitten hautomassa itsemurhaa. Sairaalassa on jo pian 1/3 rokotettuja, ja määrä kasvaa koko ajan. Rokote on täysin turha, ja jopa vaarallinen terveille ihmisille. Vanhukset kuolevat muutenkin.


      • Anonyymi
        Anonyymi kirjoitti:

        Ei pidä ottaa mitään elimistöön kuulumattomia myrkkyjä itseensä, ellei ole sitten hautomassa itsemurhaa. Sairaalassa on jo pian 1/3 rokotettuja, ja määrä kasvaa koko ajan. Rokote on täysin turha, ja jopa vaarallinen terveille ihmisille. Vanhukset kuolevat muutenkin.

        Valheidentorjunta laajenee!
        "Kyseessä on Googlen toinen valeinformaatioon liittyvä toimenpide lyhyen ajan sisällä. Viime viikolla yhtiö kielsi rokotuksiin liittyvien valheiden levittämisen alustoillaan."


      • Anonyymi
        Anonyymi kirjoitti:

        Valheidentorjunta laajenee!
        "Kyseessä on Googlen toinen valeinformaatioon liittyvä toimenpide lyhyen ajan sisällä. Viime viikolla yhtiö kielsi rokotuksiin liittyvien valheiden levittämisen alustoillaan."

        No, sairastuin koronaan samana päivänä kuin sain toisen rokote-annoksen. Lääkäri oli sitä mieltä, että kaikki tämän tulevat vielä sairastamaan. Jos 2 rokoteannosta saanut niin suoja on 90% vakavalta tautimuunnokselta: Tarkoittaa, että sairaalaan joutuu 1 ihminen, joka on saanut kaksi rokotetta jokaista 9 rokottamatonta kohti. Nyt jos 70% vakavasti sairastuneista on rokottamattomia, voi tästä päätellä, että sairaus todellakin leviää rokotettujen keskuudessa - mutta ei aiheuta haittaa. Nopeus on lähes 3x verrattuna siihen, mitä rokottamattomat sairastuvat. Onko 2x rokotetut jotenkin varomattomampia nykyään ja käyvät esim. yleisötapahtumissa? Voit itse laskea tarkemmat lukuarvot, kaikki tieto on saatavilla! 2x rokottaminen ei pelasta kaikkia vaikealta tautimuodolta, vaan on 90% tehokas verrattuna rokottamattomiin!
        Täytyy kyllä sanoa, että oireet olivat silti sitä luokkaa, että en tohdi miettiä, miten olisi käynyt ilman rokotuksia..


      • Anonyymi
        Anonyymi kirjoitti:

        No, sairastuin koronaan samana päivänä kuin sain toisen rokote-annoksen. Lääkäri oli sitä mieltä, että kaikki tämän tulevat vielä sairastamaan. Jos 2 rokoteannosta saanut niin suoja on 90% vakavalta tautimuunnokselta: Tarkoittaa, että sairaalaan joutuu 1 ihminen, joka on saanut kaksi rokotetta jokaista 9 rokottamatonta kohti. Nyt jos 70% vakavasti sairastuneista on rokottamattomia, voi tästä päätellä, että sairaus todellakin leviää rokotettujen keskuudessa - mutta ei aiheuta haittaa. Nopeus on lähes 3x verrattuna siihen, mitä rokottamattomat sairastuvat. Onko 2x rokotetut jotenkin varomattomampia nykyään ja käyvät esim. yleisötapahtumissa? Voit itse laskea tarkemmat lukuarvot, kaikki tieto on saatavilla! 2x rokottaminen ei pelasta kaikkia vaikealta tautimuodolta, vaan on 90% tehokas verrattuna rokottamattomiin!
        Täytyy kyllä sanoa, että oireet olivat silti sitä luokkaa, että en tohdi miettiä, miten olisi käynyt ilman rokotuksia..

        Minä en ole sairastunut, en ennen rokotuksia enkä niiden jälkeen. Johtuu varmaan siitä etten hengaile rokottamattomien kanssa ( enkä kauheasti muutenkaan ).


    • Anonyymi

      Minkäkin kiinnostuin tekemään tuota, kesken on vielä, mutta rivejä on jo 165. Lisäsin kyvyn ottaa vastaan päiväyksen paikallisella aikaformaatilla ja suomenkielisenä nuo maat. Eli on ihan sama ruokitko ohjelmaan:

      Finland 7 1/22/21
      Sweden 7 1/22/21
      vai
      Suomi 7 22.1.21
      Ruotsi 7 22.1.21

      • Anonyymi

        Minulla on tarkoitus tehdä sellainen versio, joka tulostaa syötteen siinä muodossa, missä on annettu päivämääräkin. Eli joko jenkkityyliin, tai sitten tuolla suomalaisella tavalla. Lisäksi csv-data käydään hakemassa vain, jos tiedostoa ei ole, tai haettu päivämäärä on uudempi kuin tiedoston luomisen päivämäärä paikallisella koneella.

        Vähän aikaa menee vielä. Nyt olen lukenut päivämäärärivin ja maarivin ja splitannut ne taulukoksi (array). Seuraavaksi pitää hakea päivämääristä oikea indeksi, jonka perusteella sitten tulostukset.

        Teitkö muuten maiden nimen käännökset kiinteästi skriptiin, vai noudatko ne esimerkiksi jostain nettipalvelusta?


      • Anonyymi
        Anonyymi kirjoitti:

        Minulla on tarkoitus tehdä sellainen versio, joka tulostaa syötteen siinä muodossa, missä on annettu päivämääräkin. Eli joko jenkkityyliin, tai sitten tuolla suomalaisella tavalla. Lisäksi csv-data käydään hakemassa vain, jos tiedostoa ei ole, tai haettu päivämäärä on uudempi kuin tiedoston luomisen päivämäärä paikallisella koneella.

        Vähän aikaa menee vielä. Nyt olen lukenut päivämäärärivin ja maarivin ja splitannut ne taulukoksi (array). Seuraavaksi pitää hakea päivämääristä oikea indeksi, jonka perusteella sitten tulostukset.

        Teitkö muuten maiden nimen käännökset kiinteästi skriptiin, vai noudatko ne esimerkiksi jostain nettipalvelusta?

        Kääntäjällä tuotin emaat.txt ja smaat.txt. Ihan hyvä ajatus, noudattaa syötteen mukaista palautetta ohjelmassa, voi olla että matkin ideaa siltäkin osin. Hyvää harjoitusta tällainen, joutuu vähän useamman komennon kanssa painiskelemaan, tai no, ei tuossa noita hyvinkään montaa käskyä käytetä, paljolti rakentuu; "If then else fi" vertailulausekkeen varaan.


    • Anonyymi

      Ensimmäinen versio nyt jossain mallissa. Virheiden käsittely ei ole kovinkaan hyvällä tolalla.

      Koodi pastebinissä: https://pastebin.com/39rhYqtr

      $ ./kuolemat.sh Finland
      Ei hakuehdot täyttäviä tuloksia (päivä: 10/9/21, päiviä: 1)
      $ ./kuolemat.sh Finland 2
      10/8/21 1096
      $ ./kuolemat.sh Finland 3 8.10.2021
      6.10.2021 1089
      7.10.2021 1092
      8.10.2021 1096
      $ ./kuolemat.sh Sweden 3 1.1.2021
      30.12.2020 8727
      31.12.2020 8727
      1.1.2021 8727
      $ ./kuolemat.sh India 2 1/1/2021
      12/31/20 148994
      1/1/21 149474

      • Anonyymi

        Hienosti rakennettu, ja toimii.


      • Anonyymi
        Anonyymi kirjoitti:

        Hienosti rakennettu, ja toimii.

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.


      • Anonyymi
        Anonyymi kirjoitti:

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.

        Huomasitko että *.csv tiedostolle oli asetettu vanhentumisaika (expires time), minä sidoin tuon uuden noutamisen tuohon aikaan. Joten se haetaan aina kun ohjelmaa ajettaessa paikallinen aika ylittää vanhentumisajan.

        Aika näyttää asettavan lataustarpeen 10 minuutin välein.


      • Anonyymi
        Anonyymi kirjoitti:

        Huomasitko että *.csv tiedostolle oli asetettu vanhentumisaika (expires time), minä sidoin tuon uuden noutamisen tuohon aikaan. Joten se haetaan aina kun ohjelmaa ajettaessa paikallinen aika ylittää vanhentumisajan.

        Aika näyttää asettavan lataustarpeen 10 minuutin välein.

        Laitoin pastebin.com sivustolle, tuon oman version tuosta uuden tiedoston lataus kontrollista. Mutta jaan täällä vain pyynnöstä, koska ei huvita kuulla miten se ei toimi tai muutakaan aiheetonta sättimistä sen vuoksi.

        Lisäksi tein noiden maiden nimistä taulukot, (MAAT_SUO_TO_ENG_ARRAY.sh) ja (MAAT_ENG_TO_SUO_ARRAY.sh) jotka ovat osa ohjelmaa ulkoisena tiedoston. Koska täällä on puhuttu hyvin vähän tai ei ollenkaan siitä miten ulkoista tiedostoa käytetään Bash Shell ohjelmissa, tein myös MAAT_SUO_TO_ENG_ARRAY_HELP.sh tiedoston joka sisältää 15 erilaista tapaa, hakea tietoa noista ulkoisista taulukoista.


      • Anonyymi
        Anonyymi kirjoitti:

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.

        Juu, bash on syntaksiltaan välillä vähän kökköä - vedän tässä rajan siihen, minkä pystyy komentoriviltä suunnilleen kivuttomasti kirjoittamaan - eli kelpuutan skripteihin yleensä myös kaikki komentorivityökalut. Ei ollut Pythonia keksittykään vielä kun skriptaus-kieltä opettelin ja tästä syystä Tcl on edelleenkin suosikki - sitähän pystyy ajamaan komentorivitulkkinakin tclsh:n avulla. Eikä viitsi vaihtaakaan enää, kun toiminta on nykyään ongelmatonta ja vakiintunutta. Ei ole yhtä oikeaa, tosin.


    • Anonyymi

      Noihan on taaloja! Hehehheeeeee,,,eeee,,,,e....buaaaa....

    Ketjusta on poistettu 0 sääntöjenvastaista viestiä.

    Luetuimmat keskustelut

    1. Onko sulla

      suoja työ paikka? 🤔🤷‍♂️
      Ikävä
      21
      3327
    2. Suomalainen perheenisä vaatii Suvivirren esittämisestä hyvityksiä

      Itse lapsena uskonnonopetuksesta vissiin traumoja saanut ihka suomalainen (!) perheenisä vaatii Espoon kaupungilta korva
      Maailman menoa
      540
      2692
    3. Vesikin maksaa, miksei hengitysilma?

      Jatkuvasti itketään ettei ole rahaa mihinkään, mutta tilastojen mukaan rahaa on enemmän kuin koskaan, joten miksei asial
      Maailman menoa
      53
      2260
    4. Satuolennoista tarinointi ei kuulu peruskoulun tehtäviin

      Opetustunteja on muutenkin käytössä vain rajallinen määrä. Eli nämä satuhommat koulun ulkopuolelle vapaaehtoisiin harras
      Maailman menoa
      211
      2234
    5. Joensuun kaupunki levittelee tonttitietoja Keskisuomalaiselle

      Sähköposteja ja tonttitietoja levitellään mm. Pasi Koivumaalle
      Joensuu
      13
      1709
    6. Mies profiloin sinut

      Etsit täysin hallittavaa mutta samalla poikkeuksellista ihmistä. Etsit jotain mitä et koskaan tule saamaan.
      Ikävä
      219
      1519
    7. Kiantama kartelli

      Onko alhaisempaa kuin toimia ensin kartellissa ja lopuksi koittaa pelastaa nahkasa vasikoimalla muut kun jää kiinni? Eip
      Suomussalmi
      52
      1471
    8. Nostetaanko nainen kissa pöydälle?

      Ja selvitetään nämä tunteet?
      Ikävä
      97
      1379
    9. Oletko nainen alkanut kammoamaan minua

      Sinua ei näy eikä kuulu, ja ilmeisesti kiertelet tilanteita. Oletko huomannut, että olet vieläkin ajatuksissani luvattom
      Ikävä
      62
      1211
    10. Saako 60 v vielä töitä? Arto Nyberg puhuu suoraan elämästä ilman töitä

      Arto Nyberg täyttää tänään 60 v. Onnea! Nyberg totuttiin näkemään suoran haastatteluohjelman kapteenina vuodesta toise
      Maailman menoa
      95
      1174
    Aihe