Pieni bash haaste liittyen covid-kuolemiin

Anonyymi

Viikonloppu tulossa, niin kaikilla joutavilla on aikaa.

Covid-kuolemat löytyvät csv-muodossa githubin osoitteesta:
https://raw.githubusercontent.com/CSSEGISandData/COVID-19/master/csse_covid_19_data/csse_covid_19_time_series/time_series_covid19_deaths_global.csv

Se on tällä hetkellä noin 600 kilotavua pitkä. Ensimmäisellä rivillä on viidennestä sarakkeesta alkaen päivämäärät (ensimmäinen 22. tammikuuta 2020).

Riveillä on sitten maatiedot ja päivämäärien kohdalla ko. päivän kohdalle rekisteröidyt kuolemat pandemian alusta alkaen kyseisessä maassa.

Tehtäisiin bash-skripti, joka palauttaa halutun maan kohdalta n-määrän lukuarvoja annetusta päivämäärästä taaksepäin. Jos päivämäärää ei anneta, niin käytetään kuluvaa päivää. Jos määrää ei anneta, haetaan viimeinen.

Syntaksi olisi:
kuolemat.sh Finland 7 10/1/21

Joka palauttaisi 7 päivän arvot päivästä 1.10.2021 taakse päin. Voi käyttää siis tuota päivämäärämuotoilua mikä on csv-tiedostossakin, mutta plussapisteitä saa, jos voi käyttää suomalaista muotoa.

Tulosteeksi päivämäärä ja lukuarvo per rivi:
9/25/21 1066
9/26/21 1069
9/27/21 1069
9/28/21 1072
9/29/21 1072
9/30/21 1079
10/1/21 1078

Plussaa saa "cachettamisesta", eli ettei csv-taulukkoa käydä kuin kerran ja se tallennetaan paikalliselle levylle. Haettaisiin uudelleen vasta kuin vanha on poistettu. Etenkin testausvaiheessa tuolla saadaan vähennettyä turhaa palvelimen kuormitusta.

Taulukon saa haettua esimerkiksi wget-komonnolla.

18

<50

    Vastaukset

    Anonyymi (Kirjaudu / Rekisteröidy)
    5000
    • Anonyymi

      #! /usr/bin/bash
      timeline=`cat time_series_covid19_deaths_global.csv | grep Prov`; echo $timeline | tr ',' '\n' > f2; DATA=`cat time_series_covid19_deaths_global.csv | grep $1`; echo $DATA | tr ',' '\n' >f1; paste f1 f2 | grep $3 -B $2
      Kelpaako tämä?

      • Anonyymi

        Näppärän yksinkertainen toteutus, antaa tosin yhden päivän liikaa. Paste-komento on itselleni uusi tuttavuus.

        Itse aloin virittelemään vähän monimutkaisempaa, jossa saisi nuo päivämäärät samalla Suomi-muotoon.


      • Anonyymi
        Anonyymi kirjoitti:

        Näppärän yksinkertainen toteutus, antaa tosin yhden päivän liikaa. Paste-komento on itselleni uusi tuttavuus.

        Itse aloin virittelemään vähän monimutkaisempaa, jossa saisi nuo päivämäärät samalla Suomi-muotoon.

        No, joku -B $(expr $2 - 1) voisi toimia. Onnea yritykselle!


    • Anonyymi

      Kannattaisi silti mennä rokotettavaksi ettei kuormittaisi sairaalalaitosta.
      Suurin osa sairaaloissa olevista on nyt rokottamattomia.

      • Anonyymi

        Ei pidä ottaa mitään elimistöön kuulumattomia myrkkyjä itseensä, ellei ole sitten hautomassa itsemurhaa. Sairaalassa on jo pian 1/3 rokotettuja, ja määrä kasvaa koko ajan. Rokote on täysin turha, ja jopa vaarallinen terveille ihmisille. Vanhukset kuolevat muutenkin.


      • Anonyymi
        Anonyymi kirjoitti:

        Ei pidä ottaa mitään elimistöön kuulumattomia myrkkyjä itseensä, ellei ole sitten hautomassa itsemurhaa. Sairaalassa on jo pian 1/3 rokotettuja, ja määrä kasvaa koko ajan. Rokote on täysin turha, ja jopa vaarallinen terveille ihmisille. Vanhukset kuolevat muutenkin.

        Valheidentorjunta laajenee!
        "Kyseessä on Googlen toinen valeinformaatioon liittyvä toimenpide lyhyen ajan sisällä. Viime viikolla yhtiö kielsi rokotuksiin liittyvien valheiden levittämisen alustoillaan."


      • Anonyymi
        Anonyymi kirjoitti:

        Valheidentorjunta laajenee!
        "Kyseessä on Googlen toinen valeinformaatioon liittyvä toimenpide lyhyen ajan sisällä. Viime viikolla yhtiö kielsi rokotuksiin liittyvien valheiden levittämisen alustoillaan."

        No, sairastuin koronaan samana päivänä kuin sain toisen rokote-annoksen. Lääkäri oli sitä mieltä, että kaikki tämän tulevat vielä sairastamaan. Jos 2 rokoteannosta saanut niin suoja on 90% vakavalta tautimuunnokselta: Tarkoittaa, että sairaalaan joutuu 1 ihminen, joka on saanut kaksi rokotetta jokaista 9 rokottamatonta kohti. Nyt jos 70% vakavasti sairastuneista on rokottamattomia, voi tästä päätellä, että sairaus todellakin leviää rokotettujen keskuudessa - mutta ei aiheuta haittaa. Nopeus on lähes 3x verrattuna siihen, mitä rokottamattomat sairastuvat. Onko 2x rokotetut jotenkin varomattomampia nykyään ja käyvät esim. yleisötapahtumissa? Voit itse laskea tarkemmat lukuarvot, kaikki tieto on saatavilla! 2x rokottaminen ei pelasta kaikkia vaikealta tautimuodolta, vaan on 90% tehokas verrattuna rokottamattomiin!
        Täytyy kyllä sanoa, että oireet olivat silti sitä luokkaa, että en tohdi miettiä, miten olisi käynyt ilman rokotuksia..


      • Anonyymi
        Anonyymi kirjoitti:

        No, sairastuin koronaan samana päivänä kuin sain toisen rokote-annoksen. Lääkäri oli sitä mieltä, että kaikki tämän tulevat vielä sairastamaan. Jos 2 rokoteannosta saanut niin suoja on 90% vakavalta tautimuunnokselta: Tarkoittaa, että sairaalaan joutuu 1 ihminen, joka on saanut kaksi rokotetta jokaista 9 rokottamatonta kohti. Nyt jos 70% vakavasti sairastuneista on rokottamattomia, voi tästä päätellä, että sairaus todellakin leviää rokotettujen keskuudessa - mutta ei aiheuta haittaa. Nopeus on lähes 3x verrattuna siihen, mitä rokottamattomat sairastuvat. Onko 2x rokotetut jotenkin varomattomampia nykyään ja käyvät esim. yleisötapahtumissa? Voit itse laskea tarkemmat lukuarvot, kaikki tieto on saatavilla! 2x rokottaminen ei pelasta kaikkia vaikealta tautimuodolta, vaan on 90% tehokas verrattuna rokottamattomiin!
        Täytyy kyllä sanoa, että oireet olivat silti sitä luokkaa, että en tohdi miettiä, miten olisi käynyt ilman rokotuksia..

        Minä en ole sairastunut, en ennen rokotuksia enkä niiden jälkeen. Johtuu varmaan siitä etten hengaile rokottamattomien kanssa ( enkä kauheasti muutenkaan ).


    • Anonyymi

      Minkäkin kiinnostuin tekemään tuota, kesken on vielä, mutta rivejä on jo 165. Lisäsin kyvyn ottaa vastaan päiväyksen paikallisella aikaformaatilla ja suomenkielisenä nuo maat. Eli on ihan sama ruokitko ohjelmaan:

      Finland 7 1/22/21
      Sweden 7 1/22/21
      vai
      Suomi 7 22.1.21
      Ruotsi 7 22.1.21

      • Anonyymi

        Minulla on tarkoitus tehdä sellainen versio, joka tulostaa syötteen siinä muodossa, missä on annettu päivämääräkin. Eli joko jenkkityyliin, tai sitten tuolla suomalaisella tavalla. Lisäksi csv-data käydään hakemassa vain, jos tiedostoa ei ole, tai haettu päivämäärä on uudempi kuin tiedoston luomisen päivämäärä paikallisella koneella.

        Vähän aikaa menee vielä. Nyt olen lukenut päivämäärärivin ja maarivin ja splitannut ne taulukoksi (array). Seuraavaksi pitää hakea päivämääristä oikea indeksi, jonka perusteella sitten tulostukset.

        Teitkö muuten maiden nimen käännökset kiinteästi skriptiin, vai noudatko ne esimerkiksi jostain nettipalvelusta?


      • Anonyymi
        Anonyymi kirjoitti:

        Minulla on tarkoitus tehdä sellainen versio, joka tulostaa syötteen siinä muodossa, missä on annettu päivämääräkin. Eli joko jenkkityyliin, tai sitten tuolla suomalaisella tavalla. Lisäksi csv-data käydään hakemassa vain, jos tiedostoa ei ole, tai haettu päivämäärä on uudempi kuin tiedoston luomisen päivämäärä paikallisella koneella.

        Vähän aikaa menee vielä. Nyt olen lukenut päivämäärärivin ja maarivin ja splitannut ne taulukoksi (array). Seuraavaksi pitää hakea päivämääristä oikea indeksi, jonka perusteella sitten tulostukset.

        Teitkö muuten maiden nimen käännökset kiinteästi skriptiin, vai noudatko ne esimerkiksi jostain nettipalvelusta?

        Kääntäjällä tuotin emaat.txt ja smaat.txt. Ihan hyvä ajatus, noudattaa syötteen mukaista palautetta ohjelmassa, voi olla että matkin ideaa siltäkin osin. Hyvää harjoitusta tällainen, joutuu vähän useamman komennon kanssa painiskelemaan, tai no, ei tuossa noita hyvinkään montaa käskyä käytetä, paljolti rakentuu; "If then else fi" vertailulausekkeen varaan.


    • Anonyymi

      Ensimmäinen versio nyt jossain mallissa. Virheiden käsittely ei ole kovinkaan hyvällä tolalla.

      Koodi pastebinissä: https://pastebin.com/39rhYqtr

      $ ./kuolemat.sh Finland
      Ei hakuehdot täyttäviä tuloksia (päivä: 10/9/21, päiviä: 1)
      $ ./kuolemat.sh Finland 2
      10/8/21 1096
      $ ./kuolemat.sh Finland 3 8.10.2021
      6.10.2021 1089
      7.10.2021 1092
      8.10.2021 1096
      $ ./kuolemat.sh Sweden 3 1.1.2021
      30.12.2020 8727
      31.12.2020 8727
      1.1.2021 8727
      $ ./kuolemat.sh India 2 1/1/2021
      12/31/20 148994
      1/1/21 149474

      • Anonyymi

        Hienosti rakennettu, ja toimii.


      • Anonyymi
        Anonyymi kirjoitti:

        Hienosti rakennettu, ja toimii.

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.


      • Anonyymi
        Anonyymi kirjoitti:

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.

        Huomasitko että *.csv tiedostolle oli asetettu vanhentumisaika (expires time), minä sidoin tuon uuden noutamisen tuohon aikaan. Joten se haetaan aina kun ohjelmaa ajettaessa paikallinen aika ylittää vanhentumisajan.

        Aika näyttää asettavan lataustarpeen 10 minuutin välein.


      • Anonyymi
        Anonyymi kirjoitti:

        Huomasitko että *.csv tiedostolle oli asetettu vanhentumisaika (expires time), minä sidoin tuon uuden noutamisen tuohon aikaan. Joten se haetaan aina kun ohjelmaa ajettaessa paikallinen aika ylittää vanhentumisajan.

        Aika näyttää asettavan lataustarpeen 10 minuutin välein.

        Laitoin pastebin.com sivustolle, tuon oman version tuosta uuden tiedoston lataus kontrollista. Mutta jaan täällä vain pyynnöstä, koska ei huvita kuulla miten se ei toimi tai muutakaan aiheetonta sättimistä sen vuoksi.

        Lisäksi tein noiden maiden nimistä taulukot, (MAAT_SUO_TO_ENG_ARRAY.sh) ja (MAAT_ENG_TO_SUO_ARRAY.sh) jotka ovat osa ohjelmaa ulkoisena tiedoston. Koska täällä on puhuttu hyvin vähän tai ei ollenkaan siitä miten ulkoista tiedostoa käytetään Bash Shell ohjelmissa, tein myös MAAT_SUO_TO_ENG_ARRAY_HELP.sh tiedoston joka sisältää 15 erilaista tapaa, hakea tietoa noista ulkoisista taulukoista.


      • Anonyymi
        Anonyymi kirjoitti:

        Vähän rumaa on koodi, kun samalla tuli opeteltua bashia kantapään kautta.

        Yritin vältellä "C-tyyppisen" for-silmukan käyttöä kahden muuttujan määrittelemien arvojen välillä, vaan seq-komento tuntui heittävän rivinvaihdon luupin indeksien perään, joten ei toiminut indekseinä ne sellaisenaan.

        Ohjeistuksissa usein varoitetaan, ettei joku tapa toimi välttämättä kuin vasta tietyllä bash-versiolla, ja sen vuoksi yritän olla varovainen mitä tapaa käytän.

        Pythonillahan nämä kannattaisi tietenkin tehdä, mutta mukavaa vaihtelua kikkailla eri tavallakin.

        Juu, bash on syntaksiltaan välillä vähän kökköä - vedän tässä rajan siihen, minkä pystyy komentoriviltä suunnilleen kivuttomasti kirjoittamaan - eli kelpuutan skripteihin yleensä myös kaikki komentorivityökalut. Ei ollut Pythonia keksittykään vielä kun skriptaus-kieltä opettelin ja tästä syystä Tcl on edelleenkin suosikki - sitähän pystyy ajamaan komentorivitulkkinakin tclsh:n avulla. Eikä viitsi vaihtaakaan enää, kun toiminta on nykyään ongelmatonta ja vakiintunutta. Ei ole yhtä oikeaa, tosin.


    • Anonyymi

      Noihan on taaloja! Hehehheeeeee,,,eeee,,,,e....buaaaa....

    Ketjusta on poistettu 0 sääntöjenvastaista viestiä.

    Luetuimmat keskustelut

    1. Heikki Silvennoinen petti vaimoaan vuosien ajan

      Viiden lapsen isä Heikki kehuu kirjassaan kuinka paljon on pettänyt vaimoaan vuosien varrella.
      Kotimaiset julkkisjuorut
      154
      2696
    2. Miksi ihmeessä nainen seurustelit kanssani joskus

      Olin ruma silloin ja nykyisin vielä rumempi En voi kuin miettiä että miksi Olitko vain rikki edellisestä suhteesta ja ha
      Ikävä
      22
      2001
    3. Taasko se show alkaa

      Koo osottaa taas mieltään
      Ikävä
      24
      1996
    4. Persut nimittivät kummeli-hahmon valtiosihteeriksi!

      Persujen riveistä löytyi taas uusi törkyturpa valtiosihteeriksi! Jutun perusteella järjenjuoksu on kuin sketsihahmolla.
      Perussuomalaiset
      89
      1796
    5. Onko ministeri Juuso epäkelpo ministerin tehtäviensä hoitamiseen?

      Eikö hänellä ole kompetenttia hoitaa sosiaali- ja terveysministetin toimialalle kuuluvia ministerin tehtäviä?
      Perussuomalaiset
      67
      1540
    6. Sakarjan kirjan 6. luku

      Jolla korva on, se kuulkoon. Sain profetian 22.4.2023. Sen sisältö oli seuraava: Suomeen tulee nälänhätä niin, että se
      Profetiat
      19
      1313
    7. Avaa sydämesi mulle

      ❤ ❤❤ Tahdon pelkkää hyvää sulle Sillä ilmeisesti puhumalla Avoimesti välillämme Kaikki taas selviää Kerro kaikki, tahdo
      Ikävä
      37
      1202
    8. Söpö lutunen oot

      Kaipaan aina vaan, vaikkakin sitten yksipuolisesti.
      Ikävä
      10
      1201
    9. Elia tulee vielä

      Johannes Kastaja oli Elia, mutta Jeesus sanoi, että Elia tulee vielä. Malakian kirjan profetia Eliasta toteutuu kokonaan
      Helluntailaisuus
      36
      1188
    10. Nellietä Emmaa ja Amandaa stressaa

      Ukkii minnuu Emmaa ja Amandaa stressaa ihan sikana joten voidaanko me koko kolmikko hypätä ukin kainaloon ja syleilyyn k
      Isovanhempien jutut
      9
      1171
    Aihe