Digikultuuri säilitamine

Failide jagamine

Pilv

Cloud, mis eesti keeles tähendab pilve, on internetiühendusel ligipääsetav server. Pilv kui selline, on majutatud data keskustesse üle maailma ja on hea lahendus näiteks firmadele, kes ei soovi ise omada kohapeal serverit füüsilisel kujul. Pilv on põhjuseks, miks me saame uuest seadmest logida sisse oma kasutajasse ja seal on kõik see olemas, mis oli ka teises seadmes. Näiteks võib tuua Instagrami, Facebooki ja Gmaili, kõigis neis on kogunenud info, mis salvestatakse pilve ja on ligipääsetav, kui sul on selleks õigused. Firmadele võib olla kasulik minna üle pilve süsteemile, kuna sellega saaks hoida kokku kulude pealt, nimelt ei pea siis hooldama oma enda serveri süsteemi, ning hõlpsustab ka firmasisest andmete liigutamist.

Kuidas Cloud(Pilv) töötab?

Pilvandmetöötlus on võimalik virtualiseerimis tehnoloogia tõttu, mis lubab luua virtuaalse masina, mis käitub nagu ta oleks oma riistvaraga arvuti. Kui rakendada virtuaalset masinat õigesti, on ta oma füüsilisest isikust täiesti eraldi ja ei pääse üksteise lokaalsetele failidele ligi.

Torrent

Torrentimine on faili jagamis viis kus, fail saadetakse inimeselt inimesele (peer-to-peer). failid ise on killustunud ja ei asu kõik ühes kohas, nimelt on nad jaotatud mitmete teiste arvutite vahel ja selleks, et nad kätte saada, on vaja eraldi programmi, mis leiaks need ja saadaks need soovijale ja paneks ka tükid kokku. Torentimisega kaasneb vähe riske, kuna ei lae midagi alla otse netist, siiski võib olla pahatahtlike inimesi, kes üritavad ka seda teed mööda nakatada teiste arvuteid. Üldiselt on aga tõenäosus siiski väike, kuna inimesed annavad märku, kui on midagi valesti.

Usenet

Usenet on üks vanimaid võrgustike, mis sai alguse aastal 1979 kahe Duke ülikooli üliõpilase poolt. Algselt kasutati Useneti USA ülikoolide vahel uudiste, informatsiooni ja uurimistööde jagamiseks. Nüüdseks ajaks on see arenenud palju suuremaks ja võimsamaks ning täiuslikumaks platvormiks, mida kasutavad miljonid inimesed. Platvormil jagatakse väga erinevat informatsiooni nii öelda uudiste gruppides ja iga kasutaja saab luua ka uusi uudisgruppe. See on endiselt ülemaailmne piiranguteta foorum arutlusteks ja info jagamiseks.

DDL

Direct download või otse allalaadimine, on enamasti hüpertekst, mis viib otse allalaadimis lehele kus saab hõlpsasti alla laadida soovitud faili. Sellisel meetodil jagatakse ka palju faile, mis on illegaalsed erinevatel põhjustel, ning kuna see on ühes kohas koos, on seda ka lihtsam takistada. Firmad kasutavad seda meetodit, et klientidele kiiresti edastada soovitud faile. Näiteks videokaardi firmad saaksid edastada manuale ja ka linke, et laadida alla muud tarkvara, mis pole illegaalne. See on ka üks lihtsamaid viise faile jagada, kuna on lihtsasti ligipääsetav.

Data Hoarding

Andmete meeletu kogumine (data hoarding) on huvitav konsept, mida viivad tihti läbi individuaalid või vahest ka väiksemad suletud grupid. Tavaliselt ei tehta suuri kogumikke avalikuks, sest tihti on need andmed saadud illegaalselt (piraatlus). Mingil määral on see vastuoluline andmete kogumise eesmärgiga, mis on vanade (ning uute) loomingute säilitamine, et need oleks tulevikus inimestele vabalt kättesaadavad. Säilitada üritatakse kõiksugu meediumeid nagu filmid, laulud, ajakirjad jne. On palju huvilisi, kes tõmbavad alla filme, tele-sarju ning ka lihtsalt interneti videoid ning säilitavad need oma kõvakettale või spetsiaalsesse serverisse, et neid siis kunagi hiljem taas-vaadata või perele/sõpradele jagada. Ka laule kogutakse, kuid veidi vähem. Laule saab paljuski kuulata tasuta Youtube'st ning Spotifyst, kuid siiski tegeletakse nende kogumisega, sest nii on võimalik olla mitte-sõltuv teistest platvormidest ning ka säilitada parem helikvaliteet.

Telekanalid

Paljud televiisoris jooksvad programmid on finantseeritud riigi või telekanali enda poolt. Tuleb välja, et kõik sellised seriaalid ning programmid hoitakse telekanalite arhiivides alles ning neile on võimalik mingitel juhtudel ligi saada. Näiteks on kanalil BBC olemas arhiiv kõigest, mida nad on näidanud alates aastast 2007. Sellele saavad ligi kõik töötajad ning neil on võimalik vaadata tele-programme ning kuulata raadio-programme. Ühendkuningriikides on olemas arhiiv, kus on olemas üle kahe miljoni tele- ja raadio-programmi üle 75-lt erinevalt UK vabakanalilt. Sellele on võimalik ligi saada ainult Ühendkuningriikidest ning on peamiselt mõeldud õppe eesmärgil (sellele saavad ligi üle 120 ülikooli ning kõrgkooli).

Ajalehed ja ajakirjad

Digitaalsetel ajalehtedel/ajakirjadel on olemas hõlpsasti ligipääsetavad arhiivid, ning olenevalt teenusepakkujast on need kas tasuta või tasulised. Näiteks saab Delfi arhiivi vaadata tasuta ning artikleid on lihtne filtreerida ajavahemiku ning teema järgi. Ajalehtede, mis on digitaliseeritud, kättesaadavus võib varieeruda. Näiteks on New York Times digitaliseeritud aastast 1851 ning vanemaid väljaandeid saab vaadata ainult tasu eest. Lehel worldradiohistory.com on võimalik lugeda digitaliseeritud ajalkirju erinevatel televisiooni, raadio jms teemade. Antud lehel olevad väljaanded on ühe inimese poolt kokku ostetud või korjatud, samuti on talle ka saadetud annetusi (nii rahalisi kui ka väljaandeid endeid). Ära digitaliseeritud väljaanded on kas hoiustatud kuskil laos või viidud taaskasutusse.

Kommuunid

Andmete kogumisega tegelevatel inimestel on olemas ka omad kommuunid, kus esitatakse küsimusi, aidatakse üksteist ning jagatakse linke, kogemusi ning huvitavaid leide. Tuntuimad on näiteks r/DataHoarder ja r/musichoarder redditis ning Discordis. Kommuunide peamine eesmärk on üksteise toetamine, sest kõik liikmed jagavad sarnast huvi. Näiteks otsis redditi kasutaja u/ch00f taga üht vana filmi, mille selle looja ilmselt tahtlikult hävitas. Kommuuni liikmed asusid appi ning aitasid selle üles leida interneti avarustest. Siiski on ka teisane eesmärk, mis on suurtemate projektide jaoks abiliste leidmine. Näiteks on olemas projekt, kus paluti inimeste abi, et säilitada Yahoo gruppe, sest tuli teade, et need Yahoo grupid pannakse kinni. Paar kuud tagasi tuli teade, et üks vana telekanal tuleb tagasi ning redditis võttis üks kasutaja ette plaani koguda kokku kõik selle kanali vana materjal, nii palju kui seda leidub. Ka sellel projektile leiti mitmeid abilisi r/DataHoarder kommuunist.

Crowdfunding (ühisrahastus projektid)

Crowdfunding oma olemuselt on protsess, kus suvalised inimesed maailmas, kel on huvi, saavad panustada oma raha, et anda panus mõne uue asju loomisel, vana asja säilitamisel või lihtsalt aidata kedagi raskel ajal.

Digitaliseerimine

Digitaliseerimine võib olla vahel üsna ajakulukas ning kallis. Sellisel juhul vaadatakse vahel üldrahva poole, et leida huvilisi, kes oleks nõus panustama midagigi. Näiteks toimus 2017. aastal Cornell University audio-visuaalse arhiivide digitaliseerimine, mille jooksul küsiti huviliste abi. Kokku oli 123 panustajat ning kokku koguti üle 16,000 dollari, mis oli üle tuhande dollari seatud eesmärgist. Digitaliseeritud filmid on nüüd vaadatavad kõigile. Kickstarter on üks tuntumaid platvorme, kus inimesed saavad seada üles ühisrahastus projekte. Sellel platvormil leidub ka eraldi sektsioon taastus-projektidele, kus nii digitaliseeritakse kui ka taastatakse vanu filme, laule, kirju, maju, jne.

Taastamine

Music Preservation Society (MPS) tegeleb haruldaste ja klassikaliste vinüülide taastamisega. Inimestel on võimalus annetada raha omal valikul projektidele ning kui miinimum rahaline nõue ületatakse, pannakse projekt töösse. Annetajatel on võimalus saada vinüülid endale.

Andmete kvaliteedi langus

Andmete ringluse etapid, kus kvaliteet võib langeda on loomine ja jagamine. Nendes etappides langeb kvaliteet peamiselt inimeste ebaadekvaatsusest, teadmatusest ning eeldusest, et hoitakse aega kokku. Lisaks võib öelda, et hävitamise etapis langeb kvaliteet nulli, kuna andmed kaovad tervikuna.

Kvaliteedi langus andmete loomisel

Andmete loomine selles kontekstis ei tähenda mitte uue originaalteose (dokument, video, vms) loomist, vaid füüsilistel meediumitel asuvate andmete valmistamist hoiustamiseks/jagamiseks. Kui lähtematerjal on rariteetne või unikaalne, peab nägema vaeva, et säilitada seda parimas kvaliteedis. Kuid üldiselt inimestel lihtsalt ei ole selle saavutamiseks kannatust ning vahel levib arvamus, et küll keegi teine selle kunagi ära teeb – mõnikord ei teadvustata materjali unikaalsust või tähtsust.

• Digiteerima – Analoogmeediumilt andmeid digimeediumile teisendama.

Digiteeritakse pilte, raamatuid, vinüülplaate, magnetlinte ja kassette.

• Rebima (to rip) – Digitaalsisu konteinerist väljavõtma.

Rebitakse plaate (ja voogesitusteenuseid). Vahel kasutatakse terminit ebakorrektselt ka vinüülplaadi digiteerimise kohta.

Digiteerimine

Analoogne siinuslaine ning kaheksa kvantimistasandiga digiteeritud laine.

Digiteerida on üldiselt raskem kui rebida. Digiteerimine vajab tihti kalleid ja spetsialiseeritud seadmeid ning palju aega (näiteks vinüüli digiteerimine võtab aega sama kaua kui vinüülplaadi mängimisaeg). Lisaks võib digiteerimisel väikseimagi parameetri muutmisel kvaliteet oluliselt erineda, kuna analoogsignaalile avaldavad mõju lõpmatult paljud füüsilised parameetrid. Analoogmaterjalist pole ka võimalik salvestada täpset digitaalset koopiat, kuna toimub pidevsignaali redutseerimine diskreetsignaaliks ehk lõpmatute väärtuste kaardistamine konkreetsesse vahemikku, mis toob kaasa kadusi. Kõige arusaadavamalt seotud helilainetega, kuid käib ka näiteks kaameraga pildistamise või piltide skanneerimise kohta.

Reaalselt on tehnoloogilised lahendused piisavalt head, et digiteerida tavainimese tajule piisava kvaliteediga, eeldusel, et inimesed tunnevad tehnoloogiat ja mõjusaid parameetreid ning neil on vastavad vahendid ja aega (sama käib ka rebimise kohta). Rohkem digiteeritakse iseseisvalt vinüülplaate ja pilte ning teiste meediumite jaoks kasutatakse digiteerimisteenuseid (nt. PhotoPoint, Audioabi, Ratus või hästi varustatud raamatukogu).

Vinüülplaat

Vinüüli digiteerimine.

Vinüülsalvestuse päritolufail (~1200€ komplekt)

Vinüülplaadi digiteerimiseks on vaja plaadimängijat (turntable), helipead (cartridge), eelvõimendit (preamp), analoog-digitaalmuundurit (ADC) ning helisalvestus ja -redigeerimistarkvara. Konfiguratsioone, seadmeid ja programme on tohutult palju, kuid eelmainitud on põhikomplekt. Näiteks võib eraldiseisva ADC asemel kasutada arvutisse sisseehitatud muundurit, kuigi seda ei ole soovitatud teha, sest enamasti on sisseehitatud muunduri kvaliteet eraldiseisvast märksa madalam. Lisaks kasutatakse enne digiteerimist vinüülplaadi ja helipea puhastajaid ning peale digiteerimist tarkvara, millega võetakse välja esinenud klõpsud/pragin (clicks/crackle). Peab ka jälgima, et plaati mängitakse õige pöörlemiskiirusega (33, 45, 78), muidu tuleb salvestus aeglasem/kiirem. Lisaks, mida rohkem on plaati mängitud (või tehtud ebaõnnestunud digiteerimiskatseid) seda halvemaks muutub helikvaliteet. Kvaliteedi languse kiirus sõltub plaadimängija ja helipea kvaliteedist, kuid üldiselt hakkab kvaliteet langema umbes 100st mängust. Kokkuvõttes sõltub salvestuse kvaliteet väga palju kulutatud rahast ja digiteerija teadmistest vastava riistvara seadistamisel ja tarkvaraga opereerimisel. Digiteerimise variatsiooni tõttu, võrreldes rebimisega, võib vinüüli digiteerimist pidada mänguliseks tegevuseks.

Vinüülsalvestuste juurde kuulub tavaliselt päritolu fail (lineage.txt), kus on info kasutatud digiteerimiskomplekti kohta ning vahel digiteerija isikupärane logo/disain. Lisaks võib päritolu faili järgi arvutada kokku komplekti hinna.

Järmistes näidetes on lisaks helifailidele toodud ka spektrogrammid, mida tihti kasutatakse heli visuaaliseerimisel ja kvaliteedi hindamisel. Spektogrammi X-telg on aeg, Y-telg on helisagedus ja Z-telg (ehk värviskaala) on helitugevus. Kahjuks ei loe enamasti spektogrammilt piisava täpsusega välja helitugevuse resolutsiooni, mis on ka kvaliteedi määramisel tähtis. Spektrogrammide välimus sõltub helitöötluse ja -salvestamise protsessist ning tihendusest, kui tihendamisel esinevad kaod. Spektogrammide lugemine on nüansirikas ja tihedalt seotud muusikastiiliga, kuid on mõned üldised näpureeglid kvaliteetse faili äratundmiseks:

Järgmiste punktide korral tuleb meeles pidada, et kui spektrogrammi mingi osa on seotud muusika omapäraga (näiteks laulu sees ongi kasutatud nelinurklaine effekti, mis esineb spektrol pidevate joontena) ei ole see madala kvaliteedi indikaator.

Tuleb ka meeles pidada, et tegu on kvaliteedimõõtmisviisiga, mis ei pruugi vastata sellele, kuidas keegi inimene laulu kvaliteeti tajub, näilise kvaliteedi teadasaamiseks tuleb laulu kuulata.

• Kõrgemate helisageduste juures olev "must taevas" ei hõlma üle 40% kõrgusest.
• Ei sisalda selgelt eristatavaid pidevaid jooni ega värviüleminekuid.
• Kõrgeimate helisageduste juures ei esine eraldatud "sinist pilve".

(Tavaliselt esineb, kui mõõtesagedus on liiga tihe, kuna salvestatakse ka kõrgemaid helisagedusi, mida laul ei pruugi sisaldada.)

(Võib ka esineda kadudega tihendamisel, kuna visatakse välja kõrge sagedusega helid, mida inimene ei pruugi kuulda.)

• Enamus värvid jäävad tumesinise ja kollase vahele.
• Kõrgemate helisageduste juures ei esine sakke.
• Värviüleminekud on sujuvad.

Näide ebakvaliteetsest vinüülsalvestusest, kus on kuulda praginat. (Anorexia Nervosa - Sister September)

Pidevad jooned ~30kHz ~96kHz, pidev värviüleminek ~20kHz ning esinevad suur must taevas ja selle sees ka sinine pilv.

Näide kvaliteetsest vinüülsalvestusest, salvestatud lehe ääres välja toodud komplektiga. (Dire Straits - Sultans of Swing)

Esineb piisavalt väike must taevas.

Rebimine

Rebimisteenused üldiselt puuduvad, põhiliselt rebitakse iseseisvalt plaate (CD, SACD, DVD, BD). Siin punktis muutub tavakasutaja jaoks olukord kirjuks. Igal eelmainitud plaaditüübil on oma viis, kuidas seda kvaliteetselt rebida.

CD

CUETools DB logi plaadi laulude kohta.

EAC rebimislogi üldinfo.

EAC rebimislogi ühe laulu info.

60% rebimislogi.

CD-d on eelmainitud plaaditüüpidest kõige lihtsam rebida. Kuigi mõned plaadilugejad on kvaliteetsemad, toimib rebimine ükskõik millise lugejaga. Rebimiseks on ka palju programme, kuid peamiselt kasutatakse kolme põhilist, mis oma lisafunktsionaalsusega aitavad toota kvaliteetsemaid andmeid: EAC (Windows), XLD (Mac), Whipper (Linux). Nende funktsionaalsus on enamjaolt sama, kuid konfiguratsioonid erinevad (näiteks EAC soovitatud konfiguratsioon). Eelmainitud programmid võimaldavad rebida nn “turvalises režiimis”, mis loeb andmeid plaadilt mitu korda, elimineerides lugemisvead. Turvaline režiim kindlustab küll kvaliteedi, kuid olenevalt plaadi seisust võtab kordades kauem aega. Teised rebijad/mängijad üldiselt vigu ignoreeririvad, kuna tihti osutuvad vead kuulajale märkamatuks, kuid arhiveerimise eesmärgil peab ikka korrektse koopia saamiseks kasutama asjakohaseid programme. Lisaks toetavad eelmainitud programmid (üht või mõlemat) kontrollsummade andmebaase AccurateRip ja CUETools DB. Kui kasutaja on rebinud plaadi, laetakse andmebaasi plaadi kontrollsummad ning kontrollitakse neid andmebaasis olemasolevate vastu. Mida rohkem inimesi on saanud sama tulemuse, seda suurem võimalus, et rebitud andmed on korrektsed. CUETools DB saab mõnel juhul parandada ka vigaseks jäänud andmeid. Eelmainitud rebimisprogrammid toodavad oma tegevuse põhjal ka rebimislogi, mis sisaldab rebimismetoodika kohta infot ja mille järgi võib hinnata kui suur võimalus on, et rebitud heli on biti täpsusega. Logisse lisatakse ka kontrollsummaandmebaasi(de) tulemused.

Rebimislogide jaoks on olemas logikontrollijad (log checker), mis hindavad protsendiliselt kui head rebimismetoodikat kasutati. Ideaalne logi on 100% skooriga, kehtiva logi kontrollsummaga ning laulude kontrollsummad mõlemas kontrollsummaandemaasis vähemalt paar korda.

SACD

Hübriidse SACD kihid.

SACD on Sony väljatöötatud plaaditüüp, mis saab kanda rohkem andmeid ja kõrgemas kvaliteedis heli kui CD. Seepärast (peamiselt mitme helikanali toe tõttu) eelistatakse plaati jazz ja klassikalise muusika jaoks. Enamasti koosneb plaat kahest kihist, tavaline CD kiht ja SACD kiht. CD kihti saab mängida/rebida samamoodi nagu tavalist CD-d, kuid SACD kiht vajab erilist plaadimängijat ja tarkvara, kuna kasutab teist audiokodderingut, nimelt DSD-d (CD kasutab PCM-i). Varem sai SACD plaate rebida ainult PlayStation 3 videomängukonsooli konkreetsete mudelitega. Nüüd on aga võimalik rebida ka arvutiga, kuid ainult plaadilugejatega, millel on SACD tugi. Lisaks puuduvad SACD kontrollsummaandmebaasid ning rebimistarkvara ei tooda sama kvaliteetseid logisid kui CD rebimistarkvara.

Kvaliteedi langus andmete jagamisel

Jagamisel võib andmete kvaliteet langeda, kui saadetakse, kas kadudega tihendatud formaadis või koopia asemel salvestus (pilt ekraanist kuvatõmmise asemel või helisalvestus muusikafaili asemel). Esimesel juhul on tihti probleemiks aeglane internetiühendus või vähene kettaruum. Teisel juhul sobiva failijagamisteenuse leidmise raskus ja/või telefoniga pildistamise/salvestamise lihtsus.

Toored / tihenduseta andmed – Originaalsed andmed üks üheses esituses.

• Originaalse kvalideetiga.
• Ruumi raiskav.

Tuntumad formaadid: PCM, WAV ja DSD.

Siia alla kuuluvad ka näiteks otse sensorilt saadud andmed.

Kadudega tihendus – Andmete kokkupakkimine, arvates välja inimesele mittetajutavad andmed.

• Madalama kvaliteediga.
• Rohkem ruumi säästev.

Tuntumad formaadid: MP3, OPUS, AAC, JPG, H.264/5 ja VP8/9.

Kadudega tihendatud andmed on nagu lõppprodukt, mida ei tohiks redigeerida ja ülesalvestada ega teisendada teise formaati, kuna mitmekordsel kadudega tihendusel kaod suurenevad veelgi. Näiteks JPG faili muutmine Photoshopis ja ülesalvestamine on hävitav operatsioon, kuid PNG failiga samamoodi tegutsemine pole. Kuigi vahel teisendatakse kadudega formaadist kadudeta formaati, kuna originaalne formaat ei ole laialdaselt toetatud, näiteks vanade videomängukonsoolide heliformaadid.

Kadudeta tihendus – Andmete kokkupakkimine, säilitades mittetajutavad andmed.

• Originaalse kvalideetiga.
• Vähem ruumi säästev.

Tuntumad formaadid: FLAC, ALAC, APE, PNG. Kadudeta videokodeeringud ei ole nende suuruse tõttu üldkasutuses ja on vähetuntud, kuigi kaduteda variandid eksisteerivad ka H.264/5 ja VP9 kodeeringutel.

Kadudeta tihendatud andmeid saab redigeerida ja ülesalvestada või teisendada teise kadudeta formaati lisakadude tekkimiseta. Näiteks saab FLAC faili kadudeta konverteerida WAV failiks.

Eelmainitud seosel, et kadudega tihendatud andmed on halvema kvaliteediga kui kadudeta tihendatud andmed ei pea alati paika, kuna kvaliteet sõltub tugevalt ka materjali loomisprotsessist, pilditöötluses näiteks kaamerast ja/või värvitasakaalu tuunimisest ning muusikatöötluses mikrofonist ja/või helitöötlusest.

Näide näiliselt ebakvaliteetsest kadudeta tihendatud salvestusest (FLAC 16bit 44kHz / CD kvaliteet). (ABBA - Waterloo "Alternate Mix")

Kitsas ja hele värvispektrer ning pidev värvivahetus ~18kHz.

Näide näiliselt kvaliteetsest kadudega tihendatud salvestusest (MP3 128kbps / ~ Spotify keskmine kvaliteedivalik). (芝麻Mochi - 僕が死のうと思ったのは)

Pidev joon ~16kHz, sakid üle 16kHz ja esineb must pilv, kuid sujuv värvivahetus ning lai ja tasakaalus värvispekter.