en komplet guide til upload og styring af dine filer i S3

opdateret Februar 2021

ingen tvivl om, vi er forkælet med valg med dagens forskellige fillagre. Cloud-tjenester er de mest populære på markedet takket være deres tilgængelighed og brugervenlighed. Som anslået findes der over 2300 millioner cloud storage-brugere over hele kloden. Dette tal forventes at vokse yderligere.

med sin skalerbare infrastruktur og stærke sikkerhedsforanstaltninger er S3 et top mediebibliotek valg af mange forbrugere. Virksomheder i alle størrelser og brancher skifter til dette lager, efter at de har hørt meget om Amasons uplettede omdømme og dets stræben efter perfektion.

men ledte aldrig efter nogen genveje. Og dets objektsystem adskiller lagringen fra konkurrencen, samtidig med at det komplicerer onboardingprocessen for nye brugere. Stadig tage det roligt! Med denne artikel vil vi fortælle dig om S3 faldgruber.

som vi for nylig har bygget DÆMNINGSINTEGRATION med Pics.io, upload og styring af filer på S3 blev virkelig vigtigt for vores brugere. Så her er vi, hvilket giver gavn for alle, der har brug for denne info for at gøre arbejdet med S3 til et stykke kage til dig.

S3: nogle vigtige terminologi

som en ny bruger til , kan du blive forundret, når du først åbner din konto. Hvor er den traditionelle fil-og mappeorganisation? Hvad er en hemmelig nøgle, og hvorfor gemmes mine dyrebare filer i spande?

her er en kort liste over udtryk, du måske vil vide, før du selv logger ind på din konto:

• administrationskonsol. Dette er en internetbaseret applikation, hvorigennem du får adgang til og administrerer din skylagring. Du skal bruge dit brugernavn & adgangskode for at logge ind på din konto.

• Root bruger vs. iam (Identity and Access Management) bruger. Der er to typer af brugere: en kontoejer (eller root-bruger) og brugere tildelt med visse roller og adgangsrettigheder (iam-brugere). Et pro tip: for sikkerheds-og sikkerhedsforanstaltninger anbefaler at reducere brugen af root-brugeroplysninger til et minimum. I stedet kan du oprette en iam-bruger og give dem fuld adgang.

• adgangsnøgle-ID og hemmelig nøgle. Ved siden af Konsoladgang (udviklet mest til brugere med en begrænset teknisk baggrund) findes der også programmatisk adgang. Og her har du brug for adgangstaster til at foretage programmatiske opkald.

• spand. I din S3 – konsol opretter du spande-en såkaldt overordnet mappe til dine aktiver og deres metadata. Som standard giver S3 dig 100 spande pr. konto, men du kan øge denne grænse med op til 1000 spande for ekstra betaling.

Spand = Objekt 1 + Objekt 2 + Objekt 3

• Objekt. Vi gemmer genstande i spande. Sammensat af filer plus deres metadata (valgfrit) kan et objekt være enhver form for fil, du har brug for at uploade: en tekstfil, et billede, video, lyd osv. Din maksimale tilladte størrelse er 160 GB.

objekt = fil + metadata (valgfrit)

• mapper. Du kan gruppere dine objekter efter mapper. Men husk, at S3 har et fladt filsystem i modsætning til det traditionelle hierarki, hvor dine aktiver er grupperet i mapper og undermapper. Flad struktur betyder, at du opnår organisatorisk enkelhed ved hjælp af unikke fil-og mappenavne. For eksempel tilføjer du et projektnavn + Klientnavn + forfaldsdato, så du ikke møder det samme navn på tværs af lageret.

• Region. S3 skovle er regionsspecifikke. Det betyder, at du vælger den geografiske placering, hvor du vil have virksomheden til at gemme dine aktiver. Husk, at objekter i spanden ikke forlader deres placering, medmindre du specifikt overfører dem til en anden region.

• nøglenavne & præfikser. Nøglenavne henviser til objektnavne, og sammen med præfikser (en almindelig streng i objektnavne) hjælper de dig med at få adgang til den nødvendige fil hurtigere og lettere. Lad os sige, at du gemmer photo1 i mappe1 i din spand. Derefter kan du søge i dine filer ved at indtaste bucket/folder1/photo1 i stedet for at åbne mapper og spande manuelt.

vi har oprettet en S3-konto: Sådan kommer du i gang med at bruge den

Sådan oprettes en spand?

når du har logget ind på din S3-brugergrænseflade, er det på høje tid at udforske din brugerkonto. Så den første ting du gør er at oprette en S3 spand.

her skal du angive dit bucket-navn og geografiske placering, hvor du vil gemme din spand og dens indhold. Vi har allerede nævnt flad struktur som et særligt træk ved S3 opbevaring, så vær opmærksom, når du vælger dit spandnavn. Systemet vil ikke lade dig gå, medmindre navnet 1) er unikt på tværs af lageret 2) er mellem 3 og 63 tegn; og 3) indeholder kun små bogstaver.

hvad angår regionen, giver lageret dig mulighed for at oprette en spand på det ønskede sted. Og den bedste ide er at vælge den der er tættest på dig. På denne måde reducerer du ikke kun responstiden, men reducerer omkostningerne og opfylder lovgivningsmæssige krav.

Hvad kan jeg ellers gøre med min spand?

1) tilladelser

i den samme menu indstiller du også tilladelser og konfigurerer indstillinger. Afhængigt af rollerne i dit team bestemmer du, hvem der skal oprette, redigere og slette objekter i din spand.

2) Offentlig vs. individuel adgang

vælg derefter mellem offentlig og individuel adgang. Af hensyn til sikkerheden anbefaler vi ikke at give offentlig adgang, medmindre du bruger denne spand til at dele dine filer med mange kunder eller partnere. Hvis dette ikke er tilfældet, kan du altid gøre bestemte filer offentligt tilgængelige for andre.

3) versionsstyring

hvad angår konfigurationsindstillinger, skal du aktivere versionsstyring, hvis du planlægger at gemme forskellige revisioner af det samme objekt. Lad os sige, at du designer et nyt logo til din marketingkampagne. Gennem denne proces vil der være flere opdateringer til din fil, når du eksperimenterer med farvepaletten eller uddyber skrifttypen.

med versionsstyring gemmes forskellige versioner af din fil under den samme nøgle, og du henter dem alle på en gang, når du får adgang til objektet. S3-brugere sætter også pris på versionsstyring, når det kommer til applikationsfejl eller utilsigtede handlinger (for eksempel når din kollega har slettet den nøjagtige revision, som du alle accepterede at bruge).

4) logning af Server vs. objektadgang

Marker logning af serveradgang, hvis du vil spore anmodninger, der er foretaget i en spand. Access log rapporter kommer i handy for dig i tider med revisioner og som en sikkerhedsforanstaltning.

du kan også prøve en mere avanceret logning på objektniveau. Ved denne lejlighed er du fri til at filtrere begivenheder, der skal logges, og du sporer dem i CloudTrail – en separat AUDITERINGSTJENESTE.

5) kryptering

endelig Krypter dine filer, hvis du desuden vil sikre dine data. Kryptering står for kodning dine oplysninger, så det kun kunne tilgås ved hjælp af en adgangskode og specialdesignet kryptering (dekryptering) nøgle. For ikke at gå længere ind i kodning giver S3 storage dig mulighed for at vælge standardkryptering, når du opretter en ny spand.

kom ind i spanden

Sådan uploades dine filer til S3?

i spanden gemmer vi vores objekter (filer + metadata) og bruger mapper, hvis vi har brug for at gruppere vores filer. Du vil se, at uploade filer til S3 storage er lige så let som pie. Du trykker bare på upload og enten drag ‘ n ‘ drop dine materialer eller peg-og-klik på dem – Brug den måde, der er mere praktisk for dig. Klik på Opret en mappe, hvis du er villig til at gruppere dine objekter i mapper.

andet end det, er du velkommen til at uploade en hel mappe. Kun drag ‘ n ‘ drop-indstillingen er tilgængelig for dig i dette tilfælde. Alligevel forenkler det opgaven, hvis du har brug for at uploade et bredt omfang af filer og afspejle deres struktur. Med upload af mapper spejler S3 sin struktur og uploader alle undermapper, selvom denne måde generelt kan være mere tidskrævende.

Hvad skal jeg vide, når jeg uploader objekter til S3 storage?

hvis du ikke har noget imod det, gentager jeg mig selv: S3 bruger objektbaseret opbevaring. Det betyder intet filsystem overhovedet! Hver fil, du uploader (uanset oprindelse, type og format) bliver konverteret til et objekt og findes i en spand bagefter.

da der ikke er noget filsystem (i det mindste i den almindelige betydning af dette ord), vil vi ikke længere tale om navne som filnavne. (Og vi har allerede nævnt, at S3 handler om unikke navne – Sådan organiserer og får vi adgang til filer i denne lagringstjeneste.) Dette er grunden til, at når du uploader et nyt objekt, har du ikke engang muligheden for at vælge et navn til det.

men for at kompensere for ikke-eksisterende filnavne bruger tjenesten en objektnøgle (eller nøglenavn), som entydigt definerer et objekt i spanden.

Hvad er andre konfigurationsmuligheder under upload? Det samme som med spande kan du også bruge kryptering til at sikre dine data og administrere offentlige tilladelser. Derudover kan du gøre en bestemt fil tilgængelig for en bestemt bruger eller brugere.

Vælg lagringsklasser baseret på, hvor ofte du planlægger at få adgang til dine data. For eksempel er S3 Standard (standardtypen) designet til kritiske, ikke-reproducerbare data, du skal administrere regelmæssigt.

Metadata vs. Tagging

bortset fra en nøgle (og data) har hvert S3-objekt en liste over metadata, du angiver, når du uploader det. Kort sagt er dette yderligere oplysninger om objektet, som når det blev oprettet eller af hvem. Metadataene gemmes ved hjælp af et nøgleværdisystem, hvor nøgle hjælper med at identificere et objekt, og værdi er selve objektet.

for at sige det enkelt er indholdslængde eller filtype nøglerne, når vi henviser til denne slags metadata. Derfor vil deres værdier være objektstørrelsen i bytes og forskellige filtyper som PDF, tekst, video, lyd eller ethvert andet format, du kan tænke på.

efter den samme logik kan du tilføje tags til dine filer, der hjælper med at søge, organisere og administrere adgang til dine objekter. Tags er de samme nøgleværdipar, og de er også slags metadata, men der er en betydelig forskel mellem dem.

et objekt i S3 er uforanderligt, det samme som dets metadata som en del af objektet. Konsollen giver dig mulighed for at “redigere” metadata, men det afspejler ikke virkeligheden. Hvad der faktisk sker, er en ny filversion, der oprettes hver gang du ændrer objektet.

situationen er anderledes med tags – de er yderligere, “subresource” oplysninger om et objekt. Da de administreres separat, ændrer du ikke en fil, når du tilføjer tags til den. Samlet set kan du vælge op til 10 tags pr.

mapper som et middel til gruppering af objekter

Hvordan bruger vi mapper i S3?

som du sikkert har fundet ud af, spiller spande og genstande centrale roller i S3-opbevaring. Men det er ikke tilfældet med mapper. Disse blev kun tilføjet for at kompensere for det fraværende filhierarkiske system for at forbedre filhåndtering og adgang.

i S3 hjælper mapper dig med at finde dine filer takket være præfikser (placeret før nøglenavnet). Lad os sige, at du opretter en mappe med navnet billeder, og der gemmer du et objekt med nøglenavnet billeder/foto1.jpg. “Billeder” er præfikset i dette tilfælde. “/”er afgrænseren, der automatisk tilføjes af systemet (undgå dem i dine mappenavne). Jo flere mapper og undermapper du opretter, jo flere præfikser får din fil.

og så kan du bruge disse præfikser til at få adgang til dine data. Skriv bare et eller flere præfikser i S3-søgemaskinen for at filtrere dine søgninger.

handlinger med mapper og objekter

hvad du kan gøre med dine filer og mapper er temmelig standard i S3 opbevaring. Du kan oprette nye mapper, slette dem, offentliggøre, kopiere og flytte. Ændre deres metadata, kryptering, lagringsklasse og tags – men som forventet er der ingen omdøbningsindstilling tilgængelig.

din interaktion med objekter vil ikke være meget anderledes. Med S3 har du ikke noget problem med at uploade og kopiere objekter. Derudover kan du åbne dine aktiver, flytte, hente og slette dem (i forskellige formater, hvis det er nødvendigt).

en interessant mulighed omfatter gendannelse af slettede objekter, hvilket kan være særligt nyttigt i tilfælde af systemfejl. Men vær opmærksom på, at” Fortryd ” objekter kun er mulige i spande med aktiveret versionsstyring.

kom tilbage til upload igen: flytning af big data til S3

vi har gjort det ret klart, at upload af aktiver til S3 ikke bør forårsage nogen problemer. Og det er sådan, hvis vi taler om småskala data. Men hvad nu hvis dit digitale bibliotek strækker sig til 1000 filer eller 10 000 eller en million? Kan du forestille dig, at du trækker ‘ n ‘ drop disse filer eller peg-og-klik på dem?

hvilket spild af tid det kunne være! Heldigvis er der andre, lettere og hurtigere måder at flytte massive data til din S3-opbevaring…

Online-værktøjer

1) Direct Connect er en fremragende løsning til overførsel af store mængder data. Dens ide er at skabe en direkte forbindelse mellem dine on-premise datakilder og netværk. På denne måde omgår du eventuelle forhindringer, der er oprettet af din internetudbyder og internettrafik, og flytter dine data hurtigere og lettere.

som sædvanlig kan du anmode om en forbindelse i AV-konsollen, bare vælg det område, du vil bruge, Indstil antallet af porte og deres hastighed – og du kan anvende løsningen.

Hvornår skal du bruge denne løsning?

• når du har brug for at overføre store data, og din internetforbindelse er langsom.
• når du er ivrig efter at reducere omkostningerne og opnå en mere ensartet netværksoplevelse.

2) Datasynkronisering ligner meget Direct Connect, men er mere sofistikeret med forbedrede styrings-og automatiseringsmuligheder. For eksempel kan du spore dine overførsler, planlægge bestemte processer, tilpasse hastighed og båndbredde.

men en mere avanceret løsning betyder også mere komplekse overførsler,ikke? Så brugere med begrænset viden inden for kodning kan finde Datasynkronisering for vanskelig.

Hvornår skal du bruge denne løsning?

• når du har brug for ekstra automatisering til dine dataoverførsler for at reducere omkostningerne. For eksempel skal du vælge Datasynkronisering, hvis du vil filtrere din migrering af data og påpege, hvilke mapper/filer der skal flyttes først.
• når du arbejder i en stor virksomhed, vil din dataoverførsel blive gennemført under tilsyn af udviklere.

3) S3 Transfer Acceleration er designet til at fremskynde dine data migration processer til S3 opbevaring specifikt. Løsningen fungerer perfekt til dataoverførsler over lange fysiske afstande.

Hvornår skal du bruge denne løsning?

• når du har brug for en hurtig overførsel og/eller for en længere afstand.
• når du kun skal flytte dine data fra en spand.

4) Det er et real-time datamigreringsværktøj, som du aktiverer via konsollen. Tjenesten er god på grund af dens let-peasy interface – du opretter Leveringen med et par klik. Plus, det er mere omkostningseffektivt end andre løsninger, som du betaler ikke for tjenesten, men for mængden af data, du overfører.

Hvornår skal du bruge denne løsning?

• når du leder efter en streaming data migration værktøj.
• når du ikke ønsker at spilde din tid på administration.
• når du planlægger at reducere omkostningerne ved at betale som du går.

5) Tsunami UDP er en af få gratis løsninger til rådighed til at flytte big data til S3. Det virker ikke online endnu, så du bliver nødt til at hente og installere værktøjet. Plus, den grundlæggende viden i kodning er nødvendig for at arbejde med denne løsning.

Hvornår skal du bruge denne løsning?

• når dit budget er begrænset, men du skal stadig flytte store data til dit S3-lager.
• når du kun skal overføre filer (løsningen understøtter ikke bevægelige mapper og undermapper).
• når du ikke ejer nogen følsomme data: Tsunami UDP krypterer ikke dine data.

6) Pics.io Datamigrering er en ny service leveret af Pics.io DAM. Vælg denne indstilling, hvis du har brug for at overføre big data (og metadata!) til din opbevaring, men ønsker ikke at gå i problemer ved at gøre alt på egen hånd.

Hvornår skal du bruge denne løsning?

• når du skal migrere dine data fra en kilde til en anden. Det kunne være en anden cloud storage til S3. Eller flytte filer mellem I dine spande.
• når du ønsker at fuldføre migration hurtigt & nemt. I dette tilfælde skal du bare kontakte Pics.io supportteam, give et par tilladelser, & din DAM løsning tager sig af resten.
• når du planlægger at flytte metadata sammen med dine filer. Denne mulighed giver dig mulighed for at bevare din mappestruktur, overføre nøgleord, filbeskrivelser og så videre.
• når du bekymrer dig om sikkerheden af dine oplysninger. Billede.io gennemfører uploaden på den sikreste måde.

Offline tools

7) Import/eksport Disk er en offline dataoverførsel løsning. Her uploader du dine data til en bærbar enhed og sender dem til . Derefter flytter virksomheden dataene til dit lager direkte ved hjælp af dets interne højhastighedsnetværk. Som regel sker dette den næste arbejdsdag, når modtager din enhed. Så snart eksporten/importen er afsluttet, sender virksomheden din eksterne harddisk tilbage.

Hvornår skal du bruge denne løsning?

• når du forbereder og sender dine datasæt, vil det stadig tage mindre tid end at uploade dine filer på nogen anden måde. Cirka bør du overveje denne mulighed, når størrelsen på dine data er større end 100 GB.
• når du sender en ekstern harddisk med dine data, forbliver det billigere end at opgradere din forbindelse (hvis du planlægger at flytte dine data online).

8) Det er en anden offline løsning, der består af tre forskellige overførselstjenester (snekugle, snebold og snescooter). Ideen er magen til AV Import / eksport Disk, men denne gang du bruger AV apparater til at flytte dine store data.

du bestiller tjenesten online, kopierer dine data til enheden og returnerer dem, når uploaden er afsluttet. Hele processen estimeret tager omkring en uge, forsendelse og dataoverførsel inkluderet. Men med denne mulighed kan du flytte fra et par terabyte til petabyte information.

Hvornår skal du bruge denne løsning?

• igen, når ventetiden for forsendelse og overførsel af data er berettiget sammenlignet med enhver anden uploadmetode.
• Vælg mellem en snekugle, en snebold og en snescooter, afhængigt af mængden af dine data. Snekugle er den mindste fysiske opbevaring i Snefamilien. Det er nemt og bærbart, og brugerne bestiller snekegler til dataoverførsler, det samme som i tilfælde af forbindelsesproblemer.
• av snebold er for mere storstilet migration af data (fra 42 TB). Og endelig er en snescooter en hel skibscontainer. Med denne service får du mere sikker dataoverførsel med høj hastighed, GPS-sporing, videoovervågning osv., osv.

hvis du vil gå dybere ind i de mange forskellige overførselsaccelerationsværktøjer, gå ikke glip af vores indlæg om dette emne.

almindelige problemer og løsninger

S3 tiltrækker brugere med sine mange fordele. Opbevaringen er meget holdbar, har ubegrænsede opbevaringsevner og unikke sikkerhedsmuligheder. Selvom det for det meste er en ren fornøjelse for dig at arbejde med denne opbevaring, sker der stadig forstyrrelser.

sådan kan du løse dem:

Problem 1: Din adgang til lageret nægtes.

løsning 1: Dette betyder, at du bruger en forkert adgangsnøgle og/eller hemmelig nøgle, eller du har muligvis simpelthen ingen rettigheder til at få adgang til lageret. Tjek dine legitimationsoplysninger samt tilladelsespolitikken til din iam-bruger, hvis dette er relevant.

Problem 2: din angivne nøgle findes ikke.

løsning 2: du modtager denne meddelelse, hvis der er problemer med navngivningen af dine filer og spande. Kontroller navnene, fjern tegnsætning og specialtegn, hvis de findes.

Problem 3: din signatur stemmer ikke overens.

opløsning 3: Hvis du ser denne fejlmeddelelse, er det sandsynligt, at du brugte store bogstaver og/eller mellemrum i dit bucket – navn-Omdøb bucket (eller du må hellere oprette en ny med korrekte navngivningskonventioner).

Problem 4: Dine filer ikke uploade/hente.

løsning 4: Tjek din internetforbindelse og / eller hastighed. Fjern cachen. Sørg for, at du har ledig plads på lageret, og at dine uploads svarer til Filkravene til S3.

så skal du muligvis kontrollere dine værtsindstillinger: gå til overførsler – Indstillinger – Udvidelser – S3. Er din vært oprettet korrekt? Regionen? Gennemgå filnavnene på dine filer (antallet af tegn, og om de har nogen specialtegn, for eksempel). Hvis du bruger en mobilenhed, skal du kontrollere størrelsen på dit foto/video – det må ikke overstige 2 GB.

Problem 5: Når dine filer vokser i antal, vil du snart bemærke, at det bliver sværere at administrere dem.

løsning 5: Digital Asset Management kan forbedre din oplevelse og løse dette problem for dig.

avanceret filorganisation med Pics.io DAM

Flyt dit S3-lager til et helt nyt niveau ved at integrere det i Pics.io DAM. Dette er en avanceret løsning til at organisere og distribuere dine filer for at maksimere dit teams ydeevne.

Pics.io DAM er en vind-vind strategi for dig som en S3 bruger. Da det fungerer oven på dit lager, behøver du ikke starte yderligere programmer (og migrere dine filer igen), ingen har adgang til dit lager, & ingen gebyrer for lagerplads. Stadig får du:

• unik fil organisation. Ingen grund til at søge i dit lager i timevis eller proppe alle disse præfikser. Billede.io viser dit S3-lager på en mere sædvanlig og brugervenlig måde, så du nemt kan navigere i det. Plus, det er meget visuelt – du kan faktisk se alle miniaturebillederne, og det sparer meget tid i det daglige arbejde.
• adgang. Med DAM får du meget let adgang til dine filer ved hjælp af nøgleord, placeringer, datoer og så videre. Eller du kan bruge den mere avancerede søgning: for eksempel kan du finde dine filer efter indhold med AI-drevet søgning.
• samarbejde med dit team. Dine kolleger kan efterlade dig beskeder under specifikke aktiver eller markere de områder, de vil diskutere. Tag dine holdkammerater direkte i dit lager. Og Få opdateringer om eventuelle ændringer i mappen.
• deling. Med Pics.io DAM, du har unikke delbare hjemmesider, hvor du placerer dine materialer og derefter sender linket til dine kunder/freelancere/partnere. Tilpas disse hjemmesider: for eksempel tilføje dit domænenavn eller ændre farvepaletten til at fremme dit brand.
• sikkerhed. Tilføj endnu et sikkerhedsniveau til dit lager ved at ændre rettigheder og tilladelser. For eksempel kan du specifikt beslutte, hvem der kan uploade / hente dine aktiver, redigere og slette dem. Og mange andre behagelige overraskelser som linkede Aktiver, et filsammenligningsværktøj, kommunikationscenter osv.

planlægger du at blive inkluderet i notering? Gå ikke glip af vores oversigt over de mest almindelige Optimeringsfejl i , og hvordan du undgår dem.

sidst men ikke mindst, hvis du havde prøvet flere offentlige skyudbydere, men stadig besluttede at stoppe på S3, skete dette naturligvis af en grund. Med sin skalerbarhed, bekvemmelighed, og sikkerhed, S3 er faktisk en af de førende lagre til rådighed på markedet i dag. Til gengæld vores Pics.io team hjælper dig med at få mest muligt ud af din lagerplads og forbedre din S3-oplevelse.