Прехвърляне на данни към Amazon S3 бързо с AWS Import Export

Ако имате стотици гигабайта или дори терабайта данни в локалната си мрежа у дома, най-вероятно сте я съхранили на компютър, външен твърд диск или NAS (устройство за съхранение в мрежа). Наличието на резервни копия на вашите данни е изключително важно, но да имаш всичко на едно място никога не е добра идея.

Осъзнах това сам, когато видях, че имам над 2 TB снимки, видеоклипове, архиви и др., Съхранени на локалния ми NAS. Разбира се, че има 4 твърди диска и ако някой не успее, никой от моите данни няма да бъде загубен. Ако обаче къщата ми изгори или бъде наводнена, всичко ще се загуби заедно с NAS. Затова реших да архивирам данните в облака.

Проверих Dropbox, SkyDrive, Google Drive, CrashPlan и Amazon S3 и Glacier, преди най-накрая да се установя на Amazon S3. Защо Amazon? Е, те имат страхотна услуга, където можете да изпратите външен твърд диск с размер до 16 TB и да го качите директно на техните сървъри, като по този начин заобикаляте огромния проблем да се качите тези данни през бавната интернет връзка.

С AT&T в моя квартал получавам невероятна скорост на качване от 1.4 Мбайт / сек. Ще са необходими много месеци, за да качите 2.5 TB данни, които съм съхранил в NAS. С Amazon Import / Export можете да платите такса за услугата от $ 80 и да ги качите за вас в един ден. Накрая направих видеоурок, който ви преведе през целия процес от регистрирането за Amazon Web Services до опаковане на твърдия ви диск и изпращането му до Amazon.

Ето пълния текст на видеоклипа:

Здравейте на всички. Това е Aseem Kishore от Online Tech Tips. Днес ще направя нещо ново. Отивам да направя видеоурок за функциите за Amazon Web Services Import Export. И така, какво е функцията за импортиране? Ами това е начин да получите голямо количество данни в кофата на Amazon S3 или в хранилището на ледника. Amazon S3 и Glacier са основно две възможности за съхранение, които имате за архивиране на данни и архивиране на данни с Amazon. Така че, защо бихте искали да използвате тази услуга от Amazon?

Е, това основно ви позволява да преместите голямо количество данни в облака много бързо. Ако сте някой като мен, може да имате стотици гигабайта снимки и видеоклипове, съхранявани локално на компютъра ви или на външен твърд диск. Опитвайки се да качите 100 гигабайта или 500 гигабайта или дори терабайт данни в облака ще ви отнеме седмици, ако не и месеци, при бавна връзка за качване. Вместо това, това, което можете да направите, е да копирате тези данни на външен твърд диск, който може да бъде с размер до 16 терабайта и просто да го изпратите на Amazon, където ще го занесат в техния център за данни и ще го качат направо в кофата или в хранилището ви можете да продължите и да получите достъп до нея от мрежата.

За да започнете, първото нещо, което трябва да направите, е да създадете акаунт за уеб услуги на Amazon. За да направите това, ще отидете на aws.amazon.com и ще продължите напред и кликнете върху бутона за регистрация. Продължете и въведете имейл адреса си и след това изберете „Аз съм нов потребител“, ако вече нямате профил в Amazon. Ако го направите, продължете и изберете „Аз съм потребител, който се връща“ и можете да използвате профила си в Amazon, за да се регистрирате за уеб услугите на Amazon.

След като създадете своя акаунт за уеб услуги на Amazon, ще трябва да изтеглите инструмента за импортиране. Този инструмент е много лесен за използване. Това отнема малко конфигурация, която ще обясня. Но можете да видите на екрана, има връзка надолу натоварване, което аз ще добавя в заглавието в долната част на това видео. Така че продължете напред и изтеглете, че и след това извлечете, че в директория на вашия компютър.

Сега, след като сте изтеглили този инструмент и сте го извлекли, трябва да имате директория, която изглежда така. На този етап ще трябва да редактираме файл, наречен "AWS Credentials". Той съдържа две стойности: Access Key ID и Secret Key. По принцип, това са две стойности, които Amazon използва, за да се свърже с вашия акаунт. Можете да получите тези две стойности от вашия акаунт за уеб услуги на Amazon, като отидете на следния адрес. Това е aws.amazon.com/securitycredentials. На страницата Security Credentials ще продължите напред и кликнете върху клавишите за достъп.

Сега тук става малко объркващо. Ако вече сте използвали уеб услуги на Amazon и вече сте създавали ключове в миналото, няма да можете да видите тайния си ключ тук. Това е нов интерфейс от Amazon и за да видите съществуващите секретни ключове, трябва да кликнете върху връзката „Поверителност“, която ще ви отведе до старата страница на Legacy.

Ако току-що създадохте нов акаунт, ще можете да създадете нов корен. Този бутон ще бъде активен. В този момент ще получите идентификатор за ключ за достъп и ще получите тайния ключ, така че да ви даде и двете стойности. Това е страницата на Legacy Security, където можете да получите достъп до секретните си ключове, ако вече сте създали ID на ключ за достъп за уеб услугите на Amazon. Както можете да видите тук, аз имам два ключа за достъп и ако искам да видя тайния си ключ, мога да продължа и да щракна върху бутона Покажи и след това да копирам тези две стойности в AWS Credentials файла, който бях показал по-рано. Така че искате да продължите напред и да поставите ключа за идентификация на достъп тук и да поставите секретния ключ тук.

Сега в този момент, ако се обърквате от ID на ключа за достъп и ключа за секретен достъп, това е добре. Наистина не е нужно да знаете какви са те или каквито и да е грижи за тях. Всичко, което трябва да направите, е да подпишете и да получите стойностите и да ги копирате и поставите в този файл.

Следващото нещо, което ще направим, е да създадем работа по внос. Сега следващите две части са двете най-трудни части от цялата тази процедура. За да създадем задача за импортиране за Amazon S3, ще създадем файл с манифест. Този файл с манифеста съдържа основно информация за устройството ви. Където искате да съхраните данните и къде искате да се изпрати устройството.

Сега хубавото е, че не е нужно сами да създаваме този манифест. Тя вече е създадена за нас, просто трябва да продължим и да я изпълним. Така че това, което ще искате да направите, е да влезете в директорията и къде имате инструмента за експортиране на внос и кликнете върху Примери. Тук ще отворите S3 импортния манифест. Както можете да видите тук, аз вече съм попълнил информацията за моята работа по внос. Така че нека продължим напред и да погледнем малко по-отблизо.

Както можете да видите, първото нещо, което трябва да направите, е да въведете отново вашия идентификатор за ключ за достъп. Трябва да се отървете от скобите и просто да я поставите веднага след двоеточие. Следващото нещо, което ще искате да направите, е да въведете името на кофата. Вие ще трябва да продължите и да създадете кофа, която аз ще продължа и ще покажа след това, но засега продължете и напишете името, което искате, където ще бъдете данни съхраняват. Така че, ако създадете папка, наречена Back Up, от всичко, което имате на устройството си, всички папки или каквото и да е вътре в нея, ще отидат под това име на кофа.

Следващото нещо, което ще искате да направите, е да въведете ID на вашето устройство. Това е уникален идентификатор за външния ви твърд диск. Това може да бъде серийният номер, който е на гърба на твърдия диск. Ако нямате сериен номер, който е на гърба на вашия твърд диск, това, което можете да направите е да създадете свой собствен номер или да създадете идентификатор. Просто напишете това на нещо, стикер, който можете да поставите на вашето устройство и след това просто напишете тази стойност тук. Той просто трябва да бъде нещо, което е същото на устройството и в този файл. Изтриване на устройството, вече е настроено на Не, така че ще оставите това. Можете да оставите следващия. Нивото на обслужване е стандартно, можете да го оставите. И обратния адрес, вие ще продължите напред и ще попълните адреса си, както направих тук. В оригиналния файл има някои полета по избор. Трябва да продължите и да премахнете тези, ако няма да ги използвате. Така че можете просто да изтриете тези линии.

Добре, следващото нещо, което ще направим, след като попълним файла с манифеста, е да го запишем в съответната директория. За да направим това, ще продължим и ще щракнем върху File, Save As и ще се върнем обратно в директорията на Web Services Tool за експортиране на импортиране. Това е и местоположението на този файл със свойства на точки, който попълнихме по-рано. Тук ще имате и да зададете името си на файла, “my import manifest.txt. "Тъй като Save As Type вече е txt, не е нужно да въвеждате това в името на файла. Продължете и кликнете върху Запазване.

Сега, след като редактирахме файла AWS Credentials и кредитирахме файла My Import Manifest, можем да продължим и да създадем кофа в Amazon S3. Това е много лесно. Това, което ще направите, е да отидете на aws.amazon.com и ще продължите и кликнете върху конзолата My Account и след това щракнете върху AWS Management Console. След като влезете в системата, трябва да получите екран, който изглежда така с всички различни уеб услуги на Amazon. В този момент всичко, което ни интересува, е Amazon S3, който е долу долу вляво. Кликнете върху това и ще заредите конзолата S3. И както можете да видите тук, всъщност няма много други неща освен кофите. Така че аз имам две кофи, това е моят архив на моя synology nas, който е устройство за съхранение тип мрежа.

Това, което ще искате да направите, е да кликнете върху Създаване на кофа и да мислите, че ще продължите и ще дадете името на кофата си. Можете също да изберете различен регион, но ви предлагам автоматично да отидете в региона, който той запълва за вас. Името на кофата може да има само точки и трябва да е уникално в целия регион, където се съхранява. Така че, ако някой друг вече има това име на кофа, ще ви даде грешка. Например, ако кажа „nasbackup“ и казвам „създай“, това ще ми даде грешка, че исканото име на кофа не е налице. В този случай можете да използвате точки, така че да можете да поставите „точка“ и каквото и да искате и да кликнете върху „Създаване“, и ако това е уникално, то тогава ще продължи и ще създаде името на кофата. Така че можете да продължите и да създадете кофа, т.е. ние сме данни за целия външен твърд диск, който ще се съхранява.

На този етап може да се чудите какво още трябва да се направи. Така че нека да разгледаме какво сме направили досега. Подписахме се за услугата AWS. Изтеглихме и изтеглихме инструмента. Редактирахме ключовете за файлове и редактори. Продължихме и създадохме файла с манифеста, който се записа в манифеста за импортиране в същата директория като файла с идентификационните данни и създадохме кофа на Amazon S3. Така че има само още няколко неща, за да направите това.

Следващото нещо, което трябва да направим, е да създадем заявка за работа, като използваме инструмента за командния ред на Java. Това е малко технически и това е може би най-техническото нещо, което ще трябва да направите, но наистина не е толкова трудно. Сега, за да създадем тази заявка за работа, трябва да изпълним команда Java в командния ред. Но за да направим това, трябва да инсталираме Java development kit. Това е различно от средата на изпълнение на Java, която обикновено е инсталирана на повечето компютри, но няма да ви позволи да изпълнявате Java команди в командния ред.

За да направите това, това, което ще направите, е да отидете в Google и просто да направите търсене на Java SE, а това е Java Standard Edition. Продължете и кликнете върху първата връзка тук и това ще ви отведе до тази страница. Тук можете да превъртите надолу и ще видите три опции: JDK сървър, JRE и JRE. Не е нужно да се притесняваме за тези две тук. Ще продължим да изтегляме JDK. На следващата страница кликнете върху Приемам лицензионното споразумение и след това можете да изтеглите файла, който съответства на спецификациите на вашата система. В моя случай изтеглих изпълнимия 64-битов файл на Windows.

Сега, след като сте инсталирали изпълнимия комплект на Java, можем да продължим и да изпълним командата Java, и можете да продължите напред и да видите тази команда тук в документацията, която съм подчертал тук. И между другото, ако трябва да стигнете до тази документация, най-лесният начин е да отидете в Google и да потърсите „Документи за експортиране на внос на AWS“. След това кликнете върху създайте вашето задание за импортиране, след което щракнете върху създайте първата си задача за импортиране на Amazon S3 и ще бъдете пренесени на тази страница.

Сега можем да продължим и да изпълним командата, като отидем в командния ред. За да направим това, щракнете върху Старт, въведете CMD и натиснете Enter. Сега, когато имаме команден ред, трябва да влезем в директорията, където се намира инструментът за експортиране на внос на Amazon. В нашия случай това е в Downloads, а след това има папка, наречена Импортиране на уеб услуги. Така че, за да навигирате в директориите в командния ред, въведете “cd”, а след това ще напиша “downloads”, а след това отново ще напиша “cd”, и ще отида да въведете „инструмент за уеб услуги за износ за внос“, който е името на директорията. Сега, когато съм в тази директория, просто ще продължа и ще копирам тази команда и ще я поставя в командния ред.

Може да сте забелязали, че в командата, която току-що копирахме и поставихме, името на файла с манифеста е My S3 Import Manifest.txt. Мисля, че това е проблем с документацията, защото когато се опитах да го стартирам по този начин, имам грешка, казвайки, че файлът трябваше да бъде наречен My Import Manifest.txt. Така че просто преместете курсора и изтрийте S3 частта и трябва да можете да изпълните командата. Сега няма да продължа напред и да изпълня командата точно сега, защото вече го пуснах преди. Но когато отидете напред и натиснете Enter, трябва да получите нещо като това, създадена работа, идентификатор на задание, адрес за доставка на AW и съдържание на файла за подпис.

Съдържанието на файла с подписи е в основата си файл, който е създаден в главната директория тук под инструмента за импортиране на уеб услуги, наречен Signatures. Това ще бъде създадено, когато изпълните действителната команда. Ако всичко върви ОК, тогава можете да вземете този файл и ще трябва да копирате върху корена на вашия твърд диск.
Тук почти стигнахме до края. Следващото нещо, което трябва да направим, е да копираме файла с подписи в корена на твърдия диск. Можем да намерим файла, наречен Signature, в директорията с инструменти за импортиране на уеб услуги след като изпълните командата Java.

Втората до последната стъпка е да отпечатате опаковъчния лист и да го попълните. Така изглежда опаковката. Това е много прост документ. Можете да поставите дата, имейл адрес за електронна поща, номер за контакт, вашето име и телефонен номер, идентификационния номер на заданието и идентификатора, който сте поставили за вашето устройство. Отново можете да намерите този документ тук, извън документацията.

И накрая последната стъпка е просто да опаковате твърдия си диск и да го изпратите на Amazon. Има няколко малки неща, които трябва да вземете под внимание. Първо, трябва да включите захранването и всички захранващи кабели и интерфейсни кабели, така че ако е USB 2.0, 3.0, esata, трябва да включите USB кабела или esata кабела. Ако не, те ще ви върнат обратно. Също така ще трябва да попълните тази опаковка, която споменах по-рано и да я сложа в кутията. И накрая, ще изпратите пакета на адреса, който сте получили от тази команда за отговор, която изпълнихме.

Има две други малки неща, които трябва да се отбележат, когато се изпращате. Първо, ще се уверите, че етикетът за доставка има този идентификационен номер. Ако не, те ще го върнат обратно. Така че трябва да се уверите, че имате идентификационния номер на работното място в етикета за доставка. Второ, трябва да попълните и адрес за връщане. Това ще бъде различно от адреса за връщане, който сме поставили в файла на манифеста. Ако по някаква причина те не обработват твърдия ви диск, ако има проблем или нещо подобно, те ще върнат твърдия диск на адреса за доставка на етикета за доставка. Ако те обработват твърдия ви диск и могат да прехвърлят всички данни, те ще върнат твърдия диск на адреса за доставка, който имате в човека. Затова е важно да се постави адрес за доставка на етикета. Можете да изберете какъвто и да е превозвач, който искате. Избрах UPS. Добре е да има номер за проследяване и те могат да вършат всичко това за вас без проблем.

И това е всичко. Това е няколко стъпки и отнема малко време, когато го направите за първи път. Но след това, той е доста бърз и това е чудесен начин да се спестят много данни за Cloud, а Amazon също е евтин за съхранение. Така че, ако имате тон на ден, който трябва да съхраните, и искате да го архивирате някъде другаде, освен във вашия дом или на външния ви твърд диск, тогава Amazon Web Services S3 е чудесна възможност.

Надявам се, че ви хареса този урок Онлайн Технически съвети. Моля, върнете се и посетете.