Amélioration du taux de transfert de données sur Amazon EC2
J'ai un 1 Go Volume EBS monté sur une instance EC2,
Je suis la copie de 600 mo de données binaires à partir d'un Disque Dur Local (via Connexion RDS)
et le processus de copie de windows est de montrer 10 Heures restantes.
Si j'ai une connexion à Haute Vitesse (+de 100 Mbit /s)
Quel que soit le volume de données, taux de transfert de données est de 1 Min /MO (j'.e 16Kbs /Sec)
Je suis hésitant entre la lecture de Moby Dick en face de mon poste de travail, ou tout simplement prendre un jour de repos.
Sont-il raisonnable options pour accélérer le taux de transfert ?
(Idéalement 512 Kbit/S au minimum)
Je suis très ouvert à TOUTE solution pour raccourcir au maximum le téléchargement/téléchargement/de et instance EC2.
Merci d'avance.
EDIT :
Je viens de tombé sur [Amazon Export/Import de Service][1]
"AWS Import/Export accélère le transfert de grandes quantités de données entre le nuage AWS et les périphériques de stockage portables que vous nous envoyer par la poste"
"mail", ils signifient littéralement vous "matériellement" l'expédition de votre périphérique de stockage pour Amazon.
Ne pas dire que c'est l'âge de pierre, c'est la MARQUE de la nouvelle TECHNOLOGIE, Mec ! 🙂
EDIT2 :
Cela sonnait très bien: [Aspera pour AWs][2], Mais malheureusement trop cher;
Adapté pour les entreprises Fortune 500 avec de gros besoins et des espèces de grands.
source d'informationauteur
Vous devez vous connecter pour publier un commentaire.
Parfois, si vous voulez quelque chose de fait, il est mieux de le faire vous-même 🙂
Je n'ai rien trouvé de satisfaisant sur le net j'ai donc passé la soirée à faire un plutôt Complète Banc de Test de mon propre.
J'ai testé quelques solutions de rechange ou de scénarios et voici les résultats :
Serveur FTP installé sur EC2 est Filezilla Serveur (configuration correcte est délicat)
Client FTP utilisé pour ce Banc d'essai a été WinSPC (Filezilla Client n'a pas fonctionné. voir cet autre post
Légende : [HC] représente le Foyer de Connexion (100MBps)
La Bande Passante En Téléchargement
RDS Upload : 15 Ko/S => Pire encore Jamais
Téléchargement FTP [Serveur FTP Installé sur EC2]: de 100 Ko/S
Télécharger S3 à partir d'AWS Management Console de HC: 60 Ko/S
Télécharger S3 à l'aide d'AWS interface de la Console de EC2 : 145 Kb/S
Télécharger S3 en utilisant S3 Navigateur de HC: 120 Ko/S
Télécharger S3 en utilisant S3 Navigateur de EC2 : 2000 Ko/S
Bande Passante De Téléchargement De
RDS de Téléchargement et de Téléversement: 15 Ko/S => Pire encore Jamais
Téléchargement FTP [Serveur FTP Installé sur EC2]: 360 Ko/S
Télécharger à partir d'AWS S3 interface de la Console de EC2 : 350 Ko/S
Télécharger à partir de S3 en utilisant S3 Navigateur: à partir de HC: 380 620 Ko/S
Télécharger à partir de S3 en utilisant S3 Navigateur: de l'EC2 : 3000 Kb/S
Conclusions :
Donc, dès maintenant, Amazon S3 combiné avec S3 Navigateur donne les meilleurs résultats.
(S3 Navigateur est juste une couche sur S3 je ne comprends pas pourquoi le débit de téléchargement est mieux)
Cependant, il faut garder à l'esprit qu'un Serveur FTP sur une instance EC2 a le grand avantage de la Cartographie directement un local EC2 Répertoire dans EC2. Contrairement au S3, il y a seulement un transfert de. En effet, S3 nécessite 2 Transferts : Forme de Ressources Locales pour S3/et à partir de S3 à l'EC2 et dans l'autre sens, alors que l'Accès FTP subventions de l'immédiateté en raccourcissant les cycles de transfert. En outre, il évite le coût de la S3.
Il est également intéressant de mentionner que l'Instance EC2 de la bande passante est vraiment fort. Il est donc bien plus intéressant -il va sans dire, d'utiliser des protocoles qui a vraiment de profiter de telles que S3 ou FTP, plutôt que de RDS.
J'espère que cela sera utile à d'autres personnes confrontées à la même question, et leur épargner un temps précieux.
Utilisation Aspera ou de Tsunami UDP et déplacer de 600 MO à votre Amazon EC2 infra (saut encadré). Puis interne de la copie de jumpbox pour windows ec2. Ma référence en matière montre tsunami UDP est assez rapide par rapport aux modes traditionnels.