Загружать данные параллельно

Мне нужно загрузить 20G данных с помощью ftp. Могу ли я сделать это параллельно (gnu?) Вот некоторые из ссылок на данные.

ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030893/ERR030893.fastq.gz ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030885/ERR030885_1.fastq.gz ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030885/ERR030885_2.fastq.gz ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030894/ERR030894.fastq.gz ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030886/ERR030886_1.fastq.gz ftp://ftp.sra.ebi.ac.uk/vol1/fastq/ERR030/ERR030886/ERR030886_2.fastq.gz 

Благодаря,

One Solution collect form web for “Загружать данные параллельно”

Хотя я не знаю о parallel , я знаю, что отличным инструментом для параллельной загрузки является aria2c .

Вот выдержка из раздела FTP / HTTP его руководства :

  • -s , --split=[N]
  • Загрузите файл, используя N соединений. Если задано больше N URI, используются первые N URI, а оставшиеся URI используются для резервного копирования. Если указано меньше N URI, эти URI используются более одного раза, так что общее количество N соединений производится одновременно. Количество подключений к одному и тому же хосту ограничено параметром --max-connection-per-server . См. Также параметр --min-split-size

  • По умолчанию: 5

  • Параллелизировать рекурсивное удаление с помощью find
  • Как найти максимальное ограничение параллельного выполнения?
  • Как я могу запустить этот скрипт bash параллельно?
  • Как сделать функцию доступной для команды `parallel` (GNU)?
  • Как bash лечит ">> ()"
  • «Нет имени пользователя PostgreSQL» - возможные проблемы параллелизма?
  • запрос повторно выполняется для сценариев цикла параллельно
  • Как поддерживать определенное количество процессов?
  • Как я могу подсчитать время, в течение которого система systemd должна загружать цель по умолчанию, а затем нарисовать ее?
  • Параллелизация цикла for с очень большим количеством итераций
  • Могу ли я ожидать линейного масштабирования с помощью GNU Parallel
  • Interesting Posts

    Как избежать того, что редактор Geany изменяет владельца файла при его редактировании?

    Как Cygwin Xwin -query Ubuntu 11.10 Xserver?

    Как упаковать Django-сайт для Debian (не пакет Python или яйцо)?

    Оказывает ли процесс на подчиненной стороне pty переговоры с линейной дисциплиной или с драйвером slave tty?

    vmlinuz файл для Ubuntu

    Советы по установке ~ под контролем источника

    Установите частоту обновления монитора в конфигурации Xorg

    Asus G750JH с предустановленной Windows 8 – я хочу с двойной загрузкой ArchLinux

    $ {D} в команде install

    SSH с chroot и работает только «sftp», «rsync» (оба)?

    объединить файлы csv по первому столбцу

    (Vim) Как использовать TAB для отступов во всех типах файлов?

    Как нормализовать нерегулярные значения данных

    Добавьте несколько подкаталогов под одним и тем же родительским каталогом в PATH

    Уменьшение отпечатка на stdout, если весь файл может отображаться на одном экране

    Linux и Unix - лучшая ОС в мире.