Гжегож Цажковски, работающий системным инженероv в компании Google, разместил сообщение в официальном блоге Google в котором говорится о том, что в экспериментах с файловой системой Google File System был установлен рекорд по скорости передачи данных. 1 Петабайт данных (10 трлн 100-байтных файлов) был передан 4000 клиентских компьютеров всего лишь за 6 часов и 2 минуты.
1 петабайт данных дает возможность 12 раз скопировать все файлы Библиотеки Конгресса США , которая считается наибольшей библиотекой в мире.
По информации сайта CyberSecurity.Ru большинство опытов компании Google касаются MapReduce – ключевого компонента программной инфраструктуры, который реализует многопроцессорность. На сегодняшний день при создании подходящих условий для MapReduce основной единицей информации уже стал терабайт.
Буквально на днях сотрудники компании Google получили еще один поразительный результат по пересылке данных – 1 терабайт информации при помощи инфраструктуры компании был разослан на 1000 клиентских компьютеров всего за 68 секунд. Сортировка 1 терабайта информации и ее пересылка 910 компьютерам заняла 209 секунд.
Цажковски также сообщил, что учитывая особенности архитектуры поисковой системы Google, для реализации возможности хранения 1 петабайта данных понадобится приблизительно 48 000 винчестеров, причем при обычных условиях система работает с трехкратной избыточностью, то есть каждый блок данных повторяется трижды.
