Google начинает перестройку

Поступила информация о том, что Google собирается полностью изменить файловую систему Google File System (GFS).
Разработка Google File System была завершена в конце девяностых годов прошлого века. Её создатели даже и не задумывались о том, какую нагрузку ей предстоит выдерживать в последующие годы. Кроме этого, GFS была оптимизирована для пакетной обработки данных, так как Google в первую очередь необходимо было сохранять и индексировать полученную от поисковых роботов информацию.
В спецификации GFS сообщается, что время отклика на запрос менее важно, чем обеспечение высокой пропускной способности. Современные приложения Google, такие как Gmail и YouTube, наоборот, требуют быстрого отклика на действия пользователя.
Основу GFS составляют главный узел и блочные сервера (master node и chunkservers соответственно). Главный узел осуществляют запросы к серверам, а те, в свою очередь, возвращают блоки данных. Одним из недостатков такой системы является наличие только одного главного узла. Если узел отказывает, то сервис может оказаться недоступным на долгое время. В процессе доработки GFS, разработчики сократили удалось это время с нескольких часов до 10 секунд.
Напомню, что несколько дней назад Google попросил владельцев сайтов протестировать его новый поисковый механизм. Побробнее об этом можно прочитать тут.