Advance повышает эффективность флэш-памяти в центрах обработки данных

Исследователи из Массачусетского технологического института разработали новую систему флэш-хранения, которая могла бы сократить вдвое энергию и физическое пространство, необходимое для одного из самых дорогих компонентов центров обработки данных: хранения данных.

Центры обработки данных. это серверные фермы, которые облегчают связь между пользователями и веб-службами, и являются одними из самых энергоемких объектов в мире. На них тысячи энергоемких серверов хранят пользовательские данные, а отдельные серверы запускают службы приложений, которые обращаются к этим данным. Другие серверы иногда облегчают вычисления между этими двумя кластерами серверов.

Большинство серверов хранения сегодня используют твердотельные накопители (SSD), которые используют флэш-память. электронно-программируемые и стираемые микросхемы памяти без движущихся частей. для обработки высокопроизводительных запросов данных с высокой скоростью. В документе, представленном на Международной конференции ACM по архитектурной поддержке языков программирования и операционных систем, исследователи описывают новую систему под названием LightStore, которая модифицирует твердотельные накопители для непосредственного подключения к сети центра обработки данных. без необходимости использования каких-либо других компонентов. и для поддержки вычислений более простые и эффективные операции хранения данных. Дальнейшие программные и аппаратные инновации беспрепятственно интегрируют систему в существующую инфраструктуру центра обработки данных.

В ходе экспериментов исследователи обнаружили, что кластер из четырех модулей LightStore, называемых узлами хранения, работает в два раза эффективнее, чем традиционные серверы хранения, что измеряется энергопотреблением, необходимым для запросов данных. Кластеру также потребовалось менее половины физического пространства, занимаемого существующими серверами.

Исследователи отказались от экономии энергии за счет отдельных операций хранения данных, чтобы лучше охватить полную экономию энергии системой. Например, при «случайной записи» данных, которая является наиболее ресурсоемкой операцией во флэш-памяти, LightStore работал почти в восемь раз эффективнее, чем традиционные серверы.

Есть надежда, что однажды узлы LightStore смогут заменить энергоемкие серверы в центрах обработки данных. «Мы заменим эту архитектуру на более простое и дешевое решение для хранения данных… оно займет вдвое меньше места и вдвое меньше энергии, но при этом обеспечит такую ​​же производительность пропускной способности». говорит соавтор Arvind, профессор Johnson в области компьютерных наук. научный сотрудник лаборатории информатики и искусственного интеллекта. «Это поможет вам в операционных расходах, так как потребляет меньше энергии и капитальных затрат, потому что экономия энергии в центрах обработки данных напрямую связана с экономией денег».

К статье Арвинда присоединились: первый автор Чанву Чунг, аспирант кафедры электротехники и компьютерных наук; и аспиранты Jinhyung Koo и Junsu Im, и профессор Sungjin Lee, все из Института науки и технологии Тэгу Кёнбук (DGIST).

Читайте так же

Как PewDiePie закончил копать в Индии, поздравляя ... В том, что может показаться жестокой иронией. для T-Series. и просто удачей. для PewDiePie. это, возможно, только что изменило игру битвы для большинства подписанных каналов YouTube в мире. До вчерашнего дня T-Series пользовался значительным успехом....
SanDisk выпускает самую быструю карту MicroSD емко... Целый терабайт данных теперь может помещаться на карту microSD. и теперь данные можно записывать со скоростью до 160 МБ в секунду. В понедельник, 25 февраля, Western Digital анонсировала карту памяти microSDXC SanDisk Extreme UHS-I емкостью 1 ТБ на В...
Как Сделать Скрин На Самсунге J1... Как сделать скрин на “Самсунге”? Такой вопрос нередко задают обладатели соответственных устройств. Работают аппараты южнокорейского производителя работающие под ОС семейства “Андроид”. Эта ОС славится тем, что предоставляет фа...

Добавление значения в flash

Основной проблемой эффективности современных центров обработки данных является то, что архитектура не изменилась для размещения флэш-памяти. Несколько лет назад серверы хранения данных состояли из относительно медленных жестких дисков, а также множества динамических схем памяти с произвольным доступом (DRAM) и центральных процессоров (CPU), которые помогают быстро обрабатывать все данные, поступающие с серверов приложений.

Сегодня, однако, жесткие диски в основном были заменены на гораздо более быстрые флешки. «Люди просто подключили флэш-память туда, где раньше были жесткие диски, ничего не меняя». говорит Чанг. «Если вы можете просто подключить флэш-накопители напрямую к сети, вам не понадобятся эти дорогие серверы хранения».

Для LightStore исследователи впервые модифицировали твердотельные накопители, чтобы получить к ним доступ в виде «пар ключ-значение», очень простого и эффективного протокола для получения данных. По сути, пользовательские запросы отображаются в виде ключей, как строка чисел. Ключи отправляются на сервер, который высвобождает данные (значение), связанные с этим ключом.

Концепция проста, но ключи могут быть очень большими, поэтому их вычисление (поиск и вставка) исключительно в SSD требует большой вычислительной мощности, которая используется традиционным «уровнем флеш-трансляции». Это довольно сложное программное обеспечение работает на отдельном модуле на флэш-диске для управления данными и их перемещения. Исследователи использовали определенные методы структурирования данных для запуска этого программного обеспечения для управления флэш-памятью, используя лишь небольшую часть вычислительной мощности. При этом они полностью выгружали программное обеспечение на крошечный контур флэш-накопителя, который работает намного эффективнее.

Эта разгрузка освобождает отдельные процессоры, уже находящиеся на диске. которые предназначены для упрощения и более быстрого выполнения вычислений. для запуска специального программного обеспечения LightStore. Это программное обеспечение использует методы структурирования данных для эффективной обработки запросов пары ключ-значение. По сути, не меняя архитектуру, исследователи превратили традиционную флешку в дисковод ключ-значение. «Итак, мы добавляем эту новую функцию для флэш-памяти, но на самом деле мы ничего не добавляем». говорит Арвинд.

Адаптация и масштабирование

Читайте так же

Galaxy S9 shock — Владельцам этого флагмана ... Обновление Samsung Galaxy S9 (Изображение: SAMSUNG) Если у вас есть Galaxy S9, есть новости, которые вы не хотели бы слышать. С тех пор как Samsung выпустила свой новый многофункциональный Galaxy S10, старый флагман фирмы потерял большую часть свое...
Характеристики Xiaomi Redmi 6 Pro 64 Xiaomi Redmi 6 Pro — продвинутый телефон пользующейся популярностью экономной серии. Аппарат получил престижный безрамочный дизайн, и дополнительно сдвоенную камеру. Анонс девайса состоялся летом 2018 года. Сяоми Редми 6 Про получил качественный дюра...
Gmail для iOS получает столь необходимый жест смах... Google недавно объявил о совершенно новом дизайне мобильных приложений для Gmail со многими новыми улучшениями производительности. Компания добавила в Gmail новое действие смахивания для iOS, чтобы выполнить любое из следующих действий: Архивировать,...

Задача состояла в том, чтобы обеспечить доступ серверов приложений к данным на узлах LightStore. В центрах обработки данных приложения получают доступ к данным через различные структурные протоколы, такие как файловые системы, базы данных и другие форматы. На традиционных серверах хранения используется сложное программное обеспечение, которое обеспечивает доступ к серверам приложений по всем этим протоколам. Но это требует значительного количества вычислительной энергии и не подходит для работы в LightStore, который использует ограниченные вычислительные ресурсы.

Исследователи разработали очень легкое в вычислительном отношении программное обеспечение, называемое «адаптер», которое переводит все пользовательские запросы от сервисов приложений в пары ключ-значение. Адаптеры используют математические функции для преобразования информации о запрашиваемых данных, таких как команды из определенных протоколов и идентификационные номера сервера приложений, в ключ. Затем он отправляет этот ключ соответствующему узлу LightStore, который находит и высвобождает сопряженные данные. Поскольку это программное обеспечение проще в вычислительном отношении, его можно установить непосредственно на серверы приложений.

«Какими бы ни были данные, к которым вы обращаетесь, мы выполняем перевод, который сообщает мне ключ и значение, связанное с ним. При этом я также убираю некоторые сложности с серверами хранения». говорит Арвинд.

Последнее нововведение заключается в том, что добавление узлов LightStore в кластер линейно масштабируется с пропускной способностью данных. скоростью, с которой данные могут обрабатываться. Традиционно люди размещают твердотельные накопители в центрах обработки данных, чтобы обеспечить более высокую пропускную способность. Но, хотя емкость хранилища данных может возрасти, пропускная способность повышается только после нескольких дополнительных дисков. В ходе экспериментов исследователи обнаружили, что четыре узла LightStore превышают уровни пропускной способности при одинаковом количестве твердотельных накопителей.

Эта история опубликована благодаря MIT News (web.mit.edu/newsoffice/), популярному сайту, который освещает новости об исследованиях, инновациях и обучении в MIT.

Предоставлено: Массачусетский Технологический Институт

Читайте так же

Утечка Galaxy S10 позволяет нам взглянуть на офици... Теперь, когда просочились практически все функции, детали дизайна и спецификации линейки Galaxy S10, может показаться, что обсуждать больше нечего, пока Samsung официально не представит телефоны в среду. Но Интернет никогда не отдыхает, и за последни...
Как На Леново Переместить Приложения На Карту... Сообщение об ошибке, значащей недочет места в памяти вашего телефона, приходит в самый внезапный момент. Многим обладателям такое сообщение принесло много проблем. Беря во внимание, что обновления многих приложений происходят автоматом, мы не обязате...
Дни ушли впечатления Веселые времена мотоцикла меш... Отнюдь не мерзкий, но приключенческие приключения на велосипеде бледнеют по сравнению с другими хитами PS4. Сэм Мачковеч. 25 апреля 2019 12:01 UTC Детали игры Серия непревзойденных видеоигр с открытым миром от Sony не обязательно застопорилась с ...

Author: dakus