Методология построения распределенных сетей передачи, обработки и хранения данных: анализ и выбор рациональной структуры. Монография. Том 1 - Александр Юрьевич Чесалов 4 стр.


 разработана методика анализа функционирования и выбора рациональной структуры региональной сети передачи, обработки и хранения данных;

 предложена методика определения и оптимизации операционных характеристик региональной сети хранения на протокольном уровне, позволяющая учесть взаимосвязь основных сетевых механизмов процессов передачи данных в условиях использования разнородных каналов связи.


Достоверность и обоснованность работы подтверждены теоретическими разработками ведущих ученых, которые легли в основу работы, а так же результатами практического использования разработанной методики.


Практическая значимость работы

В результате проведенных в рамках данной работы исследований сформирована алгоритмическая и методологическая основа проектирования региональных распределенных сетей, в условиях использования разнородных каналов связи.

Предложенная методика может быть использована при разработке и реализации сетевых проектов целевых программ информатизации регионов РФ, что позволит ускорить процесс проектирования, снизить финансовые и временные затраты при выборе приемлемого решения, построить или модернизировать региональную сеть, отвечающую предъявляемым требованиям к передаче, обработке и хранению данных.


Апробация работы

Основные положения, теоретические выводы и практические рекомендации работы докладывались автором на следующих всероссийских и международных конференциях: «Математические методы в технике и технологиях» (г. Санкт-Петербург), «Социокультурная динамика: философские и социологические проблемы» (г. Тверь), «Современная образовательная среда» (г. Москва), «Высокопроизводительные параллельные вычисления на кластерных системах» (г. Нижний Новгород), на Российском Форуме разработчиков и администраторов информационных систем на базе технологий IBM Lotus Domino. (г. Москва).


Публикации

По результатам исследований опубликовано девять печатных работ12,13,14,15,16,17,18,19,20.


Структура работы. Работа состоит из введения, четырех глав, заключения, списка литературы и приложения.

Глава 1

Анализ проблем повышения эффективности функционирования региональной сети передачи, обработки и хранения данных (РСХД): Аналитический обзор и Постановка задачи

1.1 Актуальность проектирования и повышения эффективности региональных распределенных сетей

Информационные ресурсы являются одним из важнейших видов ресурсов для всех без исключения органов управления, в том числе и для областных органов государственной власти. Внедрение информационных систем представляет в настоящее время процесс, который происходит и в России, и за ее пределами, и отражает динамику и сложность экономики, расширяющиеся международные связи и кооперацию по решению ряда экономических, социальных и политических задач [21,22].

Анализ ситуации в регионах РФ показал, что в большинстве из них сетей передачи, обработки и хранения данных, в полном понимании рассматриваемой в работе концепции региональных сетей не существует. Например, в более чем 50% районах Тверской области отсутствуют высокоскоростные каналы передачи данных, более 80% устаревшего сетевого и серверного аппаратно-программного обеспечения и т. д. [23].

Во многих странах создана и действует информационная индустрия с мощной инфраструктурой, обеспечивающей необходимую поддержку большого числа баз данных о различных видах деятельности общества на базе широкого использования технологий распределенных сетей хранения данных  SAN и NAS.

Опыт ведущих стран показывает, что в процессе информатизации для получения результата необходимо, в первую очередь, решить проблемы учета имеющихся трудовых, финансовых и материальных ресурсов, в виде соответствующих социально  экономических баз данных. В этом случае появляется возможность решать вопросы комплексного развития территории на основе анализа многоаспектной информации.

Кроме того, постоянное развитие и увеличение информационно-технического потенциала предприятий и учреждений, потребностью управления корпоративными сетями инициирует потребность к территориально распределенной информационной интеграции с использованием сети Internet и технологий РСХД, что приводит к резкому увеличению передаваемого по сети трафика в условиях использования, как правило, низкокачественных и низкоскоростных линий связи и необходимости хранения больших массивов данных. Следствием этого, стабилизация и совершенствование социально-экономической сферы регионов требуют поддержки, совершенствования и развития региональных сетей передачи, обработки и хранения данных.

РСХД предъявляют высокие требования к эффективному использованию средств передачи данных и уровню обслуживания клиентов сети. В связи с этим, одной из важнейших проблем, которую приходится решать при проектировании и внедрении сетевых проектов и их эксплуатационном сопровождении, является проблема адекватного описания процессов в моделях, используемых при проектировании и организации эффективной работы распределенных региональных сетей в различных условиях функционирования.

На сегодняшний день задача построения региональной сети передачи, обработки и хранения данных стоит достаточно остро не только для отдельно взятого региона, но и имеет большое практическое значение для большинства регионов Российской Федерации.

1.2 Обзор технологий построения и проблемы организации эффективного функционирования РСХД

За последние годы появилось много новых разработок в области сетевого хранения данных. На сегодняшний день выделяют две концепции построения РСХД: первая  Network Attached Storage (NAS) и вторая, быстро развивающаяся, Storage Area Network, базирующихся на трех основных стандартах (протоколах), которые используются для организации РСХД  Fiber Channel, SCSI, InfiniBand и их модификациях для RNAS  iFCP, iSCSI [24,25].

Несмотря на то, что для построения РСХД в девяноста восьми случаях из ста используется технология Fiber Channel условная грань, разделяющая технологии хранения на сетевые устройства, постепенно стирается, а рынки альтернативных технологий расширяются (рис.1).


Рисунок 1. Сегментация рынка SAN


Одной из наиболее заметных тенденций в развитии распределенных сетей стало резкое увеличение спроса на сетевые устройства хранения. По прогнозам аналитической компании Yankee Group, в 2002 году доход от реализации систем хранения SAN вырос на 12,6% по сравнению с показателями предыдущего года, а к 2005 году он составит 8,56 млрд. долларов.


Рассмотрим три основных технологии, которые могут быть положены в основу региональной сети хранения данных.


Fiber Channel  технология передачи данных на уровне блоков (в отличии от передачи на уровне файлов) с предоставлением качества и класса услуг, включая гарантированную доставку пакетов. Данная технология позволяет осуществлять доступ к данным на уровне блоков быстрее, чем на уровне файлов, и дает возможность решить проблемы с безопасностью и перегрузкой системы. К недостаткам технологии Fiber Channel можно отнести то, что она поддерживает передачу данных на расстояния не более 10 км. С целью решить данные проблемы в Lucent Technologies и Cisco была разработана новая технология Fiber Channel IP (FCIP). Но анализ показал, что технология FCIP хоть и удовлетворяет требованиям гарантированной доставки, однако туннелирование в TCP/IP может стать серьезным препятствием, поскольку процедура обработки инкапсулированных пакетов способна негативно повлиять на эффективность и скорость системы в целом.

Альтернативой FCIP для построения РСХД служит протокол iFCP (Internet Channel Protocol), предложенный компанией Nishan, в основе которого лежит технология IP. Он предназначен для соединения шлюзов на базе TCP/IP, при котором Fiber Channel отображается на IP. Важно отметить, что iFCP предполагает замену коммутаторов и маршрутизаторов Fiber Channel на системы на базе IP, сохраняя способность связывать устройства Fiber Channel через IP. Данная технология может использоваться, как связующее звено между распределенными сетями передачи и обработки информации, так и в рамках сетей Fiber Channel [26].


iSCSI (Internet SCSI)  технология позволяющая передавать команды SCSI поверх протокола IP и предназначена для передачи данных на уровне блоков с применением устройств, поддерживающих ленточные библиотеки и дисковые массивы, а также хост адаптеры и коммутаторы IP. Данная технология была разработана и поддерживается IBM, Cisco и Storage Networking Industry Association. Его применение позволяет с помощью сети IP объединить территориально распределенные центры обработки информации региональной сети, с одной стороны, и и устройства хранения данных  с другой, решив тем самым проблему удаленного доступа к данным, а в последствии и резервного копирования из любого сегмента региональной сети. Технология iSCSI позволяет также одновременно организовать несколько каналов ввода/вывода между несколькими конечными устройствами при наличии всего одного порта Ethernet. Но широкое распространение данного протокола ограничивается пропускной способностью существующих сетей IP, которой может быть недостаточно для обеспечения доступа к хранимой информациис требуемыми параметрами. Исходя из этого, для снижения задержек и возможных ошибок для передаваемых блоков данных (команд SCSI) существующие сети должны быть адаптированы для работы iSCSI [27].


InfiniBand  технология, осуществляющая передачу данных на скорости 2,5 Гбит/с, разработанная компанией Intel и поддерживаемая Dell, IBM, Hewlett-Packard, Microsoft и Sun Microsystems. Спецификация InfiniBand описывает коммутируемую архитектуру «точка-точка», обеспечивая множеству устройств ввода/вывода возможность посылки одновременных запросов к процессору системы таким образом, чтобы в процессе передачи данных не возникло «узких» мест. Ее применение направлено на повышение производительности и масштабируемости кластерных систем хранения и обработки данных, а также подсистем РСХД.

Теперь рассмотрим и проанализируем технологии, которые используются как базовые для описанных выше, при проектировании региональной распределенной сети передачи, обработки и хранения данных на примере Тверского региона.

1996 год ознаменовался бурным ростом и развитием рынка коммутируемых технологий. Применение технологии коммутации оказало влияние на все аспекты обеспечения межсетевого обмена, начиная от типов продуктов кончая способом построения сетей, и обеспечило реальные выгоды в повышении производительности, упрощении и снижении стоимости проектирования, как локальных, так и глобальных сетей (рис.2) [28,29,30,31,32,33].

Для построения региональных сетей хранения существуют порядка десяти ведущих технологий обеспечивающих надежную и скоростную передачу данных. Сейчас основной моделью передачи данных по магистральной сети стала следующая цепочка: оптика  сеть SDH  сеть АТМ  сеть IP.

Большое распространение получили сети FrameRelay, ATM, различные варианты Ethernet и др.


Рисунок 2. Продажа коммутирующих концентраторов с 1994 по 1999 годы


Но в настоящее время наличие раздельных сетей становится непозволительной роскошью, поэтому столь высок интерес к технологиям, обеспечивающим совместную передачу разнородной информации с требуемым качеством.

Технология SDH (Synchronous Digital Hierarchy) представляет собой комплекс международных стандартов, относящихся к синхронному мультиплексированию и передаче данных. Оборудование SDH может передавать информацию со следующими линейными скоростями  155Мбит/c  2,5 Гбит/c.

Технология ATM может использоваться для передачи разных типов информации и одновременно поддерживать широкий спектр пользовательских приложений, в том числе оригинальных приложений ATM, унаследованных приложений для локальных сетей, голоса и видео. Способность передавать голос, данные, видео и мультимедийный трафик по глобальной сети является ключевым преимуществом ATM, так как он предоставляет одну общую сетевую технологию для общедоступных и частных сетей. Другим достоинством ATM является масштабируемая пропускная способность. В настоящее время скорость варьируется в диапазоне от 1,544 Мбит/с до 622 Мбит/с.

Технологии Fast Ethernet и ATM можно использовать для повышения производительности и управляемости различных сетей целым рядом способов. В конфигурации, приведенной на рисунке 3 коммутаторы, предоставляют многочисленные выделенные соединения на 10 Мбит/с с концентраторами в пределах всей организации. Коммутаторы образуют магистраль Fast Ethernet для разделяемых локальных сетей и серверов, они обеспечивают также соединение с территориальной магистралью ATM через маршрутизатор с интерфейсом ATM.


Рисунок 3. Повышение производительности сети с использованием технологий Fast Ethernet и ATM


Технология DTM (Dynamic synchronous Transfer Mode) создавалась с целью более рационального использования пропускной способности оптических сетей, поддержки широкополосного трафика в реальном масштабе времени и групповой адресации, обеспечения перераспределения ресурсов сети между сеансами связи. Она базируется на стеке из восьми протоколов и обеспечивает передачу данных со скоростью от 512 Мбит/c [34].

Наиболее перспективным подходом к построению региональных сетей передачи и хранения данных является использование спутниковой связи. Она имеет существенные преимущества над наземными системами связи. Наиболее значимыми, из которых является скорость передачи данных. Вследствие использования беспроводных технологий спутниковые сети могут достичь практически любых удаленных географических областей, в том числе в регионах с недостаточно развитой коммуникационной инфраструктурой. Благодаря своей независимости от услуг телекоммуникационных компаний, спутниковая связь не подвержена перерывам в работе, например, из-за повреждения кабеля.

Однако существуют и недостатки. В частности, спутниковая связь очень дорога и относительна молода. Кроме того, крупные проекты в данной области не так-то просто воплотить в жизнь, для этого компания должна как минимум располагать значительными финансовыми средствами и получить одобрение в нескольких национальных и международных организациях. С технической точки зрения потенциальной проблемой является блокирование принимаемого со спутника сигнала зданиями и даже листвой деревьев в зависимости от типа применяемой технологии. Кроме того, сейчас стоит наиболее остро вопрос защиты информации: при спутниковой связи сигнал может быть принят любым неуполномоченным лицом. Шифрование спутниковых каналов не осуществляется, но некоторые производители предлагают программное обеспечение шифрования, с помощью которого можно защитить трафик [35].

Назад Дальше