‚опросы и ответы

ђешили делать сеть, но не знаем, с чего начать...

Q: <Ђлексей ‹Япкусов, —ертаново> “знав о сети, котораЯ создана у вас в городе, решил попробовать сделать подобный эксперимент в своем доме. ђешить решил, а знаний о построении сетей и их работе нет. Џосоветуйте...

‘ложность дела построениЯ сетей слишком завышена в нашем сознании. ѓлавное в успехе построениЯ сетей--твердое желание иметь сеть. ђешили?--„елайте! Ќе сложное это дело.

Ќа нашем опыте и опыте других знаю, что только это--твердое желание сделать сеть--определЯет успех дела. ќто, а вовсе не изначальное наличие знаний, денег или иных ресурсов. € "доказательства от обратного" видны сплошь и рЯдом--потраченные в крупном городе миллионы сетевых спонсорских долларов без ощутимой отдачи длЯ населениЯ. „а за эти деньги, да по разумным технологиЯм, да используЯ труд энтузиастов...

џ серьезно думаю, что осетенить ђоссию надо. ‚сю. ‚се дома и предприЯтиЯ. € массовое осетенение--региональные сети--дело рук самих "осетенЯемых". Џо другому работу таких масштабов не сделаешь. (ђазве, что только магистрали--национальное дело, дело государства. € по хорошему: магистральнаЯ национальнаЯ сеть--одна и по доступным ценам, лучше всего--государственнаЯ и бесплатнаЯ длЯ подключениЯ региональных сетей...)

„елайте свою сеть--не боги сети тЯнут. Љстати, по завершению сети можете посмотреть на денежное исчисление выполненной своими руками работы (возьмите расценки любой кабельной фирмы: прибить 1 м. кабелЯ--$x, поставить разъем--$y...) Џро инсталлЯцию и наладку ЏЋ и не говорю. “верЯю, получитсЯ отличнаЯ самооценка.

„умаю, многие не берутсЯ сами делать сеть именно поэтому: "если это стоит таких денег, значит это действительно сложнаЯ работа и Я не справлюсь. ‹юди-то, небось по заграницам обучались, экзамены на сертификат сдавали..."

€ обучаютсЯ, и экзамены сдают, но... „лЯ Ethernet--от лукавого это все. Љаждый сможет, если захочет. ’о же можно сказать и про любые иные региональные сети (микрорайон, муниципальный округ крупного города, райцентр, район и даже область...)

“верен--все получитсЯ. € будет правильно--научилсЯ сам, научи другого--если ‚ы поможете другим. "Џирамида передачи опыта", как в ѓерболайф или Mary Cay Cosmetics (но не пирамида ЊЊЊ ;-). ‘ерьезно, подумайте о подробной записи всей ‚ашей истории и публикации почасовой и посантиметровой инструкции--"‘амоучитель по русским народным сетЯм"--"ЉулинарнаЯ книга сетей по-домашнему". Љомпьютерра и WWW--хорошие места длЯ этого описаниЯ.

‘оветую каждому, кто хочет, но сомневаетсЯ--посмотрите сокращенное эпистолЯрное описание истории домовой сети в —ертаново (Њосква), созданной энтузиастами во главе с Ђлексеем ‹Япкусовым. Ћбратите внимание на даты событий:

970901 -- "решил попробовать сделать подобный эксперимент в своем доме. ђешить решил, а знаний о построении сетей и их работе нет."
—ерез неделю -- 970908 -- "Џервые три подключениЯ готовы. ’Яну кабель к остальным... Џостепенно сеть наша увеличиваетсЯ. ЏоЯвилсЯ желающий подключитьсЯ в соседнем доме. џ ему посоветовал найти хоть 2-3 человека, а то на одного дороговато будет"
—ерез три недели -- 970926 -- Џриезд в Џереславль. ‘еть уже весьма приличнаЯ--могу спутать по забывчивости, но примерно 3 хаба, объединенных 10Base-2 и полтора десЯтка подключений 10Base-’. Ћбсуждены варианты установки PC-роутера и организации серьезного канала от московского провайдера в —ертаново.

Љак пишет Ђлексей--"Џока с удовольствием пользуюсь возможностЯми одноранговой сети. —естно говорЯ--мне нравитсЯ! ‚от так--*тЯп-лЯп золотые руки* и с шуточками-прибауточками что-то построили."

€ последнее--эту сеть строЯт вовсе не специалисты. Љак Я понЯл, в группе (трое друзей) нет ни программистов, ни электронщиков. ‘ам Ђлексей по профессии-механик по автомобилЯм. € все у них получитсЯ. Џока крепко желание.

‚опросы о доступности полной информации о ‘’ "Ѓотик" и технологических решениЯх лаборатории "Ѓотик", о готовности лаборатории "Ѓотик" помогать другим--участвовать в построении региональных сетей.

Q: <Ѓорис —етвертаков> •отел бы познакомитьсЯ с ‚ашим проектом поближе, особенно технические и финансовые подробности.
Q: <ћрий ‘евостьЯнов, ImLab> џ имею доступ к сети только по UUCP Ќе могли бы вы прислать мне информациЯ о ‘’ "Ѓотик" по e-mail.
Q: <‚италий ѓанжин, „митрий ‘ырин> Ќе подскажите, как можно получить более подробную техническую и организационную информацию по компьютерной сети ЏереславлЯ-‡алесского?
Q: <‚ладимир Ѓадак, Sovam Teleport> ђасскажите пожалуйста поподробнее об организации сети в ‚ашем микрорайоне.

•оть и позже обещанного (конца сентЯбрЯ), но мы завершили достаточно полное описание ‘’ "Ѓотик" и всех наших сегоднЯшних технических решений-все это доступно в ‘ети:

http://www.botik.ru/tech/
ftp://ftp.botik.ru/pub/local/botik-technology
‚озможно получение файлов по электронной почте при помощи ftp-email-шлюза. „лЯ получениЯ файлов нужно отправить по адресу <ftpmail@botik.ru> письмо-запрос (см. образцы запросов ниже).

Џожалуйста, не забудьте ознакомитьсЯ с Џравилами копированиЯ и использованиЯ наших материалов.

Њы отдаем себе отчет, что мы не достигли абсолютной полноты описаниЯ. …сли у ‚ас будут вопросы по нашим материалам--пишите нам <tech@botik.ru>. Mы с благодарностью примем ‚аши вопросы. Ћни нам помогут пополнЯть материал.

Џримеры запросов к ftp-mail-шлюзу (письма на адрес <ftpmail@botik.ru>):

1) Џолучить список файлов:

open ftp.botik.ru
cd /pub/local/botik-technology
dir
quit

2) Џолучить некоторые файлы:

open ftp.botik.ru
cd /pub/local/botik-technology
get contents.koi8.html
get chapt2.koi8.html
quit

3) Џолучить все материалы в одном zip-архиве:

open ftp.botik.ru
cd /pub/local
get botik-technology.zip
quit

4) Џолучить инструкцию по всем возможностЯм ftpmail@botik.ru

help

Q: <Ђндрей Љошурников/TASK Ltd> Њогла бы лабораториЯ "Ѓотик" помочь в построении работоспособной системы телекоммуникаций?

„а, мы готовы к сотрудничеству с любыми группами в деле построениЯ региональных сетей. ќто может быть любой формы сотрудничество--от дружественной поддержки и ответов на небольшие вопросы, до непосредственного участиЯ в проекте.

Ћдной из самых удобных форм участиЯ в крупном региональном проекте ЯвлЯетсЯ следующаЯ схема:

организуетсЯ региональнаЯ группа специалистов (или-неспециалистов)--условно назовем ее лабораториЯ "Ѓотик-2"
лаборатории "Ѓотик" и "Ѓотик-2" вместе делают эскизный проект первой очереди сети;
реализациЯ проекта:

лаборатории "Ѓотик" обучает (в деле!) сотрудников лаборатории "Ѓотик-2" (преимущественно в Џереславле--сборка/наладка PC-роутеров, обучение кабельным работам...);
"Ѓотик-2" начинает выполнЯть построение своей сети, на первых порах вызываЯ специалистов лаборатории "Ѓотик" длЯ выполнениЯ сложных операций (шеф-монтаж), постепенно выполнЯЯ самостоЯтельно все большую и большую часть работы.

…сли в реализуемой сети будут необходимы действительно сложные элементы (оптоволоконные линии, магистральные каналы с пролетами более 12км и т.п.)--привлекаютсЯ (хоздоговора) сторонние организации:

оптика--ЋЋЋ "Ѓарс"
радиорелейные линии с пролетами более 12 км--Comptek и/или другие фирмы--пока подробнее писать о них мы не можем--реальное участие в совместном деле только планируетсЯ.

ђезультатом проекта ЯвлЯютсЯ-перваЯ очередь региональной сети и обученнаЯ группа специалистов "Ѓотик-2", способнаЯ:

сопровождать и расширЯть свою сеть;
помогать (обучение, шеф-монтаж) выполнЯть подобные проекты в других регионах.

Љонечно, такаЯ схема означает серьезное вовлечение лаборатории "Ѓотик" в проект и некоторую (разумную) оплату ее услуг по договору на проектирование, обучение и шеф-монтаж.

‘ейчас нами по данной схеме пройдены первые два этапа в проекте региональной сети ‚Яземского региона. ‘оставлен и скалькулирован технический проект длЯ 5 районов ‘моленской области, содержащий около 500 км магистральных радиорелейных каналов--включаЯ канал на Њоскву,-- опорнаЯ сеть (оптика 10/100Base-FL/FX, немного RadioEthernet) с тремЯ десЯтками узлов в ‚Язьме.

Џосмотрим, как будет пройден этап реализации сети...

‚опросы по многопортовым интерфейсным платам, в том числе--по плате SCS-16 (16 x RS-232C, FIFO, ISA, разработка лаборатории "Ѓотик").

Q: <Ђндрей Љорешков, €нЉом’ел> ѓде можно приобрести плату SCS-16?
Q: <‘ергей Љозлов, ’ЋЋ "ЊЂђ’"> ЊультипортоваЯ плата SCS-16--вы их производите или можете выслать схему?
Q: <ѓамид €саев>: Ќе могли бы ‚ы выслать мне информацию по дешевым мультипортовым платам (SCS-16 и Titan 9006)?

‘егоднЯ многопортоваЯ интерфейснаЯ плата SCS-16 (16 x RS-232C, FIFO, ISA, разработка лаборатории "Ѓотик") серийно никем не производитсЯ. Ќами сделан и эксплуатируетсЯ один экземплЯр платы.

ЉонструкторскаЯ документациЯ на интерфейсную плату SCS-16 (16 x RS-232C, FIFO, ISA, разработка лаборатории "Ѓотик") доступна:

http://www.botik.ru/tech/scs16.*.html
ftp://ftp.botik.ru/pub/local/botik-technology/scs16.*
‚озможно получение файлов по электронной почте при помощи ftp-mail-шлюза. „лЯ получениЯ файлов нужно отправить по адресу <ftpmail@botik.ru> письмо-запрос (см. выше).

Џожалуйста, ознакомьтесь с Џравилами копированиЯ и использованиЯ наших материалов, которые определЯют среди прочего и правила коммерческого использованиЯ наших материалов.

…сли какаЯ-нибудь фирма освоит массовое производство SCS-16 не только длЯ себЯ, но и длЯ других, мы напишем об этом в данных материалах.

Џлата Titan-9006 раньше продавалась в Њоскве.

Q: <ѓамид €саев> Ќе удалось найти мультипортовую плату Titan 9006 на московском компьютерном рынке--ни на www.newman.ru, ни на www.price.ru... :(

Џопробуйте свЯзатьсЯ с фирмой ’ехноком в Њоскве. (ул. ЏервомайскаЯ д.7 к.5, станциЯ метро ЏервомайскаЯ, тел. 367-32-18 и 367-60-25) ђаньше они продавали Titan 9006.

Q: <Ђндрей Љорешков, €нЉом’ел> Њожно ли включать в один PC-роутер (компьютер) 4 платы SCS-16 (что бы было 64 порта)?

’акаЯ возможность предусматрена в конструкции платы SCS-16--должно работать,--однако мы сами ее еще не опробовали.

Q: <Ђндрей Љорешков, €нЉом’ел> Ќужны ли длЯ SCS-16 специальные драйверы? …сли да, то есть ли драйверы под FreeBSD?

Ќет, специальные драйверы не нужны. ‘ программной точки зрениЯ плата выглЯдит как 16 последовательно расположенных стандартных портов UART 16550A. Џодобные платы существуют в природе (например, Boca-16). Џо крайней мере под Linux SCS-16 заработала без каких-либо усилий со стороны программистов.

‚опросы о космических каналах свЯзи, об иных внешних каналах длЯ региональных систем, о внешней коннективности

Q: <‘ергей Ђндреев> Ћсобый интерес длЯ менЯ представлЯет использование спутникового канала на 64Љ длЯ свЯзи с внешним миром. Џожалуйста, сообщите мне как можно организовать такой канал свЯзи, что длЯ этого требуетсЯ из оборудованиЯ и сколько стоит организациЯ и поддержание этого канала.
Q: <‚италий ѓанжин, „митрий ‘ырин> Љак ‚ам удалось получить спутниковый канал? ќто двухстороннЯЯ свЯзь со спутником или спутниково-телефоннаЯ (как DirecPC)? ‘колько это удовольствие стоит? Ќа сервере RUNNet информации о предоставлении таких услуг мы найти не смогли (может плохо смотрели?)
Q: <Ђлексей Џавленко> ‚о сколько вам обошлось оборудование длЯ спутниковой свЯзи и где его можно купить?

‘путниковый канал свЯзи Џереславль-‡алесский--‘.Џетербург 64 Kbps получен в рамках участиЯ ‘’ "Ѓотик" в ђоссийском проекте RUNNet. ќтот канал был полностью организован, включаЯ покупку оборудованиЯ, наладку и запуск канала, оплату аренды спутниковых ресурсов за счет средств проекта RUNNet (Њинистерства общего и профессионального образованиЯ ђ”). џ даже не могу сказать точно, во сколько обошлись Њинистерству покупка оборудованиЯ, установка, наладка и аренда спутниковых ресурсов в месЯц. ‡наю только, что эти цифры достаточно велики: десЯтки тысЯч долларов оборудование, несколько тысЯч долларов аренда спутникового канала 64 Kbps. Џриблизительно речь идет о таких цифрах:

наземнаЯ станциЯ космической свЯзи "Љалинка": 3,5м, до 1Mbps, около $40,000;
космический модем SPM-100 64KBps, $9,000 (фирма EF DATA).

Ќаш спутниковый канал--это двухсторонний (дуплексный) канал и тем самым он отличаетсЯ от композитных каналов системы Direct PC (свЯзь в одну сторону через спутник, в другую сторону телефоннаЯ модемнаЯ свЯзь).

Џри выборе различных способов реализации внешних каналов длЯ региональных систем следует учитывать, что спутниковые каналы это не самый доступный и не самый дешевый способ подключениЯ региональной сети. Љроме того, реализациЯ спутникового канала осложнена еще вопросами лицензированиЯ радиочастоты излучателЯ и вопросами ввода в строй объекта свЯзи--наземной станции спутниковой свЯзи. ’ак только по этим двум пунктам наши затраты (а вот это уже оплачивали €Џ‘ ђЂЌ и ђосЌ€€ ђЏ) составили более 30,000,000 рублей.

Џоэтому, при реализации региональных систем разработчикам следует:

‚нимательно изучить возможность получениЯ внешнего канала в рамках какого-либо федерального проекта развитиЯ телекоммуникационных магистральных сетей (как это у нас получилось с проектом RUNNet).
ђассмотреть вариант реализации внешнего канала без использованиЯ спутниковых ресурсов. ’акие варианты имеютсЯ и за весьма скромные деньги может быть реализован наземный канал свЯзи.

Џервый способ реализации наземного канала свЯзи с хорошей пропускной способностью свЯзан с многократными выделенными телефонными линиЯми--композитный канал. €деЯ реализации такого канала состоит в следующем:

ЂрендуетсЯ несколько наземных линий между региональной системой и точкой, куда предполагаетсЯ подключение. „опустим арендуетсЯ 4 выделенные телефонные линии. ‘тоимость аренды каждой линии зависит от ее протЯженности и от других условий местных представителей российской телефонной сети. Ћднако ее можно в среднем оценить в $400-$500 в месЯц (следует по возможности использовать тарифы длЯ бюджетных организаций--там, где остались различные тарифы длЯ различных организаций). ’аким образом аренда 4-х выделенных линий составит порЯдка $1,500--$2,000 в месЯц, что сравнимо с арендой 64 Kbps спутникового канала.
Ќа концах каждой линии устанавливаетсЯ пара модемов и организуетсЯ их свЯзь со скоростью 26--28 KBps. Њожно оценить эту часть оборудованиЯ (8 модемов) в $2,400.
Ќа каждой стороне счетверенной композитной телефонной линии устанавливаетсЯ PC-роутер (около $550 каждый, всего--$1,100), к которому подключаетсЯ четверка модемов. Џри работе с четверкой каналов PC-роутер использует режим "load balancing". Џри помощи быстрых интерфейсов PC-роутеры подключаютсЯ :

к региональной системе--Ethernet 10/100Base-2/T/TX--$20--80);
и к внешнему провайдеру (в худшем случае--сложный интерфейс--около $1,000).

‚ итоге получаем приемлемую стоимость конечного оборудованиЯ композитного канала (пропускнаЯ способность 100..140 Kbps с учетом MNP-сжатиЯ) и доступную арендную плату:

оборудование: от $3,600 до $4,500.
аренда: $1,500--$2,000 в месЯц.

„ругой вариант реализации высокоскоростных внешних каналов длЯ региональных систем свЯзан с использованием изделий серии RadioEthernet. „аже обычнаЯ комплектациЯ изделий серии Radio Ethernet позволЯет делать достаточно большие--12-ти километровые--пролеты радиолиний передачи информации со скоростью 2 Mbps. € в серии изделий RadioEthernet присутствуют антенные усилители, которые позволЯют увеличить дальность пролета до 50км.

€з таких 50-ти километровых пролетов--устанавливаЯ в конце каждого пролета PC-роутер и организуЯ точку переприема (приема-передачи) за счет использованиЯ двух плат RadioEthernet--можно построить собственную радиорелейную линию со скоростью передачи данных 2 Mbps. ‘тоимость такой линии можно оценить в $12,000 за каждый 50-ти километровый пролет. Џостроение такой линии дело весьма хлопотное и линиЯ, несомненно, требует лицензированиЯ (мощность антенного узилителЯ при работе на такие дальности может быть весьма большой). Џоэтому, разумно все построение линии, включаЯ лицензирование радиочастоты и сдачу законченной системы свЯзи под ключ, поручить специалистам фирмы Comptek.

„а, затраты на реализацию собственной радиорелейки оказываютсЯ достаточно большими, но эти затраты вполне приемлемы и они освобождают ‚ас от необходимости в дальнейшем платить за аренду пропускных способностей чужих сетей--‚ы становитесь владельцем собственной радиорелейной линии.

Q: <Ђндрей ( usa.net ;-)> •отелось бы узнать поподробнее о реальной скорости доступа к €нтернету в домах €Џ‘ ђЂЌ, подключенных к локальной сети. Ќапример, средние показаниЯ Netscape Navigator при обращении к www.yahoo.com и при перекачке файлов с ftp.cdrom.com

ђеальнаЯ скорость доступа к далеким узлам ‘ети, конечно, определЯетсЯ не нашей региональной сетью, а

состоЯнием наших внешних каналов--в некоторой степени, так как редко внешние каналы оказываютсЯ использованы на все 100%;
в большей мере--тем, что творитсЯ в мире на линии от нас до требуемого узла.

Ћбщеизвестные ‘етевые ЯвлениЯ--"заторы в …вропе" и "часы-пик в Ђмерике"--именно они в большей степени определЯют скорость доступа к далеким узлам.

Џоэтому, скорости обмена с домашних машин микрорайона No 2 с далекими узлами различны от случаЯ к случаю. …сли повезет--5..4 KBps (ЉЃайт/с), в среднем 3..1 KBps, в "нелетную погоду" 0.5-0.1 KBps.

…сли интересны конкретные цифры:

971026, воскресенье	ftp://ftp.cdrom.com	ftp://ftp.hp.com
утро, 9:50 MSK	около 1.3 KBps 38,882 bytes in 20.5 secs (1.85 KBps) 70,915 bytes in 59.9 secs (1.16 KBps)	около 1.9 KBps 51,197 bytes in 21.5 secs, (2.33 KBps) 150,903 bytes in 84.7 secs, (1.74 KBps) 26,240 bytes in 13.9 secs, (1.85 KBps)
день, 16:00 MSK	около 2.1 KBps 83,730 bytes in 34.8 secs (2.35 KBps) 121,450 bytes in 60.0 secs (1.98 KBps)	около 0.5 KBps 137258 bytes in 261.7 secs (0.51 KBps)

Ќиже приведены замечаниЯ и обсуждениЯ на темы, близкие к заданному вопросу:

Џриемы ускорениЯ передачи при работе с внешними узлами.
ЃыстраЯ региональнаЯ сеть нужна сама по себе, даже при плохих внешних каналах.
ЌациональнаЯ система магистральных телекоммуникационных каналов--забота государства. Ѓудем считать, что когда-нибудь она будет сделана "по уму". Ђ пока позаботимсЯ о региональных сетЯх.

1. Џриемы ускорениЯ передачи при работе с внешними узлами

Џервый способ ускорениЯ передачи при работе с внешними узлами основан на использовании технологии Proxy Cash. ‘конфигурировав на своем центральном сервере программное обеспечение Proxy сервера, и определив приличный размер Proxy Cash, вы можете уменьшить нагрузку на внешние каналы своей региональной сети.

’ак нами длЯ реализации Proxy сервера используетсЯ программное обеспечение squid 1.1. ђазмер Proxy Cash определен в 800 ЊB, что длЯ 200--300 обслуживаемых компьютеров обеспечивает достаточно высокую реальную эффективность: 30% http-обращений и около 10% ftp-обращений выполнЯетсЯ за счет информации хранимой в Proxy Cash.

’аким образом достигаетсЯ эффект, равносильный увеличению скорости внешнего канала на 30-10%. Џри этом эффективность Proxy Cash будет возрастать по мере увеличениЯ региональной сети, так как вероЯтность доступа к одной и той же информации различными пользователЯми будет увеличиватьсЯ при росте масштабов ‚ашей сети.

Ѓлизкими методами решениЯ проблемы низкой скорости внешних каналов ЯвлЯетсЯ организациЯ локального предоставлениЯ той информациии, котораЯ часто запрашиваетсЯ пользователЯми ‚ашей региональной сети. ђечь идет об организации:

на ‚ашем WWW/FTP-сервере зеркал (mirror) наиболее популЯрных (у ‚аших пользователей!) каталогов далеких серверов;
на ‚ашем news-сервере хранениЯ и обновлениЯ наиболее популЯрных (у ‚аших пользователей!) телеконференций;
и т.п.

—ем большую часть информационных потребностей ‚аши пользователи смогут удовлетворить локально, тем меньше они будут страдать от низкой скорости внешних каналов. Ќо эта работа, конечно, подразумевает изучение спроса ‚аших пользователей на те или иные внешние информационные ресурсы.

‚торой способ приспособлениЯ к низкой скорости передачи с внешним миром основан на борьбе с психологическими трудностЯми работы по медленным каналам. ’ак проведение ftp-сеансов в случаЯх плохой коннективности чисто психологически раздражает пользователЯ. ‡десь можно посоветовать проводить ftp-сеансы в режиме, когда отсутствует прЯмое наблюдение за процессом перекачки. Џримером реализации такого способа работы ЯвлЯетсЯ наш ftp-mail шлюз, позволЯющий переложить выполнение ftp-сеанса на неинтерактивную системную программу.

’ретий способ. ‚ некоторых случаЯх (когда надо получить несколько файлов с одного сервера) повышение суммарной производительности ftp-передачи может быть достигнуто одновременным запуском нескольких ftp-сеансов на один и тот же сервер.

2. ЃыстраЯ региональнаЯ сеть важна сама по себе, даже при плохих внешних каналах

Ѓыло бы неправильно сводить функции региональной сети к функции предоставлениЯ доступа пользователЯм к далеким узлам. ќто не так. Џосмотрим на примере моей реальной жизни, как Я использую транспортные системы:

4 раза в день Я совершаю локальные (по территории города ЏереславлЯ-‡алесского) перемещениЯ между моим домом и работой;
примерно 1 раз в неделю Я посещаю Њоскву;
примерно 1 раз в год Я езжу зарубеж.

’ак же устроены и мои виртуальные перемещениЯ: Я большие услуги получаю от близких телекоммуникаций. € это наиболее важные длЯ менЯ услуги.

—аще всего Я обращаюсь к серверам ‘’ "Ѓотик"--это серверы €Џ‘ ђЂЌ, ђосЌ€€ђЏ, “ѓЏ и других организаций города . Ћбращаюсь за самой разной информацией: городской телефонный справочник, очень полный news-сервер, локальный ftp-сервер, база данных адресов электронной почты, ѓосударственный реестр лекарственных средств (если кто-то захворал из близких), электроннаЯ версиЯ газеты "Џереславские ‚…‘’€" и т.п.

Ћчень важна длЯ менЯ скорость передачи данных между моей домашней машиной и моей рабочей машиной: MicrosoftNetwork--наиболее часто используемое мною сетевое приложение--Я к своему домашнему компьютеру присоединЯю ( Map Network Drive "E:") диск своей рабочей машины и могу читать/писать (170 ЉЃайт/с) любые файлы, расположеные на моей рабочей машине. ’ак же Я доступаю к рабочим и домашним компьютерам моих коллег (тех, кто дал мне на это права в своих системных установках).

Њожно привести еще много примеров локальных телекоммуникаций, которые наиболее часто используютсЯ в жизни пользователЯ ‘’ "Ѓотик". ‚ этом списке не последнее место займут локальные интерактивные телекоммуникации между людьми--Internet Phone, Microsoft Netmeeting, видеоконференции. Ћсобенно в периоды неполадок в телефонии (очень частое Явление в Џереславле).

’аким образом, в развитой региональной сети естественнаЯ ситуациЯ, когда внутренний трафик сети в 7-8 и более раз превышает внешний трафик. € чем больше масштабы региональной сети, чем более быстрые каналы используютсЯ на региональном уровне, тем больше внутренний трафик будет превышать объемы внешнего трафика.

Љ сожалению в большинстве современных IP-сетей ђоссии большее внимание уделЯетсЯ внешней коннективности, чем региональной. Ќикого не удивлЯют истории, когда передача между двумЯ российскими абонентами происходит намного медленнее (и как правило--"через Ђльпы"), чем передача между российским абонентом и зарубежным.

‘итуациЯ напоминает развитие несбалансированной автотранспортной сети. Џредставьте, что в ‚ашем городе все дороги построены так, что от каждого дома они ведут только в Ќью-‰орк (или Њоскву) и, чтобы попасть из одного дома к другому, ‚ам всегда приходитсЯ ехать через Ќью-‰орк (или Њоскву). ‚ такой системе локальный трафик будет сдержан (подавлен), так как он реализуетсЯ за счет внешнего трафика. Ќу а про "пробки в Ќью-‰орке", возникающие при таком построении системы Я и не говорю.

…сли же дороги построены грамотно и не сдерживают естественного передвижениЯ человека, то всегда его локальные перемещениЯ будут более частыми, чем перемещениЯ удаленные--естественное распределение локальных и дальних перемещений будет поддержано нормальным развитием автомобильных транспортных путей.

Џри нормальном построении линий передачи данных такаЯ же ситуациЯ будет наблюдатьсЯ и в системах передачи данных--локальные передачи всегда будут по своему объему превышать объемы внешних передач.

3. ЌациональнаЯ система магистральных телекоммуникационных каналов--забота государства. Ѓудем считать, что когда-нибудь она будет сделана "по уму". Ђ пока позаботимсЯ о региональных сетЯх.

ЌациональнаЯ система телекоммуникаций--это одна из разновидностей транспортной сети государства, по которой передвигаютсЯ не грузы и пассажиры, а данные. ‚о всем остальном, она подобна всем другим транспортным системам, например, системе магистральных автомобильных дорог. € сегоднЯ надо признать, что развитие систем телекоммуникаций в ђоссии еще достаточно хаотично и зачастую принимает не вполне разумные формы.

—тобы проиллюстрировать хаотичность и неразумность развитиЯ телекоммуникаций (заметим, что это проблема не только ђоссии) давайте посмотрим на названиЯ всего лишь нескольких (их наберетсЯ с десЯток!) проектов систем телекоммуникаций всероссийского (национального) масштаба:

отдельнаЯ компьютернаЯ телекоммуникационнаЯ система длЯ проведениЯ выборов;
отдельнаЯ компьютернаЯ телекоммуникационнаЯ система длЯ университетов;
отдельнаЯ компьютернаЯ телекоммуникационнаЯ система длЯ науки и высшей школы;
отдельнаЯ компьютернаЯ телекоммуникационнаЯ система длЯ ѓазпрома;
отдельнаЯ компьютернаЯ телекоммуникационнаЯ система длЯ –ентрального банка ђоссии;
и т.д.

’аких проектов очень много и все эти проекты строЯт отдельные магистральные каналы через всю ђоссию в интересах того или другого ведомства (потом, задним числом кое-где организуют exchange-пункты между разорванными системами). ’еперь не поленитесь--прочтите приведенный выше список заменЯЯ слова "компьютернаЯ телекоммуникационнаЯ система" на слова "национальнаЯ система автомобильных магистральных дорог". ‚ы получите набор фраз, которые покажут всю неразумность одновременного проведениЯ этих проектов.

Ѓыло бы намного лучше, если бы в ђоссии развивалась одна национальнаЯ программа построениЯ магистральных каналов передачи данных в интересах всех ведомств, всех предприЯтий и всех жителей страны. Џросуммировав затраты по каждому из этих проектов, можно увидеть, что денег бы хватило на построение очень мощных (например ATM 622 Mbps-2.4Gbps) каналов через все города и поселки городского типа. џ уверен в таком результате суммированиЯ.

’акаЯ картина характерна не только длЯ ђоссии. ‚о всех странах параллельно развиваетсЯ несколько национальных программ созданиЯ магистральных каналов передачи данных, которые ведут различные (конкурирующие между собой) телекоммуникационные фирмы.

€ редкие страны (пожалуй только ‘Ђ) и только недавно пришли к пониманию, что магистральнаЯ национальнаЯ сеть каналов передачи данных должна быть одна, одна длЯ всех (национальнаЯ федеральнаЯ собственность) и доступна всем региональным потребителЯм.

Џока только в мечтах можно нарисовать себе такую картину торжества разума:

из государственного бюджета строитсЯ ровно один магистральный уровень национальной сети передачи данных--быстрый, мощный, проходЯщий через все города и предоставлЯемый на разумных условиЯх (доступных всем, а не только избранным) длЯ подключений всех региональных сетей;
еще более мощнаЯ сеть транснациональных каналов реализуетсЯ (на межправительственном уровне) совместными усилиЯми заинтересованных стран;
а вот региональные системы, подобные ‘’ "Ѓотик", развиваютсЯ за счет местных средств, за счет местных энтузиастов (или мелких коммерческих телекоммуникационных фирм), без финансированиЯ из бюджета--региональные системы можно так строить--это доказывает наш (и не только наш) опыт.

‹огика развитиЯ телекоммуникационных систем, видимо, когда-нибудь приведет к такому решению. Љ сожалению мы, видимо, не можем повлиЯть на то, когда же это будет осуществлено. ‡начит нам остаетсЯ (помните лозунг в Ћвальной комнате Ѓелого дома?):

спокойно созерцать то, на что повлиЯть не можем и
в полную силу решать те проблемы, которые способны решать--строить быстрые региональные сети.

‹инии региональной сети--RadioEthernet, подвесные кабели (коаксиал, витаЯ пара), оптоволоконные линии

Q: <‚италий ѓанжин, „митрий ‘ырин> •отелось бы поподробнее узнать о заземлении экранированного кабелЯ внешней подвески.
Q: <…вгений Џопов> •отелось бы подробно узнать технологию прокладки кабелЯ и правила его заземлениЯ, длЯ избежаниЯ возможных неприЯтностей.

’ехнологиЯ прокладки кабелЯ витой пары внешней подвески и коаксиального кабелЯ внешней подвески, а также правила его заземлениЯ описаны в разделах 6.2.1 и 6.2.3 наших методических материалов.

‚ статье журнала "Љомпьютерра" #34 была использована слишком пугающаЯ фраза о "специальном способе" заземлениЯ кабелей внешней подвески. Ќе стоит принимать эту фразу черезчур серьезно--при использовании кабелей внешней прокладки не следует выполнЯть никаких дополнительных мероприЯтий, кроме описанных в в разделах 6.2.1 и 6.2.3.

Q: <‘ергей Љозлов, ’ЋЋ "ЊЂђ’"> ‘етевые карты Radio-Ethernet + параболические антенны обеспечивают надежный канал 2Mbps (нам нужно 4-6км)? ‘колько стоит регистрациЯ частоты 2.4GHz? „райвер под Linux поставлЯетсЯ с сетевой картой?

Џрактика ‘’ "Ѓотик" показывает, что сетевые карты RadioEthernet с параболическими антеннами обеспечивают очень надежный канал 2Mbps на дальность до 12км. ќто действительно так--ни разу у нас никаких сбоев на данных каналах никогда не происходило, чего нельзЯ сказать про телефонные выделенные каналы. ‘м. так же "Љнигу рекордов использование RadioEthernet" фирмы CompTek.

„райвер платы RadioEthernet входит в стандартную поставку Ядра Ћ‘ Linux (2.0.30 и выше).

Ќа вопрос, свЯзанный с регистрацией радиоизлучениЯ платы RadioEthernet трудно дать полный ответ--похоже, он по разному решаетсЯ в различных регионах различными региональными органами ѓоссвЯзьнадзора. „ело в том, что:

частота 2,4GHz и
излучаемаЯ мощность 32м‚т

установки RadioEthernet с параболической антенной по всем канонам соответствуют свободно используемым (без регистрации) радиоприборам. ’очно также, на той же частоте и с той же мощностью, излучает, например, любаЯ микроволноваЯ печка. “становка RadioEthernet в такой конфигурации ничем не отличаетсЯ, скажем, от любого домашнего радиотелефона. ђегистрациЯ потребовалась бы, если бы плата RadioEthernet излучала больше 50м‚т. Љроме того в изделиЯх RadioEthernet фирмы WaveLAN используетсЯ длЯ передачи данных, так называемый, шумоподобный сигнал, который в принципе не должен нарушать работу других радиоустройств в данном диапазоне.

Ћднако, Я не удивлюсь, если узнаю, что региональные службы ѓоссвЯзьнадзора, обнаружив на своей территории такие средства радиосвЯзи, потребуют провести их регистрацию или предпримут предусмотренные законом карательные действиЯ (конфискацию незарегистрированных радиоустройств). …сли ‚ы серьезно относитесь к такой возможности в ‚ашем регионе--следует обратить внимание на два возможных сценариЯ ‚аших действий:

Ќа сервере фирмы Comptek (у которой и стоит покупать изделиЯ семейства RadioEthernet, как у непосредственного представителЯ WaveLAN) ‚ы можете найти сертификат (в конце списка драйверов, файлов и пр. по RadioEthernet) соответствиЯ Њинистерства свЯзи длЯ устройств RadioEthernet с параболическими антеннами и (до покупки устройства) сходить с этими сертификатами (с их номерами) на консультацию в местное отделение ѓоссвЯзьнадзора.
‚ тЯжелых случаЯх ‚ы можете обратитьсЯ за услугой на регистрацию в ѓоссвЯсьнадзоре ‚ашей линии RadioEthernet в фирму Comptek. „аннаЯ фирма не только ЯвлЯетсЯ лидером поставщиков средств беспроводной передачи данных, но и проводит (в том числе в диалоге с правительственными органами) важную работы, по легализации и демократизации правил использованиЯ данных устройств (группа Ѓ…‘…„Ђ и т.п.)

Watchdog

Q: <Њатвей Ѓулохов> Ќе могли бы вы рассказать поподробней, как можно аппаратно и программно реализовать watchdog?
Q: <Ђндрей Љорешков, €нЉом’ел> Њожно ли приобрести watchdog-устройства?

Ђппаратно-программный комплекс Watchdog подробно описан в разделе 3.1.3. ‘егоднЯ аппаратура Watchdog никем не производитсЯ. Ќами сделано и эксплуатируетсЯ необходимое количество экземплЯров длЯ PC-роутеров ‘’ "Ѓотик".

Ђппаратура Watchdog чрезвычайно простаЯ и ее может изготовить любой радиолюбитель.

ЉонструкторскаЯ документациЯ на аппаратуру Watchdog (разработка лаборатории "Ѓотик") теперь доступна:

http://www.botik.ru/tech/wdog.*.html
ftp://ftp.botik.ru/pub/local/botik-technology/wdog.*
возможно получение файлов по электронной почте при помощи ftp-email-шлюза. „лЯ получениЯ файлов нужно отправить по адресу <ftpmail@botik.ru> письмо-запрос (см. выше).

Њы надеемсЯ, что даннаЯ документациЯ достаточна длЯ воспроизводства аппаратуры Watchdog.

…сли какаЯ-нибудь фирма освоит массовое производство аппаратуры Watchdog (не только длЯ себЯ, но и длЯ других), мы напишем об этом в данных материалах.

Џожалуйста, не забудьте ознакомьтьсЯ с Џравилами копированиЯ и использованиЯ наших материалов, которые определЯют среди прочего и правила коммерческого использованиЯ наших материалов.

”инансы, стоимость...

Q: <Љонстантин —есноков, KSC-RIPN> ‚ вашей статье Я, к сожалению, не нашел упоминаниЯ о затратах на работы по прокладке кабельной сети. ‚елики ли они?
Q: <Љонстантин —есноков, KSC-RIPN> Ћценивалась ли трудоЮмкость модернизации стандартного аппаратного и программного обеспечениЯ?
Q: <ѓеоргий Ѓашилов, Љомпьютерра> Ќе занижена ли указаннаЯ в статье стоимость реализации, входит ли в нее заработнаЯ плата?

Џочти все работы по созданию, содержанию и развитию ‘’ "Ѓотик" (включаЯ прокладку кабельной системы, работы с аппаратными и программными средствами--модернизациЯ, разработка, изготовление) выполнЯлись сотрудниками лаборатории "Ѓотик", что оплачивалось им фиксированной зарплатой. ‘егоднЯ суммарнаЯ зарплата всей лаборатории "Ѓотик" (вместе с начислениЯми на зарплату) составлЯет около $2,000 в месЯц.

ЏовторимсЯ--эта зарплата не только за работы по прокладке кабельной сети, сюда включена оплата всех работ, которую выполнЯет персонал как по созданию, так и по развитию и содержанию ‘’ "Ѓотик".

“читываЯ ограниченность персонала лаборатории "Ѓотик", часть кабельной системы мы создавали за счет привлечениЯ внешних рабочих рук. Ќо при этом мы не тратили ни копейки денег на проведение этих работ. ’ак например:

оптоволоконные линии нами получены (за треть их стоимости) в рамках совместного проекта оптоволоконной опорной сети в интересах телефонии и телекоммуникаций;
в локальной сети жилого микрорайона No 2 абонентские линии (от хаба в подъезде до домашнего компьютера) абоненты выполнЯли сами собственными силами--тот, кто не мог выполнить эту работу сам, мог в частном порЯдке нанЯть кого угодно длЯ проведениЯ этих работ (в некоторых случаЯх это мог быть и сотрудник лаборатории "Ѓотик").

€так, денежное исчисление объемов ‚‘…• работ по созданию, эксплуатации и развитию ‘’ "Ѓотик" за всю ее историю до сентЯбрЯ 1997 г. можно оценить суммарной зарплатой лаборатории "Ѓотик" за весь период до сентЯбрЯ 1997 г--около $30,000. ‚идимо правильно, разбить эту сумму так: все работы по созданию--$15,000, по сопровождению/обслуживанию--$15,000.

’аким образом, добавив фактическую стоимость работ и оптических линий получим следующие финансовые оценки:

	Ћценка по факту построениЯ ‘’ "Ѓотик" (оптоволокно за 30% стоимости)	ЏолнаЯ оценка (оптоволокно за 100% стоимости)
‘тоимость оборудованиЯ ‘’ "Ѓотик" на 15.09.1997 г. (без оптических линий)--см. раздел 8.4.	$28,461	$28,461
‘тоимость оптических линий (3 км на 15.09.1997 г.)	$3,000	$10,000
—асть зарплаты лаборатории "Ѓотик" (с начислениЯми), отнесеннаЯ на работы по созданию ‘’ "Ѓотик" (за все времЯ до 15.09.1997 г.)	$15,000	$15,000
€’ЋѓЋ	$46,461	$53,461
Ќа каждое постоЯнное подключение к системе приходитсЯ в среднем	$188	$216

Ћ временной оценке трудозатрат--к сожалению точный учет нами не велсЯ. „лЯ оценки можете воспользоватьсЯ такой информацией:

кабели 10Base-T внешней подвески длЯ опорной сети микрорайона (в общей сложности между шестью жилыми зданиЯми длина кабелей составила примерно 1км) были протЯнуты за 3 днЯ 6-ю человеками (это с установкой "кнехтов", пробивкой отверстий и т.д.)
прокладку внутренней проводки абонентской линии от хаба к домашнему компьютеру в квартире в среднем выполнЯли 2--3 человека в течение одного вечера и оценивали свою работу в среднЯм в 100,000 руб--видимо это минимальнаЯ цена.

Q: <Љонстантин —есноков, KSC-RIPN> ЋценивалсЯ ли возможный ущерб от физической порчи оборудованиЯ при перебоЯх в электропитании?

Љак сказано в разделе 2.2.5 все наши технические решениЯ разрабатываютсЯ таким образом, чтобы они были устойчивыми к внезапному исчезновению электропитаниЯ. Ќи одного случаЯ физической порчи оборудованиЯ при перебоЯх электропитаниЯ за 4 года эксплуатации ‘’ "Ѓотик" не было.

Џри этом следует учитывать, что в таком провинциальном городе как Џереславль-‡алесский, перебои с электропитанием, неожиданные отключениЯ--событиЯ очень даже частые.

€ные вопросы

Q: <‚италий ѓанжин, „митрий ‘ырин> ѓде ‚ы размещаете сетевое оборудование: хабы и роутеры? џ не думаю, что если они будут стоЯть в подъездах как Ящики с картошкой, то с ними ничего не случитсЯ.

PC-роутеры мы размещаем, как правило, в помещениЯх, которые могут быть надежно заперты. ‹ибо это технические помещениЯ организаций, либо это технические помещениЯ в жилых домах, которые полностью передаютсЯ в ведение лаборатории "Ѓотик". ’ак, например, размещены PC-роутеры в жилом микрорайоне 2:

pole-router размещен в отданном лаборатории "Ѓотик" техническом помещении жилого дома и мы снабдили это помещение надежными железными дверЯми;
sad-router размещен в холле детского садика "Џочемучка" на высоте 7 м (что с одной стороны увеличивает сохранность этого устройства, а с другой стороны подчеркивает тот факт, что это устройство не обслуживаемое).

Њы размещали активное сетевое оборудование (хабы) внутри электрощитов, расположенных на площадках жилых домов. ‚нутри электрощита достаточно много места длЯ размещениЯ хабов. Љонечно это не гарантирует полную защищенность от "лихих" людей. Џоэтому мы изготавливали и встраивали в электрощиты специальные металлические Ящички с замком, которые надежно крепили к стене.

‚озможно, что в регионах, где вероЯтность "чего-нибудь случитьсЯ" выше, чем в спокойном городе Џереславле-‡алесском, необходимо будет предпринЯть усиленные варианты наших решений.

Q: <‘мирнов „аниил, €нформсвЯзьсервис> Љаким образом ‚ы контролируете работу абонентов, поодключенных к Internety по локальной сети--как производитсЯ учет времени (времени?) работы?

‚ силу того, что ‘’ "Ѓотик" ЯвлЯетсЯ некоммерческой сетью общего пользованиЯ с выходом в €нтернет, мы не видим необходимости контролировать работу абонентов, подключенных к системе. Љак длЯ модемных подключений, так и длЯ постоЯнных подключений к системе нами не ведетсЯ учета времени (в денежном исчислении) работы и фактически не производитсЯ денежное исчисление трафика, передаваемого абонентам.

‚ роутерах статистика по передаваемому трафику нами собираетсЯ--она интересна нам длЯ оценки работоспособности системы, длЯ выЯвлениЯ узких мест системы и т.п.

‚ принципе, в коммерческих сетЯх, эта статистика может быть легко обработана (awk или perl) в интересах фискальной подсистемы--собираемаЯ роутерами статистика более чем достаточна длЯ этих целей.

Q: <Ђндрей Љорешков, €нЉом’ел> Kакое ЏЋ учета времени работы пользователей стоит на ‚ашем модемном пуле (freeware, ваша разработка или коммерческий софт), а так же где его можно взЯть?

Ќами ведетсЯ учет времени занЯтости того или иного модема, но не с целью предоставить сведениЯ длЯ фискальной подсистемы ‘’ "Ѓотик"--мы не собираем деньги за использование модемного времени.

“чет времени занЯтости того или другого модема, а также обнаружение ситуаций переполнениЯ модемного пула (все модемы занЯты) ведетсЯ длЯ того, чтобы во времЯ понимать, когда пора озаботитьсЯ расширением модемного пула. ђеализуюшие эту функцию trub-router несколько строчек на шелле можно найти в http://www.botik.ru/~sizif/pcrouter/trub-router/etc/ppp/ppplogin.

‚ коммерческих системах данную статистику легко использовать и длЯ фискальных целей.

Q: <Љонстантин —есноков, KSC-RIPN> Љаково количество и квалификациЯ обслуживающего персонала и людей, поддерживающих сеть в работоспособном состоЯнии и принимающих участие в ее развитии?

Џолный состав лаборатории "Ѓотик"--группы, котораЯ строит, содержит и развивает ‘’ "Ѓотик"--8 человек, а их квалификациЯ и профессиональный состав расписан в разделе 8.1.

Q: <Љонстантин —есноков, KSC-RIPN> ‘уществуют ли в других регионах сети, созданные по аналогии с проектом "Ѓотик"?

Џолных аналогий пока нет. Ћднако на уровне самой идеи--сеть без использованиЯ дорогих устройств, с широким применением программно-аппаратных решений на базе IBM PC длЯ реализации роутеров, маршрутизаторов и других функциональных сетевых устройств--такие сети известны и их много.

‚ журнале "Љомпьютерра" No 26 указывалось, что это очень популЯрное решение, что оно многократно применЯлось на практике, что даже есть разновидности реализации этого решениЯ (даже на базе IBM PC 286).

‚ журнале "Љомпьютерра" No 34 (в первой статье по теме номера) описываетсЯ локальнаЯ сеть студенческого кампуса ”изтеха, котораЯ реализована ровно на этой идее. ЋтличиЯ замечаютсЯ только на уровне технических деталей:

в компьютерной сети студенческого кампуса ”изтеха все роутеры ЯвлЯютсЯ хостами, то есть компьютерами, имеющими клавиатуру и монитор, выполнЯющими те или другие серверные функции: файл-серверов, веб-серверов и т.д.
в ‘’ "Ѓотик" PC-роутеры лишены монитора и клавиатуры, представлЯют из себЯ полностью необслуживаемые устройства, не требующие бесперебойного источника питаниЯ. Њы противники идеи выполнениЯ серверами функции маршрутизации.

’акие технические мелочи и ЯвлЯютсЯ нашим вкладом в развитие общей глобальной идеи отказа от дорогих сетевых решений и реализации сетевых устройств на базе комплектующих рЯда IBM PC.

‚ качестве примера самой большой известной системы, реализованной в рамках этой идеи, назову предыдущее состоЯние государственной системы телекоммуникаций ћгославии--всЯ система была построена без использованиЯ дорогих сетевых устройств--полностью на аппаратно-программных маршрутизаторах на базе IBM-PC.

‡амечаниЯ, предложениЯ и вопросы направлЯйте на tech@botik.ru