ИТ-блог: Всероссийская сельскохозяйственная ИТ-перепись
Открытый тендер на реализацию комплексного проекта по разработке, внедрению и сопровождению автоматизированной системы обработки материалов и получения итогов Всероссийской сельскохозяйственной переписи 2006 года был объявлен 25 июля 2005 года, а его результаты стали известны в первой половине октября. Интерес к конкурсу проявили более 10-ти компаний, однако участвовало в нем всего три крупных системных интегратора – IBS, "Крок" и "АйТи". Победителем стал "Крок".4 июля 2006 года
Пройден этап подготовки к переписи: программное обеспечение разработано, оборудование – поставлено, бланки напечатаны.
Программное обеспечение
Группа разработки проекта завершила наладку аппаратно-программных комплексов, включающих сканеры, серверы и рабочие места операторов.
Важным фактором при обработке материалов любой переписи, когда задействованы тысячи людей, является высокая надежность, слаженность всех компонентов системы, их гарантированная совместимость, простота и доступность самой информационной системы, отвечающей за автоматизированную обработку. Именно на это был сделан упор при разработке АС ВСХП, именно это и стало одним из наиболее трудоемких процессов для проектной команды.
ПО регионального уровня одобрено ГМЦ Росстата. Там был установлен опытный стенд, состоящий из полноценного комплекта оборудования АС ВСХП. Сотрудники ГМЦ самостоятельно тестировали систему – все их замечания и пожелания были учтены в финальном релизе ПО. За это время проектная команда (руководитель разработки ПО, технический менеджер по обслуживанию высокоскоростных сканеров ДС300, менеджер по взаимодействию с регионами и логистике, системный архитектор и менеджер проекта) успела подключить к работам специалистов практически всех департаментов компании КРОК.
Аппаратное обеспечение
В Росстат уже поставлена вся техника. А это 136 серверов HP – по два на каждый региональный центр обработки данных, которые организованы на базе территориальных органов Росстата. Плюс к этому - оборудование Nortel для построения сетевой инфраструктуры региональных центров и ГМЦ Росстата, рабочие станции, принтеры. В ГМЦ Росстата будет развернут комплекс для обработки всех данных, полученных из региональных центров – так называемый федеральный уровень автоматизированной системы Всероссийской сельскохозяйственной переписи (АС ВСХП). Аппаратная основа этого комплекса – дисковые стойки и 64-битные серверы HP, система хранения среднего уровня EMC – также уже поставлены Росстату.
Другая «железная» составляющая проекта – рабочие станции. Всего используется 2487 рабочих станций, что продиктовано масштабами переписи. Сканирование, распознавание и первичный контроль пачки из 500 двухсторонних бланков на высокоскоростном сканере и обычной офисной рабочей станции занимает не более 10 минут (из которых 4-5 минут сканирование и распознавание и 5-6 минут контроль комплектности). Гораздо более трудоемкий процесс формального и логического контроля – на обработку такой же пачки может уйти до 5 часов. Поскольку здесь уже происходит проверка данных на отсутствие ошибок заполнения, ошибок при подсчетах суммарных величин и т.д. (всего – более 1400 правил).
Компьютерная техника, которую КРОК поставил в рамках проекта, готова к эксплуатации после включения и требовала лишь простейших настроек, которые смогли выполнить сотрудники центров обработки и ГМЦ Росстата. Системным архитектором проекта были разработаны инструкции для сотрудников центров обработки и ГМЦ Росстата по установке ПО регионального уровня, а также по настройке комплекса технических средств – хотя работа по настройке будет минимальная, но определенную последовательность действий выполнить все-таки придется. Сотрудники территориальных органов Росстата научились этой процедуре во время обучения в ГМЦ Росстата, которое провели специалисты КРОК в Москве.
Кроме того, специалисты КРОК разработали рекомендации по техническим требованиям, которым отвечают локально вычислительные сети в региональных центрах обработки данных. Сами же ЛВС построены региональными компаниями.
Что касается одного из наиболее интересных компонентов АС ВСХП – высокопроизводительных сканеров ДС300, поставляемых компанией КРОК, то половина из них закуплена специально для сельхозпереписи. Оставшаяся часть – это прошедшие заводскую профилактику сканеры ДС300, использовавшиеся в ходе обработки материалов Всероссийской переписи населения 2002 года. Использование уже существующего оборудования снизило совокупную стоимость создания системы, тем более что в ходе автоматизации всероссийской переписи населения изначально закладывалась возможность дальнейшего использования сканеров. Необходимость в увеличении количества оборудования объясняется необходимостью обработки существенно больших объемов информации в ходе сельскохозяйственной переписи. Для сопоставления достаточно сказать, что вместо 160 млн. бланков, обработанных в ходе ВПН-2002, предстоит обработать более 225 млн. бланков ВСХП-2006.
Стоит отметить, что ДС300 — единственный столь высокопроизводительный сканер, разработанный и производимый в России. Техническая скорость сканирования – до 150 двусторонних документов формата А4 в минуту (до 300 изображений). Не каждый зарубежный производитель сканирующих устройств имеет сопоставимые по скорости аналоги. А имеющиеся зарубежные аналоги несопоставимы по стоимости с ДС300.
Все вышеперечисленное оборудование собрано, настроено и протестировано сотрудниками КРОК из департаментов вычислительных систем и информационных технологий. К примеру, каждый сервер прошел полный цикл автоматизированных проверок, разработанных HP для тестирования собственного оборудования.
Бланки
Один из важных этапов подготовки к переписи – это подготовка переписных бланков. Разработкой опросников, на основе которых были созданы бланки, занималась специальная комиссия, созданная Росстатом. В ее состав вошли опытнейшие сотрудники Росстата и Министерства сельского хозяйства. Результатом работы комиссии стал опросник, который был передан в Главный Межрегиональный Центр обработки и распространения статистической информации (ГМЦ Росстата). На этом этапе подключились специалисты КРОК и совместно с ГМЦ спроектировали бланки ВСХП.
Без преувеличения можно сказать, что была проделана масштабная работа, поскольку в ходе переписи будет учитываться огромное количество информации – сведения о земле, инфраструктуре, технических средствах и производственных постройках, поголовье скота, посевах, садах и т.д. Теперь в КРОК знают, что в сельском хозяйстве России существует более 40 видов техники, машин и оборудования, из них особенную ценность представляют приобретенные за последние пять лет. Выяснилось также, что куры, к примеру, бывают мясные и яичные, а пчелы считаются семьями.
В результате было разработано 4 формы с приложениями – это наборы бланков для различных сельхозпроизводителей (садоводческих, огороднических, животноводческих некоммерческих объединений граждан, фермерских хозяйств и индивидуальных предпринимателей). Отдельная форма бланков разработана для районов Крайнего Севера. Общее же число опросных листов насчитывает 50 видов двухстраничных бланков.
Важно отметить, что, при разработке бланков, проектная команда учитывала не только технические требования, диктуемые сканером и программным обеспечением, но и человеческий фактор. В каждом конкретном случае опрос строится по разным схемам, и это учтено в бланках логическими ссылками. Опросные листы снабжены комментариям, что облегчает подготовку специалистов и поможет переписчикам в ходе самой переписи.
Опыт любых соцопросов показывает, что в ходе заполнения анкет иногда допускаются механические ошибки, «описки». В бланках предусмотрена возможность внесения исправлений – каждый бланк содержит вверху поле с образцами написания цифр, а также примером того, каким образом можно вносить исправления. Соблюдение единого шаблона при исправлениях позволит при обработке не тратить время на их распознавание оператором вручную – все помарки будут автоматически распознаваться программным обеспечением.
Тендер на изготовление переписных бланков выиграл Гознак. Гознак отпечатал весь тираж в мае, а это 225 270 214 штук цветных двусторонних бланков (не считая образцов бланков, предназначенных для тестирования и настройки системы). Доставка отпечатанного тиража в региональные центры Росстата также проводилась силами Гознака.
О проекте
По условиям тендера компания КРОК обеспечит автоматизацию обработки материалов и получения результатов Всероссийской сельскохозяйственной переписи. Стоимость проекта составит 237,5 млн. рублей. Специалисты КРОК автоматизируют 68 региональных центров обработки данных на базе территориальных органов Росстата...
Есть комментарии?
Пожалуйста, заполните все поля, отмеченные *
Все сообщения предварительно модерируются