Принципы организации сбора, обработки, хранения и передачи статистических данных - Медицинская статистика - Каталог статей - Управление здравоохранением
Главная » Статьи » Медицинская статистика

Принципы организации сбора, обработки, хранения и передачи статистических данных

Источник: журнал «Медицинская статистика и оргметодработа в учреждениях здравоохранения».

Производство статистических данных представляет собой сложный многоступенчатый процесс, от уровня научной организации которого решающим образом зависит качество информации.

 

Качественно новые и глубокие преобразования в экономике, социальной сфере, характере государственного управления, а также повышение роли и значения региональных и местных органов власти повлияли на общие требования к современной государственной статистике. Это и подход к государственной статистике как к основе общественной системы информации, это и безусловное обеспечение сбора надежных данных, их обработки, хранения и распространения, это и функционирование государственной статистики как независимой, открытой общественной службы, это и представление адекватных индикаторов и другой структурированной социально-экономической информации, ориентированной на принятие управленческих решений.

В ряду названных требований к государственной статистике соединение функций по сбору и обработке статистических данных и связанной с ними разработке научно-методологических вопросов по научному обобщению и анализу собранной информации является одним из центральных, если не важнейшим, принципом правильного построения статистики.

Производство статистических данных представляет собой сложный многоступенчатый процесс, от уровня научной организации которого решающим образом зависит качество информации.

Многолетняя практика статистической работы, большой вклад в которую внесли и советская, и российская статистики, выкристаллизовала в этом процессе следующие основные этапы:

1) разработка методологии и системы показателей для характеристики отображаемого объекта или процесса;

2) организационно-методическая подготовка;

3) сбор данных (непосредственно наблюдение);

4) свод и группировка данных;

5) обработка и анализ данных.

ПЕРВЫЙ ЭТАП предполагает изучение задач, для решения которых требуется статистическая информация, определение с учетом требований этих задач перечня необходимых статистических показателей и методологии их исчисления.

ВТОРОЙ ЭТАП состоит в разработке конкретной программы наблюдения и обработки данных, необходимых инструктивно-методических материалов, формуляров, подборе и обучении исполнителей, выборе методов и средств получения необходимых данных, составлении организационного плана исследования.

ТРЕТИЙ ЭТАП представляет процесс получения первичных данных об элементах исследуемой совокупности и их свойствах, которые становятся потом предметом статистической обработки.

ЧЕТВЕРТЫЙ ЭТАП состоит в систематизации материалов наблюдения по признакам, необходимым для выявления типичных групп объектов и процессов с однородными свойствами для характеристики структуры исследуемой совокупности, а также в получении общих и групповых итоговых показателей.

ПЯТЫЙ ЭТАП объединяет разнообразные статистические расчеты, выполненные на основе индивидуальных и сводных показателей (вычисление относительных, средних и других производных показателей, определение статистических характеристик динамических рядов и тесноты связи между различными показателями, их социально-экономический анализ и формулировка выводов статистического исследования).

Необходимо отметить, что такая последовательность этапов статистической работы сложилась в условиях, когда операции по сбору и обработке данных выполнялись вручную или с применением простейших средств механических вычислений, которые не могли серьезно повлиять на общую схему организации статистического производства.

Осуществленный к настоящему времени переход на новую вычислительную технику и современные технологии обработки, хранения и распространения информации вызвал изменения в традиционной схеме организации статистической работы, привел к изменению состава работ и методов их выполнения. Меняется принципиальный подход к проблеме сбора, обработки и передачи первичной и сводной статистической информации.

Во-первых, вслед за сбором данных выделяется этап подготовки данных для электронной обработки (шифровка данных, нанесение на технические носители и т.д.). Этап подготовки данных может быть совмещен со сбором их, если уже при первичной регистрации они заносятся на специальный машиночитаемый документ.

Во-вторых, возрастает значение и обособляется комплекс работ по контролю, т.е. по проверке достоверности данных. Контроль, как таковой, осуществляется на всех этапах прохождения статистической информации. Но особое значение имеет входной контроль, т.е. проверка достоверности данных, получаемых после этапов наблюдения и подготовки к электронной обработке, поскольку ошибки, допущенные на этих этапах, искажают результаты последующих расчетов и, как правило, не могут быть в дальнейшем устранены.

В-третьих, в рамках автоматизированной системы, когда требуется накопление, быстрый поиск и многократное использование в различных расчетах соответствующих показателей, получаемых в разные отрезки времени и из разных источников, функция хранения и поиска данных (при ручной технике эта функция не возникала) обособляется и становится центральным звеном в системе сбора и обработки данных. Хранение и поиск статистических данных поддаются автоматизации и должны быть полностью автоматизированы.

В-четвертых, все вычислительные и логические операции, реализуемые в автоматизированном режиме, объединяются в единый этап обработки данных. При этом оказывается неоправданным выделение сводки и группировки как особого этапа статистической работы: соответствующие им операции образуют внутреннее подразделение единого этапа обработки, в рамках которого они стыкуются с аналитическими расчетами. В то же время в качестве особого заключительного этапа статистической работы выделяется анализ данных, получаемых после обработки, который полностью остается прерогативой экономиста-статистика.

Произошедшие за последние годы изменения в информационных технологиях как в производительности отдельных вычислительных комплексов, так и в телекоммуникациях, позволяют проводить дальнейшее развитие существующих процессов сбора, обработки и распространения статистической информации. Осуществление их должно базироваться на определенных принципах, исторически проверенных и подтвердивших свою эффективность еще в 70-80-х годах прошлого века при создании автоматизированной системы государственной статистики (АСГС). Речь идет, прежде всего, о принципе новых задач, который заключается в том, что и в новых условиях развития информационно-вычислительной системы (ИВС) Госкомстата России предполагается не просто традиционный перевод учетно-статистических работ на новый вид вычислительной техники, а внедрение новой системной технологии обработки.

Технология обработки информации, включая рациональную организацию массивов и построение системы хранения и поиска информации в архиве данных, должна обеспечить интеграцию обработки данных, комплексное их использование. В соответствии с этим система сбора и обработки статистической информации должна строиться таким образом, чтобы из установленного объема исходных данных извлекался максимум информации, необходимой для анализа и управления.

Комплексная обработка данных – условие эффективного применения электронной техники. Высшая ее форма – использование программ комплексного анализа статистических показателей с применением математических методов и моделей. Важным в технологическом обеспечении является применение централизации обработки статистической информации – сокращение промежуточных звеньев обработки отчетности.

Первым шагом в этом направлении (и основным содержанием первой очереди АСГС) стали комплексы электронной обработки статистической информации (КЭОИ), каждый из которых, как правило, предусматривал системную обработку нескольких статистических работ, связанных между собой единым экономико-статистическим содержанием.

Каждый КЭОИ имеет свои (локальные) специфические задачи, вытекающие из назначения статистической информации и свойств статистического обследования, состава и характера показателей, приемов их исчисления и используемых для этого алгоритмов, а также уровня, для которого разработан данный комплекс. В свою очередь, основным принципом разработки комплексов является интеграция информации на всех уровнях системы, предусматривающая минимизацию объема вводимой информации, исключение дублирования и относительных показателей в первичных документах. Системность технологии комплексов предопределяется работой информационно-вычислительных центров (ИВЦ) по единому информационному, математическому и техническому обеспечению с передачей результатов от низшего уровня к высшему на технических носителях или по каналам связи.

Проблема повышения интеграции и аналитичности обработки статистических данных потребовала перехода от документального метода ввода, хранения и обработки учетно-статистической информации к более эффективным методам организации хранения, поиска и обработки данных, позволяющим рациональнее использовать возможности современной электронной техники.

В настоящее время широкое применение получила РЕГИСТРОВАЯ ФОРМА хранения информации, предусматривающая ведение и обработку данных независимо от форм статистической отчетности. Регистр представляет собой систему накопления, хранения, обновления, поиска и обработки информации, сформированной отдельно по каждой единице наблюдения. Единые средства описания данных, предусмотренные в регистре, позволяют комплексно обрабатывать любые группы показателей из его информационного фонда. Тем самым достигается качественно новый уровень интеграции данных и их обработки.

В зависимости от степени интеграции и содержания информационного фонда регистры могут создаваться в рамках важнейших статистических работ отдельных или нескольких отраслей или секторов экономики. Таким образом, регистры могут рассматриваться как первоначальная подготовительная форма создания автоматизированных банков данных (АБД).

Создание АБД – необходимая предпосылка совершенствования комплексного экономико-статистического анализа и широкого применения экономико-математических методов. Это позволяет существенно сократить потоки отчетной информации, снизить трудоемкость хранения, поиска, обработки и выдачи данных, резко улучшить качество информационно-справочного обслуживания потребителей экономических данных, выдавая их в короткие сроки как по регламентированной программе, так и по отдельным запросам. Хранение данных в АБД создаст предпосылки для более полной автоматизации контроля качества информации и позволит осуществить динамическую непрерывность информационного фонда. Это достигается применением единого информационного, программного и технического обеспечения, централизованных каталогов, словарей и классификаторов, единых стандартов и нормативов.

Технология, основывающаяся на применении АБД, предъявляет повышенные требования к типу и возможностям используемой вычислительной техники (емкости оперативной и внешней памяти, производительности машин, системному программному обеспечению и т.п.).

В настоящее время создаются условия (в частности, в связи с существенным снижением показателя цена/производительность для серверов баз данных, аппаратных вычислительных платформ и устройств хранения данных) для повсеместного перехода к банковской технологии хранения и обработки информации, внедрению двух- и трехзвенных архитектур «Клиент-сервер».

Внедрение новой технологии обусловливает принцип системного объединения вычислительных элементов, предполагающий соединение всех элементов технической базы (на всех уровнях) в единую вычислительную систему. При этом каждый из элементов выполняет определенную, заданную проектом обработки информации, целевую функцию. Иными словами, каждый из уровней технической базы реализует определенный этап обработки информации. При этом предполагался обмен результатами обработки от уровня к уровню на технических носителях информации или по соответствующим каналам связи. Таким образом, принцип системного объединения требует, в свою очередь, соблюдения принципа специализации вычислительных элементов по отдельным уровням технической базы.

Реализация принципов системного объединения и специализации базируется на иерархической структуре технической базы ИВС Госкомстата России и принципе типизации проектных решений. Этот принцип обусловлен единым программным обеспечением системы, общим для вычислительных элементов всех уровней, с учетом особенностей задач, решаемых на каждом из них.

При этом предусматривается единая взаимоувязанная организация данных на всех видах носителей. Такая организация данных обеспечивается применением единых классификаторов и систем обозначений, типизацией состава показателей, унификацией и приспособлением к автоматизированной обработке первичных и сводных статистических форм ряда вспомогательных документов и т.д., а также применением унифицированных структур сообщений при передаче данных по каналам связи.

В отношении технической базы ИВС Госкомстатом России должны соблюдаться также принципы непрерывного развития системы и согласования пропускных способностей отдельных частей ее технической базы. Первый из них означает, что оснащение и дооснащение современным вычислительным оборудованием, средствами связи и другой техникой – процесс непрерывный. Это во многом определяется, с одной стороны, общей перспективой развития статистической науки и практики работы органов государственной статистики как крупнейшей в стране специализированной межотраслевой информационной системы, а с другой – научно-техническим прогрессом в области производства и применения вычислительной техники. Второй – выражает совершенно очевидное положение – было бы ошибочным увеличивать мощности какого-либо одного ВЦ, если мощности всех остальных ВЦ, обрабатывающих аналогичную информацию, ограничены.

В связи с этим при развитии технической базы учитываются направления потоков обрабатываемой информации, их объемы, сроки и сложность обработки и т.п. Такой подход обеспечивает взаимоувязку особенностей обработки информации на каждом из вычислительных центров с требованиями непрерывного и равномерного развития сети вычислительных центров.

И, наконец, особое значение для функционирования технической базы информационно-вычислительной системы имеет принцип живучести, т.е. способность системы к определенной компенсации отказов или сбоев функционирования отдельных элементов технической базы. Это должно обеспечиваться за счет передачи функций вышедшего из строя вида электронного оборудования аналогичным видам такого же оборудования или оборудования более высокого класса. При этом предъявляются определенные требования к каналам связи, устройствам обмена информацией, наличию в каждом ВЦ машин-сателлитов, организующих процесс передачи функций.

Информационная система государственной статистики должна находиться в постоянном совершенствовании и развитии.

Продолжающееся развитие Интернета делают возможным использование Интернета в качестве одного из основных средств взаимодействия ИВС с внешними поставщиками и потребителями статистической информации. При условии правильной технической и юридической организации дела прогнозируется быстрый рост объемов передачи информации в электронном виде.

Новые технологии позволяют шире использовать административные источники информации, снизить благодаря этому нагрузку на респондентов и усилить роль Госкомстата России в регионах страны. Распространение информации должно упроститься благодаря новым технологиям. Таким образом, предоставляется реальная возможность для внедрения современных технологических достижений: сетей, хранилищ данных, систем взаимодействия, Интернета.

Одновременно информационные технологии открывают возможности для очень гибкого решения задач, которые раньше либо не имели решения из-за слишком жесткого строения статистической системы, либо могли решаться только путем реорганизации структуры управления.

 

Литература:

1. Организация государственной статистики в Российской Федерации / Госкомстат России. – М., 2004. – 429 с.

 

Источник: журнал «Медицинская статистика и оргметодработа в учреждениях здравоохранения» 2012/06

 

Другие статьи по теме
Категория: Медицинская статистика | Добавил: zdrav1 (26.08.2017)
Просмотров: 5327 | Теги: Медицинская статистика
Всего комментариев: 0
Яндекс.Метрика