Swipe Icon
Рекомендации по проведению переписей населения
Перепись населения и жилищного фонда является важной основой национальной статистической системы, обеспечивая данные о населении и его социальных, демографических и экономических характеристиках. Рекомендации Конференции европейских статистиков по проведению переписей населения и жилищного фонда 2030 года содержат руководящие указания и оказывают содействие странам в планировании и проведении переписей населения и жилищного фонда. Конференция европейских статистиков одобрила эти рекомендации в июне 2025 года.
ЕЭК ООН
●
ноябрь, 2025 г.
Глава 5 Технологии
5.1 Введение
208.
208. Технологии используются для оказания помощи на всех этапах проведения переписей населения и жилищного фонда. В этой главе рассматриваются общие вопросы и приводятся рекомендации по применению и тестированию технологий для проведения переписи. Основное внимание уделяется технологическим решениям, которые получили широкое распространение в ходе раунда переписей 2020 года, таким как средства электронного сбора данных и облачные технологии. Также рассматриваются технологии использования данных из административных источников для целей переписи. Предполагается, что в период до проведения переписей раунда 2030 года появятся новые возможности для применения таких технологий, как машинное обучение и искусственный интеллект.
5.2 Предварительная оценка
209.
209. Технологии позволяют повысить охват и качество данных переписи, сократить расходы и обеспечить более оперативное распространение результатов. Однако в краткосрочной перспективе внедрение новых технологий может привести к росту расходов. Национальным статистическим органам необходимо проанализировать, каким образом новые возможности, открывающиеся благодаря технологическим инновациям, могут способствовать улучшению качества данных и оперативной деятельности, а также снижению воздействия переписи на окружающую среду. Вопрос о принятии на вооружение новых технологий или подходов должен изучаться только в том случае, когда существует надлежащее понимание их преимуществ и когда имеются возможности управления их разработками.15

15 Подробное обсуждение процесса принятия решений об использовании той или иной технологии сбора данных переписи см. в разделе B.4 публикации Департамента по экономическим и социальным вопросам Организации Объединенных Наций (2019 г.) «Руководящие принципы использования технологий электронного сбора данных при проведении переписей населения и жилищного фонда». Нью-Йорк: Организация Объединенных Наций.

210.
210. Практические возможности принятия на вооружение любой технологии, которая не прошла проверки в условиях переписи, должны заблаговременно и тщательно оцениваться с учетом национального контекста, соотношения расходов по сравнению с традиционными решениями, объема работ, необходимых для разработки и тестирования, возможных последствий для общей организации проведения переписи, потенциального влияния на качество результатов переписи, а также воздействия на население в целом и на окружающую среду.
211.
211. НСО задолго на начала переписи должны провести оценку для определения того, какие системы и процессы подходят для их ситуации. Круг изучаемых вопросов может включать в себя:
(a) относительные расходы на персонал и административные процессы в сопоставлении с расходами на возможные компьютерные системы и связанную с ними инфраструктуру;
(b) технологический потенциал и инфраструктура НСО и страны в целом; и
(c) способность НСО управлять сложными и современными процессами разработки систем;
(d) наличие финансовых средств и времени для разработки и тестирования технологического решения.
212.
212. Прежде чем внедрять новые технологии или методологические подходы, НСО должно иметь четкое представление о связанных с этим рисках. Как покажет себя новая технология? Какова будет реакция респондентов или переписного персонала? По причине значительных временных интервалов между циклами переписей (5−10 лет) возможности получения информации из первых рук в отношении новых подходов могут являться ограниченными.
213.
213. При рассмотрении вопроса о внедрении инноваций НСО следует уделить особое внимание изучению опыта других переписных органов на международном уровне. Внимание, возможно, также следует уделить сотрудничеству с другими организациями в деле совместного тестирования новых подходов или технологий до их внедрения.
214.
214. Сложность значительной части нового программного обеспечения и инфраструктуры, требуемых для внедрения многих новых и передовых технологий, может требовать компетенций, выходящих за рамки имеющегося технического потенциала НСО. Таким образом, вполне вероятно, что некоторые страны пожелают рассмотреть возможность передачи важных компонентов технических решений, связанных с проведением переписи, на внешний подряд (см. раздел ‎4.4).
5.3 Тестирование
215.
215. Национальному статистическому органу следует разработать эффективную стратегию тестирования и уделить первоочередное внимание этой работе в рамках переписи. С технической точки зрения тестирование должно охватывать функциональную корректность, нефункциональные требования, интерфейсы, обработку ошибок, производительность, надежность, удобство использования и безопасность. Помимо прохождения цикла тестирования, внедренные решения должны пройти сертификацию на соответствие требованиям кибербезопасности.
216.
216. Рекомендуется включить в цикл тестирования технологий для проведения переписи следующие компоненты:
(a) модульные тесты отдельных компонентов программного обеспечения, предназначенные для выявления ошибок и облегчения внесения изменений в код; как правило, они автоматизированы и могут выполняться с высокой частотой;
(b) полевые испытания новых или модифицированных процедур и технологий сбора данных;
(c) тесты систем и проверку эксплуатационной готовности в производственной среде;
(d) тесты функций резервного копирования и восстановления данных, позволяющие убедиться в том, что данные можно надежно восстановить в исходное состояние после их потери, повреждения или компрометации;
(e) тесты на предмет атак с использованием программ-вымогателей с целью оценки эффективности средств защиты, а также возможностей реагирования и восстановления;
(f) комплексные тесты объёма и производительности, также известные как нагрузочные или стресс-тесты, моделирующие пиковую нагрузку на пользовательский интерфейс и максимальный объём данных;
(g) тест на устойчивость нагрузки для проверки правильности конфигурации системы, а также аппаратного и программного обеспечения для обработки данных;
(h) тестирование безопасности — проведение тестов на проникновение с целью выявления уязвимостей и проверки эффективности мер безопасности;16

16 См., например, Руководство по тестированию интернет-безопасности, разработанное Фондом Open Web Application Security Project® (OWASP®).

(i) нефункциональное тестирование, направленное на оценку производительности, надёжности, удобства использования и других нефункциональных аспектов программного приложения;17

17 См., например, Пеззе М., Янг М. (2007 г.) Тестирование и анализ программного обеспечения: процесс, принципы и методы. Издательство «Уайли» (Pezzè M., Young M. 2007. Software testing and analysis: process, principles, and techniques. Wiley).

(j) функциональное тестирование — проверку того, что все функции программного обеспечения работают в соответствии с техническими условиями и отвечают потребностям пользователей;18

18 Там же.

(k) тестирование новых онлайн-сервисов — оценку доступности, функциональности и удобства использования вновь внедренных цифровых платформ для проведения переписи;19

19 Там же.

(l) тестирование системной интеграции или тестирование интерфейсов точек интеграции между двумя или более системами;
(m) комплексное сквозное тестирование всех интегрированных систем;
(n) приемочные испытания системы с целью подтверждения как функциональных, так и нефункциональных требований к системе с использованием комплексного набора сценариев.
217.
217. Проверка эффективности и согласованности всей системы переписи, включая любые привлеченные сторонние технологии, приобретает особую важность в тех случаях, когда респондентам предоставляются различные способы заполнения переписных листов, такие как мобильный телефон, планшет или настольный компьютер. Каждый из этих режимов необходимо протестировать на доступность, удобство использования, работоспособность, производительность и безопасность.
218.
218. В условиях стремительного развития информационных технологий и связанных с этим значительных изменений во многих технологических аспектах переписи после цикла 2020 года обязательное тестирование всего технологического решения в рамках пилотной переписи приобретает особую важность при подготовке к переписи 2030 года.
5.4 Управление переписью
219.
219. Переписные операции связаны с широким рядом административных процессов, которые присущи и другим крупномасштабным проектам. Например, при планировании такого сложного мероприятия, как перепись населения, целесообразно использовать программное обеспечение для планирования проектов, а также системы и приложения для найма и оплаты труда большого числа временно нанятых переписчиков. НСО должен также изучить вопрос о том, каким образом технология может способствовать повышению эффективности и результативности этих операций. Она также может способствовать ограничению расходов на проведение переписи и повышению общего качества переписи благодаря первоочередному направлению ресурсов на осуществление основных задач по учету, обработке и распространению данных.
220.
220. В настоящее время доступны технологические решения, способные объединять в себе несколько функций управления полевыми работами. Система управления взаимоотношениями с клиентами (СУВК) может обеспечить решения для управления полевыми приложениями, интерфейса веб-сайта, расширенных возможностей коммуникации с помощью чат-ботов, а также службы поддержки граждан для управления знаниями.
221.
221. Новые технологии открывают широкие возможности с точки зрения совершенствования управления переписными работами и, следовательно, повышения качества самой переписи. Операции по сбору данных с использованием различных вариантов потребуют снабжения переписчиков своевременной информацией для того, чтобы они не посещали домохозяйства, уже передавшие свои переписные листы. Это одновременно является вопросом как эффективности, так и отношений с общественностью.
222.
222. Хотя ключевой задачей является снабжение переписчиков своевременной информацией, системы, созданные для этого, должны также обеспечивать практически в реальном времени двусторонний обмен информацией между администраторами и переписчиками. Такой мониторинг работы переписчиков позволит своевременно принимать меры в случае отставания от графика сбора данных или возникают проблемы с качеством собираемых данных.
223.
223. НСО, возможно, придется прибегнуть к помощи внешних организаций для реализации ключевых компонентов данного решения. Независимо от того, являются ли эти системы внутренними или внешними, они должны соответствовать стандартам кибербезопасности, принятым на международном (например, серия стандартов ISO 27000), региональном (например, NIS 220 в Европейском союзе) или национальном уровнях. Это особенно важно, поскольку программное обеспечение для различных внешних или внутренних операций (сбор, обработка, геоинформационные системы, импутация, распространение) предоставляется в рамках различных решений (например, комплексные платформы, проприетарные решения, индивидуальные разработки).

20 Директива (ЕС) 2022/2555 Европейского парламента и Совета от 14 декабря 2022 года о мерах по обеспечению высокого общего уровня кибербезопасности на всей территории Союза.

224.
224. Одним из ключевых факторов снижения рисков являются отношения с технологическими партнерами (подрядчиками). Эффективное управление, в основе которого лежит собственная группа по управлению переписью, имеет решающее значение для успешной разработки, внедрения и проведения систем переписи.
225.
225. Инфраструктура управления переписью должна включать следующие элементы:
(a) регистр жилищ с указанием адресов и геопространственных координат, в котором все адреса сгруппированы по переписным участкам;
(b) реестр переписчиков и их контактные данные с возможностью привязки каждого из них к определенному переписному участку (из регистра жилищ) и адресам, входящим в его состав, — если используется данный метод сбора данных;
(c) реестр устройств для сбора данных (например, планшетных компьютеров или смартфонов) и их уникальных серийных номеров с возможностью привязки к переписчикам (из реестра переписчиков) — в случае использования данного метода сбора данных;
(d) централизованное хранилище данных переписи, обеспечивающее сбор, обработку и накопление всех данных, связанных с адресом проживания респондента (из регистра жилищ), полученных с помощью всех методов сбора данных (онлайн-ответы, данные переписчиков, данные из административных источников);
(e) программное обеспечение для связи, обеспечивающее оперативный обмен информацией между переписчиками, инспекторами и группой по управлению переписью.
226.
226. Все элементы этой инфраструктуры должны быть взаимосвязаны и управляться централизованно с помощью программного обеспечения и технологических инструментов, специально разработанных для проведения переписи. Рекомендуется выполнить установку, настройку и проверку работоспособности устройств в центре управления переписью до передачи устройств полевым сотрудникам.
227.
227. На основе существующей ИТ-инфраструктуры может быть создана и функционировать комплексная система полевой связи. Это подразумевает, например, прямой доступ к национальной инфраструктуре геокодирования, которая предоставляет данные по отдельным адресам. Геопространственные данные (адреса, строения, кадастровые участки) должна основываться на использовании постоянных идентификаторов (см. Глава 8).
228.
228. Инструменты управления центральным хранилищем данных переписи обеспечивают следующие функции:
(a) загрузку переписных листов, заполненных онлайн (если используется данный способ сбора данных);
(b) проверку пригодности переписных листов для обработки (наличие ответов, необходимых для идентификации респондента);
(c) привязку заполненных переписных листов к адресам жилищ;
(d) создание подтверждения (например, в виде QR-кода) об успешном участии в переписи для обратной связи с респондентом (в зависимости от способа получения заполненного переписного листа: в личный кабинет респондента онлайн-переписи, по электронной почте или иным способом) и для передачи переписчику — если используется данный метод сбора данных;
(e) загрузку заполненных электронных переписных листов с устройств переписчиков, из административных источников и других каналов сбора данных, используемых в ходе переписи, с привязкой их к адресам жилищ;
(f) объединение версий заполненных переписных листов, полученных по всем каналам сбора данных, использовавшимся в ходе переписи, и относящихся к одному и тому же адресу жилища — выбор эталонной версии, дополнение её данными из других версий, удаление дубликатов;
(g) расчет и визуализацию статистических данных для отслеживания хода учетной переписи с целью выявления проблем, требующих вмешательства или корректировки.
229.
229. Важным вопросом является обучение и техническая поддержка переписчиков. Вряд ли стоит предполагать, что люди, которые будут наняты в качестве переписчиков, будут обладать необходимыми техническими знаниями. Технологии облегчат организацию обучения и оказание технической поддержки переписчикам, особенно если это необходимо делать дистанционно.
230.
230. Национальные статистические органы могли бы рассмотреть возможность использования технологий удаленного доступа для обеспечения гибкого графика работы сотрудников, занимающихся обработкой данных переписи, при этом гарантируя безопасность и конфиденциальность данных.
5.5 Прямой учет
5.5.1 Интернет
231.
231. При проведении прямого учета рекомендуется в качестве первого или предпочтительного варианта предложить возможность ответить через Интернет.
232.
232. Ответы на электронные переписные листы позволяют снизить общие расходы на сбор данных и получить данные более высокого качества. Как и в случае с другими электронными способами сбора данных, время и расходы на обработку данных сокращаются по сравнению с бумажными переписными листами, поскольку данные будут уже отформатированы и их можно будет загрузить или внести непосредственно в базы данных. Качество данных также может быть выше, поскольку инструмент их сбора может быть оснащён встроенными функциями проверки и подсказками.
233.
233. Использование Интернета в качестве средства сбора данных означает, что данные собираются посредством самозаполнения анкеты, а не в ходе опроса. Самостоятельное заполнение переписных листов через Интернет не требует визита переписчика и, таким образом, исключает любое возможное влияние со стороны переписчика на ответы. Обеспечивая большую конфиденциальность, оно способствует самокорректировке и редактированию ответов респондентом.
234.
234. Вариант использования Интернета может быть интегрирован в любой из традиционных методов раздачи и сбора переписных листов, например, доставка/сбор переписных листов, а также их рассылка/возвращение по почте).
235.
235. По всем вышеперечисленным причинам сбор данных через Интернет явно является более предпочтительным вариантом при проведении прямого учета.
236.
236. Ключевым фактором для рассмотрения является осуществление контроля за сбором сведений, т.е. обеспечение того, чтобы каждое домохозяйство и каждое лицо было учтено только один раз. Это потребует обеспечения возможности увязки каждого домохозяйства (и каждого лица в домохозяйстве) с их географическим местоположением. Кроме того, если в рамках учетной переписи предусмотрен сбор переписных листов переписчиками, им необходимо своевременно получать соответствующую обратную связь, чтобы обновлять информацию о ходе сбора данных и не посещать домохозяйства, которые уже дали ответы.
237.
237. Потенциальный уровень использования интернет-варианта должен оцениваться путем определения доли населения, которая может иметь доступ в Интернет из дома, доли населения, которая пользуется услугами широкополосной связи, а также общего показателя использования Интернета в других целях, например, для банковских операций, заполнения налоговых деклараций, покупок.
238.
238. Необходимо также разработать системы и процессы, позволяющие возврат переписных листов через Интернет. Доказано, что они позволяют сократить расходы за счет снижения нагрузки на переписчиков, а также расходов на ввод данных, печать и почтовые расходы.
239.
239. Очень важным вопросом является безопасность данных, и это соображение должно быть основным при разработке инфраструктуры. Физически обособленные инфраструктуры должны быть созданы для сбора и обработки данных переписи. Заполненные индивидуальные переписные листы после их сбора и ввода данных должны быть перенесены в защищенную инфраструктуру обработки данных, отдельную от инфраструктуры сбора данных.
240.
240. Загружаемый из Интернета переписной лист характеризуется намного меньшими инфраструктурными требованиями по сравнению с переписными листами, заполняемыми в режиме онлайн. Однако загружаемые переписные листы требуют более высокого уровня компьютерной грамотности по сравнению с онлайновыми переписными листами. Они не обязательно будут работать на различных конфигурациях компьютеров, и будут присутствовать ожидания, что НСО должен быть способен решить любую индивидуальную проблему. Недавний опыт показывает, что респонденты, как правило, предпочитают заполнять переписные листы онлайн. По этим причинам рекомендуется использовать переписные листы для заполнения режиме онлайн.
241.
241. Для использования варианта онлайн-опроса необходимо предоставить респондентам учетные данные (имена пользователей, пароли) для доступа к онлайн-форме переписного листа. К способам передачи учетных данных относятся
(a) направление на бумажных переписных листах или в письмах;
(b) доставка переписчиком напрямую на почтовый адрес респондента;
(c) отправка по электронной почте;
(d) отправка с помощью службы коротких сообщений (SMS);
(e) использование учетных данных для входа на порталы государственных услуг или другие онлайн-сервисы, требующие ввода персонального идентификационного номера.
242.
242. Онлайн-форма переписного листа предоставляет возможность интерактивного редактирования, что позволяет повысить качество ответов, чего невозможно добиться при использовании бумажного переписного листа. Респонденты ожидают, что переписной лист будет содержать подсказки — как минимум, что они смогут пройти по нему шаг за шагом и что им будут задаваться вопросы, имеющие отношение к их ситуации. Для обеспечения высокого качества данных, собираемых через Интернет, важно предусмотреть механизм контроля ошибок в переписном листе. Такой контроль будет осуществляться в режиме реального времени, и респондент должен иметь возможность немедленно корректировать неправильные данные. Если в ответах респондента обнаруживаются противоречия, онлайновый переписной лист должен сигнализировать об этом и предоставить респонденту возможность исправить один или несколько ответов, удалить их или подтвердить, что описанная ситуация действительно имеет место в реальности (даже если такая возможность не предусмотрена разработчиками переписного листа). Однако необходимо найти золотую середину, чтобы нагрузка на респондентов, связанная с проверкой данных, не была настолько большой, что это отбивало бы у людей желание довести заполнение переписного листа до конца, и проводить тщательную проверку только по приоритетным вопросам, таким как возраст и пол. Еще одним преимуществом онлайнового переписного листа является то, что его можно разработать таким образом, чтобы пользователи могли легче заполнять его отдельные поля в домашних условиях.
243.
243. Наличие интернет-варианта может содействовать повышению качества переписи за счет упрощения процедур предоставления ответов некоторыми с трудом поддающимися регистрации группами респондентов. Большинство стран сообщают о трудностях с учетом отдельных групп населения, например, молодежи и людей, проживающих в жилых единицах с повышенным уровнем безопасности и ограниченным доступом. Некоторые группы инвалидов также могут счесть более простым заполнение интернет-формуляра по сравнению с бумажным переписным листом. Эти группы также более склонны использовать Интернет, и в случае его наличия данный вариант должен пропагандироваться среди этих групп респондентов в качестве средства поощрения их участия в переписи.
244.
244. Одной из главных задач, связанной с вариантом предоставления ответов через Интернет, является создание достаточной инфраструктуры. Перепись проводится в относительно короткие сроки и охватывает все население страны, и маловероятно, что НСО будут располагать адекватной инфраструктурой, способной выдерживать пиковые нагрузки на в ходе переписи. Поэтому вполне вероятно, что разработку интернет-решения можно с полным основанием передать на внешний подряд. Возможно, также потребуется модифицировать процедуры сбора для ограничения числа обращений. Так, например, одним из способов ограничения одновременных обращений к интернет-формуляру может являться разнесение во времени доставки переписных листов или письменных приглашений либо предъявление лицам, входящим в состав заранее определенных целевых групп или территорий, требования связываться с НСО для получения возможности использования интернет-формуляра.
245.
245. Переписным органам необходимо определить, каким образом они желают пропагандировать использование Интернета. Продвижение интернет-варианта зависит от способности этого сервиса выдержать ожидаемую нагрузку и должна координироваться с другими процедурами сбора. Стратегия отношений с общественностью должна предусматривать предоставление гарантий относительно безопасности информации, передаваемой через Интернет. Если предположить, что интернет-вариант будет предназначен для всего населения, в данном случае стратегия отношений с общественностью должна учитывать ожидания общественности относительно возможности подключиться к сайту в периоды пиковой нагрузки. Необходимо разработать простые сообщения («добрые советы») с рекомендациями использовать Интернет в периоды минимальной нагрузки, которые должны размещаться в случае необходимости на интернет-сайте переписи и распространяться через службу обработки телефонных запросов переписных органов, и в средствах массовой информации.
246.
246. Можно ожидать, что популярность варианта заполнения переписного листа через Интернет превысит показатели, зафиксированные в ходе раунда переписей 2020 года. В ходе переписи переписные органы должны осуществлять непрерывный мониторинг участия общественности и прилагать усилия к повышению процента предоставления ответов через Интернет, если необходимо.
5.5.2 Переносные устройства
247.
247. Постоянно возрастающая функциональность и снижение стоимости связи при использовании ноутбуков, планшетов и смартфонов, означает, что их использование может являться затратоэффективным решением для некоторых аспектов сбора данных в ходе переписи. Возможные виды применения таких устройств включают в себя замену ими бумажных карт, регистр и списков адресов для переписчиков, а также их применение в качестве средства ввода данных в ходе опроса населения. Они могут применяться в рамках любых подходов к сбору переписных данных, начиная с раздачи/возврата формуляров и заканчивая сбором данных из переписных листов.
248.
248. Переносные устройства обладают тем преимуществом, что они обеспечивают возможность предоставления двусторонней информации для управления в реальном времени. Администраторы переписи могут информироваться о ходе переписных операций по мере раздачи и сбора переписчиками заполненных переписных листов. Аналогичным образом администраторы могут через переносное устройство сообщать переписчику обновленную информацию о полученных переписных листах и о том, какие домохозяйства требуют повторного посещения. Кроме того, можно обмениваться геопространственными данными с целью пополнения баз данных (например, об отсутствующих адресах или новых объектах застройки), что позволит эффективно использовать ресурсы. Администраторы переписи могут в реальном времени определять переписные участки, на которых учет отстает от графика или не удовлетворяет стандартам качества, и принимать соответствующие меры (см. раздел ‎5.4).
249.
249. Централизованное управление переносными устройствами для сбора данных переписи включает автоматизацию следующих функций:
(a) Установка на устройства следующих компонентов: специального программного обеспечения для сбора данных переписи переписчиком (электронный переписной лист); списка адресов жилых объектов и карт района учетной переписи; метаданных и классификаторов, используемых в электронном переписном листе; инструментов для мониторинга работы устройства и респондента; учебных материалов для переписчиков;
(b) Установка связей между устройством, переписчиком и переписным участком как элементами соответствующих реестров (жилых объектов, переписчиков и устройств), обновление реестров и связей между их элементами в случае замены переписчиков или устройств;
(c) Онлайн-управление и мониторинг работы всех устройств после их включения полевыми сотрудниками;
(d) Очистка устройства от всей информации и программного обеспечения, использовавшихся для проведения переписи, после успешной передачи собранных данных в центральное хранилище данных по завершении переписи, а также подготовка устройств к долгосрочному хранению (консервации) или использованию в других целях (например, передаче в другое ведомство).
250.
250. Управление и мониторинг работы устройства в режиме онлайн включают в себя:
(a) получение информации о времени включения и выключения устройства;
(b) получение географических координат для заполнения каждого переписного листа и фиксация данных о процессе сбора информации, таких как продолжительность опроса, количество отвеченных вопросов, ошибки и исправления в переписных листах;
(c) передача на устройства адресов и идентификационных данных респондентов, участвующих в опросе в режиме онлайн, с тем чтобы переписчик мог проверить полноту учетных данных по каждому адресу и при необходимости внести исправления;
(d) удаленную установку обновлений программного обеспечения на устройствах в экстренных случаях. Рекомендуется использовать эту функцию только в том случае, если в ходе переписи обнаружены критические ошибки программного обеспечения, поскольку важно обеспечить согласованность данных, собранных с использованием разных версий программного обеспечения;
(e) блокировку устройства в случае, если полевой работник сообщит об утере или краже, с целью предотвращения неправомерного использования устройства или утечки информации с него;
(f) обеспечение возможности удаленной консультации переписчика с центральным бюро переписи.
251.
251. Использование переносных устройств обладает значительным потенциалом повышения эффективности сбора данных. Однако использование этих устройств требует изучения ряда технических вопросов:
(a) размер экрана может влиять на способность переписчика точно записывать и проверять ответы. По той же причине при использовании мобильных устройств для доступа к Интернету существует риск фрагментации данных из-за небольшого размера экранов.
(b) компактные и легкие устройства с достаточно большим объёмом памяти наиболее удобны для полевой работы переписчиков. Яркость и контрастность экрана должны регулироваться, чтобы устройством можно было пользоваться как при ярком, так и при слабом освещении.
(c) для обеспечения безопасности данных собранная информация должна храниться на устройствах в течение как можно более короткого времени. Это время зависит от частоты проведения процедур синхронизации данных, а также определяется временем, необходимым переписчикам для окончательной обработки и проверки заполненных переписных листов перед синхронизацией с хранилищем данных переписи.
(d) переносные устройства должны быть способны работать в автономном режиме в течение определенных периодов времени. Ресурс аккумулятора следует учитывать при определении ежедневной нагрузки полевого персонала. Возможно, стоит приобрести дополнительный внешний аккумулятор для этого устройства.
(e) если на этапе сбора данных требуется выполнить обновление системы и программного обеспечения, необходимо предотвратить риск потери ранее собранных данных или их несовместимости с данными, собранными после обновления;
(f) в некоторых регионах страны точность GPS (например, в густонаселенных городских районах) и качество приема мобильного сигнала (например, в горных или лесных районах) могут быть неудовлетворительными. Необходимо провести оценку мобильной интернет-связи, особенно в случае использования сбора данных через Интернет.
252.
252. Решения, основанные на использовании переносных устройств, должны пройти тщательное тестирование до начала этапа проведения переписи — как их самих, так и во взаимодействии с другими компонентами переписной системы, в которых переносные устройства не используются.
253.
253. Существует также ряд вопросов безопасности, связанных с использованием переносных устройств:
(a) большая вероятность кражи или потери по сравнению с бумажными переписными листами. Однако регулярная передача данных с переносных устройств на главный компьютер должна уменьшить необходимость проведения повторного учета в случае утраты устройств.
(b) необходимо принять меры по защите конфиденциальности любых данных, хранящихся на устройствах, в случае утраты устройства, а также при передаче данных. Данные, хранящиеся на устройствах, должны быть зашифрованы и доступны только при использовании специальных средств защиты (например, паролей, отпечатков пальцев).
(c) передача данных также должна быть защищена с помощью шифрования и осуществляться по сквозным защищенным каналам;
(d) программное обеспечение системы безопасности должно быть установлено на устройство и быть совместимо с другими установленными в нем приложениями. Однако программное обеспечение системы безопасности и пароли дополнительно усложняют пользование такими устройствами. Данные меры безопасности приведут к увеличению расходов по поддержке.
254.
254. Учебные материалы для переносных устройств следует загрузить на устройства, чтобы переписчики могли удобно использовать их во время обучения и полевой работы. Они должны охватывать все аспекты работы переписчика, быть интерактивными, обеспечивать удобную навигацию и содержать наглядные примеры того, как переписчик должен реагировать во всех возможных ситуациях при использовании данного устройства.
255.
255. Переписным органам следует заранее продумать вопрос об использовании большого количества устройств после завершения переписи. Хранить устройства до следующей переписи нецелесообразно, поскольку без использования и подзарядки они могут устареть и выйти из строя уже через 5–10 лет. Переписные органы могут передать часть этих устройств другим пользователям (например, государственным организациям), оставив часть у себя.
5.5.3 Телефон
256.
256. В прошлом автоматизированные телефонные опросы предлагались в качестве потенциально экономически эффективного решения для стран, в которых используется сокращенный переписной лист, требующий сбора лишь базовой демографической информации. Однако ни одна страна не применила его в ходе переписей раунда 2020 года. Не рекомендуется проводить опросы с помощью автоматизированной телефонной системы.
257.
257. Метод автоматизированного опроса по телефону с помощью компьютера (АОТК) может использоваться для сбора данных по вопросникам переписи и (или) для проверки и заполнения пропущенных данных в длинных вопросниках. Удобство таких систем для пользователей резко снижается либо по мере увеличения числа и сложности вопросов, либо по мере увеличения числа членов домохозяйства.
5.5.4 Дизайн электронного переписного листа
258.
258. Дизайн электронного переписного листа является очень важной частью технологического решения в тех случаях, когда ответы предоставляются в режиме онлайн или собираются с помощью переносных устройств. При разработке дизайна электронного переписного листа необходимо учитывать следующие требования:
(a) включить в его состав полный набор вопросов и их четкую последовательность, причем вопросы подразделяются на открытые и закрытые;
(b) включить в его состав схемы пропуска вопросов с функцией автоматического отображения только релевантных вопросов и пропуска тех, которые не имеют отношения к делу или не применимы к конкретным респондентам;
(c) учитывать все варианты заполнения переписного листа в зависимости от предоставленных ответов, в том числе для редких случаев, чтобы каждый вопрос был адресован хотя бы некоторому подмножеству респондентов;
(d) предусмотреть варианты ответов, позволяющие выбрать либо один, либо несколько вариантов для закрытых вопросов, а в случае выбора варианта «иное» — предоставить возможность ввести собственный ответ респондента;
(e) по возможности разместить весь вопрос и ответ на экране устройства без необходимости прокрутки или перехода на следующий экран, так как при ответе на вопрос может быть упущена скрытая часть вопроса или варианты ответов;
(f) предоставить доступ к справке в виде текстовой подсказки или ссылки на соответствующий элемент метаданных или учебных материалов;
(g) обеспечить удобную навигацию между задаваемыми одному респонденту вопросами между членами одного домохозяйства и между разными разделами переписного листа (например, о жилищных условиях, о домохозяйстве, о респонденте);
(h) использовать встроенные средства проверки достоверности введенных данных с учетом ранее введенной информации о респонденте и других членах данного домохозяйства;
(i) установить индикатор заполнения переписного листа, а также общие количественные характеристики заполненного переписного листа, такие как количество лиц в домохозяйстве и процент ответов на соответствующие вопросы.
259.
259. В случае использования электронного переписного листа как для самоисчисления респондентом в режиме онлайн, так и для устройства переписчика, структура переписного листа может отличаться, поскольку респонденты не знакомы с методологией переписи, в то время как переписчики прошли предварительную подготовку и хорошо знакомы с терминологией переписи и метаданными, встроенными в переписной лист.
260.
260. Онлайновый переписной лист должен также содержать краткое изложение основных требований к ее заполнению респондентом. К ним относятся:
(a) описание общей структуры переписного листа и порядка его заполнения;
(b) примерное время, необходимое для заполнения переписного листа одним респондентом или одним домохозяйством;
(c) описание способов вызова справочной информации и действий при появлении сообщений об ошибках;
(d) описание возможности исправления, удаления или добавления информации в ранее заполненный переписной лист, если это необходимо;
(e) признаки успешного и неуспешного прохождения процедуры переписи, а также дальнейшие действия респондента (например, получение подтверждения участия в переписи);
(f) способ обратной связи с НСО, например, номер телефона или адрес электронной почты горячей линии переписи или НСО, для оценки качества онлайн-услуг или для задания вопросов, на которые не было получено ответа при заполнении переписного листа;
(g) возможность при необходимости получить перевод переписного листа на наиболее распространённые языки страны;
(h) предоставление ответов на часто задаваемые вопросы с использованием терминологии, понятной респондентам, а также ссылки на страницу интернет-сайта НСО, где изложены правовые, методологические и организационные принципы проведения переписи.
5.5.5 Технология для учета людей с инвалидностью, не имеющих доступа к Интернету
261.
261. При внедрении новых технологий необходимо помнить, что перепись должна охватить все население, независимо от используемого технического оборудования и уровня владения компьютером респондентов.
262.
262. Технологии могут способствовать учетной переписи лиц с ограниченными возможностями и тех, кто не имеет доступа к цифровым технологиям, двумя основными способами: (a) обеспечивая охват респондентов, не имеющих необходимого подключения к Интернету; (b) предоставляя как можно большему числу людей возможность вводить свои ответы в электронном виде.
263.
263. Без доступа к цифровой связи. Для того чтобы охватить как можно больше людей, необходимо выявить населенные пункты, в которых отсутствует надлежащий доступ к Интернету. Один из аспектов, который национальные статистические органы должны учитывать в таких случаях, — это предоставление возможности заполнения бумажных переписных листов. Однако следует рассмотреть и другие варианты, например, направление переписчиков для сбора информации с помощью переносных устройств, подключенных к Интернету через спутник, или предоставление респондентам номера телефона, по которому они смогут заполнить переписной лист по телефону.
264.
264. Доступность заполнения переписных листов через Интернет. Еще один аспект, который следует учесть, — это то, как люди с ограниченными возможностями могут заполнить переписной лист через Интернет. Сервис по заполнению переписных листов через Интернет должен соответствовать стандартам доступности, определенным в Руководстве по доступности интернет-контента (РДИК) версии 2.2.21 Несмотря на техническое соблюдение этих стандартов, важно учитывать вопросы доступности уже на этапе разработки контента. Перед разработкой любых новых функций, которые могут повлиять на доступность, необходимо проконсультироваться со специалистами по вопросам доступности и группой по пользовательскому опыту, чтобы обеспечить надлежащую доступность новых функций. Примеры реализованных функций включают в себя:

21 Консорциум World Wide Web (2024). Руководство по доступности интернет-контента (WCAG) 2.2 (Web Content Accessibility Guidelines (WCAG) 2.2.).

(a) скрытый текст для полей с автозаполняемыми символами, предназначенный для информирования пользователей с нарушениями зрения о том, какие данные необходимо ввести самостоятельно, а какие будут заполнены автоматически;
(b) необходимый цветовой контраст, обеспечивающий возможность просмотра текстового контента пользователями;
(c) методы привязки меток к интерактивным элементам управления, позволяющие вспомогательным технологиям распознавать эти метки и отображать их пользователю, что дает пользователю возможность понять назначение данного элемента управления.
5.5.6 Сбор данных из бумажных переписных листов
265.
265. Исходя из опыта проведения переписей раунда 2020 года, можно предположить, что большинство стран, которые в ходе следующей переписи будут применять метод прямого учета, воспользуются возможностью заполнения переписных листов через Интернет. Можно предположить, что использование бумажных переписных листов и технологий оптического распознавания носит ограниченный характер. Тем не менее сбор данных с помощью бумажных переписных листов может оказаться необходимым из-за предпочтений респондентов или отсутствия у них доступа к Интернету. По сравнению со сбором данных через Интернет или с помощью электронных устройств, это требует дополнительных этапов обработки, таких как сканирование, ввод данных и, возможно, ручной ввод операторами. Тот факт, что системе приходится распознавать различные почерки, усложняет этот процесс.
266.
266. Для обработки бумажных переписных листов рекомендуется использовать автоматизированные процессы, такие как технологии интеллектуального распознавания символов (ИРС).
267.
267. Технология оптического распознавания меток (ОРМ) может являться затратоэффективным вариантом в тех случаях, когда переписной лист содержит только вопросы с помечаемыми вариантами ответов. Для обработки рукописных ответов требуются дополнительные средства ввода данных или автоматизированного кодирования. Однако технологии ОРМ в значительной степени уступили место технологиям ИРС.
268.
268. Наиболее затратоэффективным вариантом, вероятно, будет сочетание оцифровки изображений, ИРС, корректировки данных и автоматического кодирования. Пример такого процесса кратко описан ниже:
(a) Переписные листы обрабатываются с помощью сканеров для получения изображений. Программное обеспечение распознавания используется для выявления помеченных вариантов ответов и преобразования рукописных ответов в текстовые величины. Для определения того, какие ответы обладают приемлемым качеством, а какие ответы требуют дополнительной корректировки или валидации, устанавливаются доверительные уровни.
(b) Автоматизированная корректировка призвана снизить необходимость вмешательства оператора и, как правило, предусматривает использование таблиц словарного поиска и средств контекстуального редактирования. Словари разрабатываются с учетом подлежащих обработке вопросов переписи. Таким образом, словарь для страны рождения будет содержать только названия стран. Подготовительная работа по созданию словарей терминов естественного языка значительно повысит эффективность кодирования.
(c) Ручная корректировка может использоваться в отношении изображений, не поддающихся распознаванию. Этот подход является затратоэффективным только в отношении тех вопросов, в случае которых существует высокая вероятность автоматического кодирования исправленных данных.
(d) Автоматическое кодирование опирается на компьютеризованные алгоритмы для сопоставления введенных ответов с соответствующими индексами. Ответы, оставшиеся без соответствия, затем подвергаются компьютеризированному кодированию. Для ответов, которые невозможно кодировать автоматически, рекомендуется использовать алгоритм машинного обучения, который сможет заменить операторов-кодировщиков, обеспечив такое же или даже более высокое качество данных и значительно сократив расходы. Для обучения алгоритма машинного обучения можно использовать данные предыдущей переписи. Также можно использовать данные текущего цикла тестирования переписи, особенно если необходимо кодировать новые переменные и можно убедиться, что качество этих данных не уступает или превосходит качество данных, полученных с помощью людей-кодировщиков.
(e) Дополнительные соображения по вопросам использования технологий цифровой визуализации, ИРС, корректировки данных, автоматического кодирования, оптического распознавания меток (ОРМ) и оптического распознавания символов (ОРС) представлены в рекомендациях КЕС для раунда переписей населения 2020 года.22 Можно ожидать, что генеративный искусственный интеллект откроет новые возможности и заменит операторов ввода. Однако для создания надлежащих моделей, обеспечивающих высокое качество данных, требуются инвестиции.
5.6 Административные данные
5.6.1 Область применения
269.
269. Технологии, применяемые при использовании административных данных, отличаются от тех, которые используются при сборе данных на местах. Развитие новых информационных и телекоммуникационных технологий (ИКТ) и повышение их доступности позволяют более широко использовать административные регистры в целях переписей населения и жилищного фонда. Учитывая развитие передовых технологий и стремление государственных органов внедрять инновационные решения при проведении переписей в рамках цикла переписей 2030 года, потребуется создать или модернизировать программно-аппаратную инфраструктуру для сбора, хранения и сопоставления данных из административных источников, а также для хранения метаданных о процессах и результатах.
270.
270. Качество исходных данных во многом определяет качество статистической продукции. По этой причине важнейшее значение имеет методология повышения качества данных из административных источников, например, приведение их в соответствие с требованиями статистики. Современные ИКТ могут оказаться крайне полезными и сыграть ключевую роль в повышении эффективности и результативности этих операций. Для оценки качества административных источников, используемых при проведении переписей, следует руководствоваться руководящими принципами ЕЭК ООН по данному вопросу, опубликованными в 2021 году.23
271.
271. В рамках планирования, как части подготовительных работ по переписи, необходимые технические требования, связанные с использованием данных из административных источников, которые могут повлиять на необходимость модернизации инфраструктуры, должны быть специфицированы в следующих областях:
(a) сбор данных;
(b) хранение данных;
(c) увязка данных;
(d) хранение метаданных о процессах и продуктах.
272.
272. Применение нескольких способов сбора данных из административных регистров и данных из других источников, которые используются в целях переписей населения и жилищного фонда, требует более комплексных процессов организации и управления, а также более сложных систем. Современные технологии и в этом случае открывают возможности для совершенствования. Процесс сбора данных из административных регистров должен включать в себя подготовку стратегии сбора данных с использованием множественных способов.
5.6.2 Безопасность и конфиденциальность24

24 См. также раздел ‎7.1.1 Принципы конфиденциальности.

273.
273. Крайне важно учитывать растущее внимание, уделяемое в обществе вопросам безопасности, конфиденциальности и защиты данных. Это находит отражение в правовых и статистических системах многих стран. Кроме того, государства-члены ЕС обязаны соблюдать Общий регламент по защите данных (ОРЗД).25 В связи с этим к органам, проводящим перепись населения и жилищного фонда на основе регистров, предъявляются более высокие требования в отношении получения и обработки данных. Для удовлетворения этих требований рекомендуется уделять особое внимание принципу «необходимости ознакомления» и обработке анонимизированных данных.

25 Регламент (ЕС) 2016/679 Европейского парламента и Совета от 27 апреля 2016 года о защите физических лиц в отношении обработки персональных данных и о свободном обращении таких данных.

274.
274. Безопасная ИТ-инфраструктура является необходимым условием для сбора данных из административных регистров. Одним из критически важных вопросов, связанных со сбором данных из административных источников, является защита данных. Независимо от применяемой технологии стратегия сбора данных должна обеспечивать информационную безопасность. Данный вопрос следует учитывать уже на раннем этапе планирования получения и сбора данных из административных регистров и проектирования надлежащей программной и аппаратной инфраструктуры. Следует подробно рассмотреть технические вопросы, касающиеся шифрования передаваемых данных наряду с использованием безопасных каналов передачи.
275.
275. Необходимо принять надлежащие технические и организационные меры для защиты данных от случайного или незаконного уничтожения, случайной утраты (в том числе резервных копий), изменения, несанкционированного раскрытия или доступа.
276.
276. Система безопасности должна быть многоуровневой. Владельцы регистров, национальные статистические органы, осуществляющие сбор данных, и другие партнеры должны организовать безопасные каналы передачи данных с использованием соответствующих сертификатов для контроля доступа, предоставляемого сборщикам данных.
277.
277. Благодаря систематизации данных по различным «стадиям» (таким как исходные данные, подготовленные данные, статистические данные и итоговые данные) можно эффективно организовать управление доступом для различных должностных групп и подразделений в рамках национального статистического органа. Доступ к данным должен предоставляться исключительно по принципу «необходимости ознакомления», при этом на всех уровнях агрегирования должны применяться анонимизированные идентификаторы и средства контроля за раскрытием информации.
5.6.3 Увязка, передача и хранение данных
278.
278. Новые технологии являются полезными для процесса увязки записей и данных. После определения административных источников, которые будут использоваться в переписи, необходимо будет составить их перечень и создать интерфейсы прикладного программирования (ИПП) для автоматической передачи данных в центральный орган.
279.
279. Административные источники различаются как в рамках отдельных предметных областей внутри одной страны, так и между странами. По возможности рекомендуется использовать стандартизированные интерфейсы прикладного программирования (ИПП). Независимо от используемого интерфейса или возникающих различий, качественные метаданные и глубокое понимание данных имеют огромное значение для их включения в перепись.
280.
280. В настоящее время многие страны переходят на облачные системы хранения данных и вычислений (см. раздел ‎5.9). По сравнению с традиционными локальными решениями такой переход открывает новые возможности, в том числе позволяет создавать более гибкую среду данных с возможностью управления параметрами — так называемые «озера данных» — вместо традиционных тематически структурированных и обновляемых наборов данных. Эти хранилища данных будут предъявлять высокие требования к метаданным и точности периодизации, что станет более реалистичным благодаря росту вычислительной мощности облачных систем. Централизация административных данных в «озере данных» будет способствовать оптимизации бизнес-процессов и обеспечит мощную и надежную инфраструктуру для хранения данных, создания метаданных и синхронизации различных источников данных.
5.6.4 Совершенствование удобства использования административных данных
281.
281. Для преобразования административных данных в статистические данные можно использовать различные методы. Благодаря внедрению процедуры автоматической очистки данных удается устранить ошибки в исходных данных из административных регистров и эффективно редактировать эти данные.
282.
282. Модели машинного обучения можно использовать, например, для определения «адреса по переписи» физического лица или типа частного домохозяйства.26

26 Использование методов машинного обучения для определения типа частного домохозяйства в Швейцарии: ECE/CES/GE.41/2022/6 (Using machine learning methods to determine type of private household in Switzerland: ECE/CES/GE.41/2022/6).

283.
283. Искусственный интеллект (ИИ) можно использовать, например, для определения классификации отрасли экономики по видам занятости. Классификация с использованием искусственного интеллекта может быть более эффективной, давать качественные результаты и позволять классифицировать значительную долю случаев. Модели классификации, используемые для этих целей, требуют постоянного обновления и анализа качества для оценки результатов. Понятно, что конкретные требования к безопасности и конфиденциальности не всегда позволяют работать с такими данными и моделями в облаке. Кроме того, известны ограничения, связанные с использованием классификационных моделей, разработанных на английском языке, в контексте других языков.
5.7 Подготовка и распространение информации
284.
284. Традиционно выпуск переписи включает в себя агрегированные таблицы, статистические данные, иллюстративные материалы и карты с соответствующими метаданными (см. ‎Глава 6‎Глава 7). Спрос на опирающиеся на фактологические данные политику и планирование создает спрос на переписные данные со стороны все более широкого круга пользователей. Поэтому системы вывода данных должны быть доступны для самых разных пользователей — от тех, кому нужен быстрый доступ к основным цифрам в заголовках, до тех, кто планирует проводить углубленный анализ.
285.
285. Распространение через Интернет также позволяет осуществлять разработку надлежащих продуктов для лучшего учета потребностей различных типов пользователей переписных данных, затратоэффективное распространение намного более широкого набора переписных данных и повышение удобства и простоты использования данных. Следует предоставить доступ к интерфейсам прикладного программирования (ИПП) для повышения удобства использования предоставляемых данных.
286.
286. Функции и содержание данных могут определяться с учетом потребностей пользователей различного уровня. Эти функции должны быть эффективно интегрированы, начиная с простых и кончая самыми сложными, с тем чтобы служить ориентиром для пользователя в зависимости от характера запроса и анализа, который он желает осуществить в отношении различных статистических продуктов.
287.
287. Одной из главных целей переписи является разработка информации о малых географических районах и о малых группах населения. Распространение через Интернет может быть ориентировано на поддержку этих двух видов использования данных. В случае небольших географических территорий технологии ГИС можно использовать как для определения интересующих областей при поиске данных, так и для нанесения на карту результатов поиска. Существуют разнообразные пакеты программного обеспечения, которые могут использоваться для выборки совокупностей из крупных заранее определенных матричных таблиц.
288.
288. Система распространения информации в Интернете должна обеспечивать пользователям возможность экспортировать результаты в различные широко распространенные программы для статистического анализа, составления таблиц или создания карт.
289.
289. По мере роста объема собираемых данных стали применяться средства визуализации данных, чтобы помочь пользователям с любым уровнем подготовки понять ключевую информацию, извлеченную из этих данных. Визуализация данных может использоваться для оперативной передачи информации, упрощения представления больших массивов данных, выявления закономерностей и взаимосвязей в данных, а также для отслеживания изменений переменных во времени.
290.
290. Рекомендуется размещать данные переписи на интерактивных онлайн-платформах, где различные группы пользователей могут создавать собственные таблицы и визуализации (например, графики, карты) в соответствии со своими потребностями.
291.
291. Основное внимание следует уделить применению руководящих принципов FAIR в области управления научными данными и обеспечения их сохранности.27 Эти принципы подчеркивают способность вычислительных систем находить, получать доступ, взаимодействовать и повторно использовать данные без участия человека или с минимальным его участием. Аналитические возможности платформ могут оставаться ограниченными, поскольку это не является основной целью переписи.

27 Инициатива по обеспечению открытых, доступных, совместимых и многократно используемых данных GO FAIR. Уилкинсон М., Дюмонтье М., Аальберсберг И. и др. (2016).Руководящие принципы FAIR по управлению научными данными и обеспечению их сохранности. Scientific Data 3, 160018 (GO FAIR Initiative. Wilkinson M, Dumontier M, Aalbersberg I et al. (2016). The FAIR Guiding Principles for scientific data management and stewardship. Scientific Data 3, 160018).

292.
292. Пользователи данных переписи имеют весьма разный уровень статистической и компьютерной грамотности. НСО рекомендуется учитывать интересы следующих групп пользователей:
(a) пользователи, которые используют систему эпизодически и в основном просматривают визуализации данных или основные моменты отчетов;
(b) пользователи среднего уровня, которые настраивают визуализации или выбирают конкретные данные;
(c) опытные пользователи, которые будут загружать данные для проведения собственного анализа и использовать интерфейсы прикладного программирования (API).
293.
293. Международные стандарты, такие как стандарт обмена статистическими данными и метаданными (SDMX), следует рассматривать в качестве приоритета при форматировании выходных данных и метаданных, предоставляемых пользователям.
294.
294. Независимо от способов доступа или распространения, обеспечение статистической конфиденциальности данных переписи является первостепенной задачей в любых подобных системах, и должны быть предусмотрены соответствующие процедуры контроля за раскрытием статистической информации.
5.8 Хранение и архивирование данных
295.
295. Технологии хранения данных развивались в соответствии с новыми технологическими тенденциями. Исторически данные хранились локально в НСО на традиционных магнитных лентах, которые иногда дополнялись дисковыми накопителями. Однако в связи с тем, что объемы данных продолжают расти в геометрической прогрессии, пришлось адаптировать возможности систем их хранения. В настоящее время многие организации рассматривают возможность внедрения гибридной модели хранения данных, предполагающей использование как облачных, так и локальных решений в зависимости от конкретных потребностей.
296.
296. При определении того, какая политика хранения данных будет наиболее подходящей для конкретных статистических организаций, необходимо учитывать ряд факторов.28 К ним относятся:

28 См. также раздел 8.1 Преимущества и расходы.

(a) риски, связанные с использованием внешних решений для хранения данных.
(b) новые навыки, необходимые для разработки и обслуживания современных систем хранения данных, таких как гибридные решения. Таких специалистов может быть сложно найти, а их удержание обходится дорого;
(c) каждый НСО должен убедиться, что она понимает свои данные с точки зрения их классификации. Это поможет в принятии решений, необходимых для определения подхода к формированию потенциала в области проектирования систем хранения данных;
(d) при рассмотрении организациями новых решений в области хранения данных необходимо предусмотреть меры кибербезопасности, позволяющие выявлять, обнаруживать, защищаться от киберрисков и -угроз, реагировать на них и восстанавливать работоспособность. Их стратегия кибербезопасности должна обеспечить наличие средств защиты данных в гибридной среде.
(e) существует множество подходов к облачному хранению данных, в том числе хранение в «леднике» для обеспечения долгосрочного хранения редко используемых данных. Организациям, которые до сих пор полагались на резервное копирование всех данных с помощью полного, инкрементального или дифференциального методов, необходимо будет глубже изучить свои данные, чтобы в полной мере использовать возможности этих новых подходов к хранению.
(f) при сотрудничестве с внешними поставщиками услуг хранения данных национальные статистические органы должны будут обеспечить заключение соответствующих соглашений, отвечающих их ожиданиям в отношении предоставления услуг;
(g) хранение и архивирование должны осуществляться в соответствии с законодательными актами и устоявшимися правилами. Например, в Европейском союзе любые данные научных рукописей должны храниться в течение 10 лет;29

29 Решение Комиссии (ЕС) 2021/2121 от 6 июля 2020 года об управлении документацией и архивами.

(h) необходимо внедрить и протестировать процедуры резервного копирования и восстановления, чтобы выполнить все действия, необходимые для перезапуска систем и служб, а также проверить их работоспособность и объективность данных;
(i) рекомендуется разработать и протестировать план обеспечения непрерывности работы, направленный на защиту систем и связанных с ними данных, а также на восстановление их работоспособности в случае таких угроз, как стихийные бедствия или кибератаки.
5.9 Облачные технологии
297.
297. Облачные вычисления развиваются очень быстрыми темпами, и, как ожидается, станут наиболее распространенной ИТ-инфраструктурой в компаниях по всему миру. Стратегии внедрения облачных технологий варьируются от «только облачные» и «облачные прежде всего» до, в последнее время, «умные облачные».30

30 ЕЭК ООН, 2024 г. . Женева: Организация Объединенных Наций.

298.
298. Внедрение облачных технологий также приобретает все большее значение для государственных учреждений по всему миру, поскольку они осознают, насколько облачные вычисления способны преобразовать их деятельность, повысив операционную эффективность, масштабируемость и качество предоставления услуг. Использование облачных технологий позволяет им оптимизировать использование ресурсов, повысить доступность данных и стимулировать инновации в различных сферах.
299.
299. Развитие облачных технологий привело к появлению множества платформ и моделей предоставления услуг. К моделям предоставления услуг относятся «инфраструктура как услуга» (IaaS), «платформа как услуга» (PaaS) и «программное обеспечение как услуга» (SaaS). К платформам относятся публичные, частные и местные системы облачного хранения данных. Каждая из этих отдельных моделей может создавать как возможности, так и сложности для статистических организаций при их внедрении и использовании.
300.
300. Национальные статистические органы должны учитывать и анализировать ряд факторов при переходе на облачные технологии.31

31 Там же.

(a) Суверенитет данных — требование, согласно которому поставщик облачных услуг должен гарантировать, что облачные услуги и базовая инфраструктура спроектированы таким образом, чтобы обеспечить доступ к данным в соответствии с законодательством и нормативными актами страны происхождения данных. Международные поставщики облачных услуг опираются на глобальные договоры, которые могут не соответствовать местному законодательству. Могут существовать правовые ограничения, касающиеся географического расположения центров обработки данных провайдера.
(b) Юрисдикция в случае возникновения спора. Для этого потребуется заключение локальных соглашений, согласованных на национальном уровне.
(c) Меры и протоколы по обеспечению безопасности данных, применяемые поставщиком.
(d) Мнение общественности, политиков и заинтересованных сторон о безопасности данных, конфиденциальности и контроле при использовании облачных решений.
(e) Свобода выбора наиболее подходящего поставщика с учетом его опыта работы и репутации в отрасли.
(f) Финансовые последствия использования облачных технологий.
301.
301. Для многих статистических организаций целесообразным может оказаться поэтапный подход к внедрению облачных технологий. Начав с менее критичных приложений и систем и извлекая уроки из полученного опыта, можно обеспечить более высокую степень уверенности у ключевых заинтересованных сторон, принимающих решение о переходе на облачные технологии. Обеспечение постоянной оценки и измерения рисков также будет способствовать успешному переходу.
302.
302. Облачная инфраструктура может обеспечить значительные преимущества, если перепись проводится с периодичностью от 5 до 10 лет. Одним из преимуществ использования облачных технологий является возможность легко увеличивать или уменьшать мощности в зависимости от потребностей. Это может привести к сокращению расходов на программу переписи, однако требует осторожности и учета более широких последствий для переписного органа. Например, локальная инфраструктура, созданная для проведения переписи, может быть повторно использована для других целей переписного органа. Таким образом, в рамках программы переписи появятся возможности для экономии средств, однако их следует оценивать с точки зрения всей статистической системы в целом. Для более короткого цикла, такого как ежегодная перепись, это, возможно, не самый лучший подход.
303.
303. К числу других преимуществ относятся инвестиции в новые облачные технологии, такие как облачно ориентируемые решения и платформы как услуга (PaaS). При выборе мультиоблачной архитектуры следует также учитывать преимущества, которые дают сильные стороны различных облачных провайдеров. Например, может быть одна облачная инфраструктура для приложения и другая — для размещения базы данных.
304.
304. Облачная инфраструктура обеспечивает высокую гибкость, но требует тщательного управления, чтобы не платить за неиспользуемые ресурсы. В противном случае использование облачных технологий может оказаться более затратным вариантом. Облачные серверы следует уменьшать в размере, когда они не используются, и увеличивать — по мере необходимости.
305.
305. Процесс перехода в облако необходимо тщательно проанализировать и тщательно спланировать. Просто перейти в облако ради использования другого дата-центра — не лучший вариант, так как это может обойтись дороже, чем использование локальной инфраструктуры. Различным странам следует стремиться к «облачной грамотности», то есть переходить в облако путем переноса приложений в облачную среду или использования облачно-ориентируемого подхода к разработке, развертыванию и управлению приложениями в средах облачных вычислений.
306.
306. Использование облачных технологий может дать значительные преимущества при проведении переписи, но не всегда является оптимальным решением. Перед переходом в облако рекомендуется провести тщательную оценку.