Data Editing
CONSOLIDACIÓN DE ARCHIVOS
La clasificación de los registros en la base de datos se determina por Área Metropolitana, Departamento, Municipio y las variables principales, como Número de Establecimientos, Personal Ocupado, etc. Aquí se establece un análisis de los envíos de información y formularios y un control del operativo de las subsedes.
Esta actividad se ejecuta en la Dirección Territorial sobre las subsedes de su jurisdicción de acuerdo con el reporte que suministra el sistema sobre el estado de distribución, recolección, crítica, captura, novedades del operativo y envíos a la sede. Cuando hay inconsistencias se procede a efectuar la depuración utilizando el programa de captura en Visual FoxPro. Una vez depurada toda la información se entregan las tablas respectivas al equipo encargado del procesamiento en la herramienta SAS, donde se procede a generar los cuadros preliminares. Luego, se aplica una revisión y corrección antes de generar los cuadros finales para difusión.
El proceso de consolidación de la información se realiza por parte de las Direcciones Territoriales y subsedes a través del formulario electrónico, en donde debe reposar tanto la información capturada directamente por la fuente como la información capturada por los críticos, cuando las fuentes proporcionan la información en medio físico.
PROCESAMIENTO DE DATOS
Determinación de la Actividad Industrial de los Establecimientos Investigados
Ante todo es necesario precisar que una actividad económica debe entenderse como un proceso, esto es, como una combinación de acciones y recursos cuyo resultado es un producto o conjunto de productos homogéneos. Así pues, una actividad Industrial tiene lugar cuando unas materias primas, a través de un proceso, se transforma en un producto nuevo.
El conjunto de acciones empresariales (capital, mano de obra, estructura administrativa y operativa, etc.) involucradas en la actividad industrial se dirigen exclusivamente a la producción del grupo más homogéneo posible de bienes manufacturados.
Los resultados de las fuentes investigadas por la Encuesta Anual Manufacturera deben ser agrupados y presentados en resúmenes a nivel de clases industriales según la CIIU Rev. 3 A.C. y a nivel de productos de acuerdo con la CPC. Para obtener los resultados de una Clase industrial se deben agrupar los datos de aquellos establecimientos homogéneos en cuanto a la actividad principal que desarrollan. Es pues esencial que cada establecimiento manufacturero sea adecuadamente clasificado según su actividad principal y, por tanto, que las normas para la determinación de esa actividad principal se encuentren claramente definidas.
La amplia gama de posibilidades y actividades que comprende el desarrollo del sector manufacturero hace compleja la clasificación precisa de los establecimientos. No obstante, la dificultad de la determinación de la actividad principal de un establecimiento industrial sólo se plantea en aquellos casos en que se desarrollan varias y diferentes actividades manufactureras. En estos eventos se trata de determinar cuál de ellas es la actividad principal y cuáles las secundarias.
Usualmente la noción de actividad para las unidades industriales está ligada a la noción de familia productos. En términos económicos puede decirse que la actividad principal de un establecimiento, es aquella que en mayor grado contribuye al valor agregado total del mismo. Como en la práctica es muy difícil descomponer el valor agregado de un establecimiento en las diferentes actividades que desarrolla, se aconseja determinar la actividad principal a través de la participación de los grupos homogéneos de bienes elaborados, en la estructura total de producción.
Tomando la ordenación de la CIIU Rev. 3 A.C., las normas y conceptos expresados y los lineamientos de la CPC en conjunto, esta tarea se hace sino fácil menos compleja. En efecto, a continuación se darán los derroteros para que utilizando el Capítulo VIII del formulario de la Encuesta Anual Manufacturera y las mencionadas clasificaciones, la ubicación y clasificación de las fuentes se realice de manera eficiente y precisa.
Partiendo del hecho de que todos y cada uno de los productos rendidos por las fuentes informantes en el capitulo VIII, han sido debidamente codificados en la etapa de “critica y codificación“, a ocho (8) dígitos de acuerdo con el Manual de codificación CPC de la Encuesta Anual, el sistema de procesamiento durante la etapa de captura - depuración clasifica automáticamente cada establecimiento de acuerdo con su actividad principal utilizando el siguiente método:
En primera instancia, es necesario precisar el tipo de productos que manufactura cada establecimiento y determinar a que subclase (5 dígitos) de la CPC corresponden dichos productos y en segundo lugar asignar la actividad (4 dígitos) de la CIIIU Rev. 3 A.C. a la que pertenezca el grupo de productos que principalmente manufactura.
De acuerdo con la información suministrada por los establecimientos investigados en el Capítulo VIII, que corresponde a los productos manufacturados se debe:
1. Determinar la clase CPC (5 dígitos) a la que pertenecen los diferentes productos que fabrican los establecimientos
Para lograr esto se agrupan y subtotalizan los valores de producción de los códigos de los productos cuyos primeros cinco dígitos resulten iguales. De esta manera se obtienen grupos de productos homogéneos, los cuales pueden corresponder a una o varias subclases de la CPC.
2. Establecer la Clase CIIU Rev. 3 A.C. de mayor valor de producción
Una vez agrupadas y subtotalizadas las subclases CPC (5 dígitos), se procede a asignar a cada una de ellas la Clase CIIU Rev. 3 A.C. (4dígitos) que le corresponda de acuerdo con el Manual de codificación CPC de la Encuesta Anual Manufacturera. Posteriormente, se agrupan y subtotalizan las Clases CIIU cuyos cuatro dígitos resulten iguales, determinando así las diferentes actividades industriales que desarrolla el establecimiento.
La actividad (Clase CIIU a 4 dígitos) que resulte con mayor valor se constituirá en la actividad principal del establecimiento y en esta actividad debe agregarse la totalidad de la información del mismo, cuando se presenten los cuadros correspondientes.
La aplicación en la producción estadística de la Encuesta Anual Manufacturera de las adaptaciones para Colombia de la revisón 3 de la CIIU y de la nueva Clasificación de Productos CPC Ver. 1.0., a partir del año 2000, conlleva importantes cambios en la metodología de asignación de la actividad de los establecimientos investigados y en la interpretación no solo de la información presentada en estas nuevas clasificaciones, sino que dificulta de manera significativa la explicación y examen de las series históricas clasificadas en CIIU Rev. 2, por lo que es indispensable crear mecanísmos que permitan relacionar y homologar la información, como sería el caso de construcción de tablas correlativas. Sin embargo, este método presta importantes servicios cuando no se requiere el máximo grado de desagregación de los datos y especificidad en el análisis, como es el caso de la EAM y por tanto resulta poco práctico, cuando además se debe combinar una clasificación para la asignación de actividades economicas con otra diferente para la designación de productos y materias primas en una misma investigación.
En este sentido el DANE ha estructurado una metodología que sistemáticamente permite la conversión de la información de la Encuesta Anual Manufacturera de CIIU Rev. 2, a CIIU Rev.3 y CPC, para el periodo comprendido entre 1970 y 2000, de manera tal que en forma práctica y eficiente hace posible aplicar e interrelacionar con la CIIU rev. 2 las adaptaciones de estas dos nuevas clasificaciones en cada uno de los años que componen las series historicas de actividades industriales, productos y materias primas reportados por los establecimientos investigados, eliminando la posibilidad de inconsistencias y alejando la presencia de desfases insalvables en el analisis.
FORMA DE CODIFICAR
Para el proceso de clasificación de productos nuevos se realizan los siguientes pasos:
1. Diligenciar el formato “Ficha Técnica de Productos Nuevos” con la información suministrada por el jefe de producción o a quien corresponda en la parte técnica. De esta manera se cuenta con los elementos y el conocimiento para clasificar correctamente el producto.
2. Partiendo de una correcta descripción del producto, se toma la estructura detallada de la CPC, ubicando la Sección correspondiente según se trate de un producto agropecuario (Sección 0), minero (Sección 1) o industrial (Secciones 2 a 4).
3. Si se trata de un producto industrial, se selecciona la Sección correspondiente así:
- Sección 2 Productos alimenticios, bebidas y tabaco; textiles, prendas de vestir y productos de cuero.
- Sección 3 Otros bienes transportables, excepto productos metálicos, maquinaria y equipo. Cuando se trate de un producto de madera, papel, petróleo, químico, caucho, plástico, vidrio, muebles, etc.
- Sección 4 Productos metálicos, maquinaria y equipo, cuando se trate de metales básicos, maquinaria para usos generales y especiales, de oficina, de contabilidad e informática, equipos eléctricos, equipo de radio, televisión y comunicaciones, aparatos médicos, instrumentos ópticos de precisión, relojes, equipo de transporte.
4. Observando la estructura de la Sección, seleccionar la División (categoría a 2 dígitos) correspondiente.
5. Observando la estructura de la División, seleccionar el Grupo (categoría a 3 dígitos) correspondiente.
6. Observando la estructura del Grupo, seleccionar la Clase (categoría a 4 dígitos) correspondiente.
7. Observando la estructura de la Clase, seleccionar la Subclase (categoría a 5 dígitos) correspondiente.
8. Es importante cerciorarse que, de acuerdo con la descripción de la Subclase, el producto por clasificar corresponda exactamente a esta categoría.
9. Verificar que la partida (código a 4 dígitos) y/o subpartida (código a 6 dígitos) del Sistema Armonizado contenga explícitamente el producto por clasificar o se pueda deducir su inclusión de acuerdo con las notas explicativas. Si se cuenta con la partida arancelaria del producto (10 dígitos), tomar los seis primeros
ADECUACIÓN DE ARCHIVOS
Los registros están dispuestos como micro-datos en archivos planos, los cuales tienen información completa y específica, hecho que permite establecer un criterio de agregación de la información, que consiste en procesar o presentar los datos, con base en categorizaciones previamente establecidas (actividad, escalas de personal, escalas de producción, área metropolitana, organización jurídica y departamentos) y según variables principales (personal ocupado, remuneraciones, sueldos y salarios, producción bruta, consumo intermedio, valor agregado, inversión bruta y neta, y consumo de energía). No obstante, también se puede generar reportes de la información de acuerdo con los requerimientos específicos por parte de los usuarios.
Conjuntamente, el reporte de datos se establece mediante un sistema de consulta interactivo, elaborado en Visual Fox. Aquí se dispone de archivos planos, los cuales son enviados al Banco de Datos para que sean consultados por los usuarios de la información. Por otra parte, para el tratamiento interno de la información se utiliza la misma base de datos y se realizan procesamientos especiales utilizando diferentes programas (SAS y STATA, entre otros)
EDICIÓN DE DATOS
Para la revisión y el análisis de la información se utilizan las siguientes herramientas:
1. Serie histórica de participaciones y variaciones por clase industrial y por cada uno de los establecimientos de la encuesta, para todas las variables investigadas.
2. Serie histórica de contribuciones por clase industrial y por establecimiento, actualizada hasta el mes de proceso, procedimiento que se realiza una vez logística tiene datos preliminares.
3. Serie histórica de variaciones anuales a nivel de clase industrial, puntualmente trabajada en Temática Económica y series a nivel de establecimiento; estas son observadas en Logística de Autodiligenciamiento y Registros (LAR).
Una vez producida la información preliminar de la EAM, el equipo de Temática Económica realiza el análisis en dos vías:
Contrasta la información preliminar obtenida con las cifras publicadas en el año anterior: está actividad permite identificar rápidamente cambios atípicos entre uno y otro proceso. Los datos atípicos y posibles inconsistencias se trasladan a LAR para que se verifique o confirme con la fuente el reporte o, en caso contrario, sea corregido el dato. A partir de esta actividad se obtiene una base de datos consistente y depurada.
En segunda instancia, las series estadísticas son analizadas en el contexto macroeconómico y sectorial, con base en información publicada principalmente por gremios productores e informes especializados emanados por Ministerios u otras oficinas de carácter gubernamental.
MÉTODOS DE IMPUTACIÓN
El método de imputación utilizado para la Encuesta Anual Manufacturera es variación por estimación, en el cual se identifican los casos de no respuesta o de respuestas incoherentes. El procedimiento se hace de manera automatizada; se realizan las estimaciones de la no respuesta y las imputaciones para los casos considerados atípicos. Luego, se producen cuadros antes de las imputaciones y después de ellas, analizando el número de imputaciones y sus repercusiones finales. Si hay desviaciones muy altas, se analizan los casos en forma detallada.
Esta metodología supone que los datos poseen autocorrelación temporal y homogeneidad en las diferentes etapas de agregación; significa que la imputación debe ser coherente con el comportamiento de la serie histórica y de los niveles que contienen al dato faltante. Para la imputación de registros en estado de deuda, se utiliza la razón de crecimiento de los datos, en la serie, o variación de los datos.
Según estas consideraciones, se estima primero la variación que tendrá el dato faltante con respecto al dato del período anterior, teniendo en cuenta el comportamiento histórico de la serie de variaciones en cada empresa y el comportamiento histórico de las variaciones dentro de cada actividad, y a partir de esta estimación se generará el dato faltante.
La variación del dato por imputar se obtiene en términos de la variación histórica promedio en la empresa y en la actividad.
El modelo para imputar la variación es:
Este modelo describe la imputación de la variación del dato faltante, como un promedio ponderado de las variaciones de los datos en el establecimiento y en la actividad, donde los bi son los coeficientes de ponderación de las variaciones.
IMPUTACIÓN DE UNIDADES DE OBSERVACIÓN
En el momento de la revisión de los datos obtenidos mediante la Encuesta Anual Manufacturera, se establece cuáles son los datos faltantes. Si éstos son totales o parciales de cada una de las encuestas realizadas, generalmente, la imputación se realiza de forma total, es decir, si uno de los establecimientos encuestados del total de la industria no realiza o no contesta dicho formulario. Establecido esto, por medio de un modelo estadístico (varianzas) se calcula un valor posible para la no respuesta de cada una de las variables del formulario del establecimiento que está en deuda.
El modelo tiene en cuenta los siguientes aspectos: variaciones por establecimiento, actividad y prioridad. La variación se calcula para cada una de las variables del establecimiento con Novedad 5, por prioridad y actividad de los últimos 5 años. Con esta variación se imputa el dato faltante generando un archivo de imputación para todas las variables. Una vez imputada la cifra, se analiza estadísticamente si es consistente con la tendencia de la serie. Si los datos faltantes son parciales, se hace el mismo procedimiento establecido anteriormente.
INTEGRACIÓN DE DATOS
Los resultados de la Encuesta Anual Manufacturera son presentados en resúmenes numéricos por las diferentes agregaciones temáticas, esto es, actividad industrial de acuerdo a la CIIU Rev. 3 A.C., escala de personal ocupado y escala de producción, organización jurídica; al igual que por agregación geográfica; total nacional, área metropolitana y departamento.
Other Processing
SENSIBILIZACIÓN
Para esta acción se tiene en cuenta la opinión de los diferentes gremios del sector, por medio de reuniones previamente establecidas.
CAPACITACIÓN
Está a cargo de los coordinadores de la investigación en cada una de las Direcciones y subsedes territoriales. En general, da a conocer, por una parte, la metodología de la investigación, y por otra, cada uno de los instrumentos de recolección, junto con normas, parámetros y la manera eficaz de analizar los formularios y de verificar, detectar y corregir las inconsistencias; asimismo se ocupa del uso y manejo del módulo de captura-depuración en el sistema.
Durante la ejecución del operativo y de acuerdo con la evaluación de los resultados obtenidos, los equipos de temática y de logística programan visitas específicas a las Direcciones y subsedes territoriales donde se detectan inconvenientes, con el fin de evaluarlos y corregirlos, reforzar los conocimientos del personal contratado y supervisar en campo el desarrollo de cada una de las etapas de la investigación.
RECOLECCIÓN DE INFORMACIÓN
ORGANIGRAMA OPERATIVO
Enmarcada dentro del sistema administrativo general del Departamento, la Encuesta Anual Manufacturera posee una estructura funcional y dinámica que garantiza el desarrollo ágil y metódico de las diferentes fases que involucran su ejecución, así:
Estructura de la Encuesta Anual Manufacturera
Actividad: Coordinación general, programación técnica
Equipos Ejecutores: Temática Industria – Logística de Empresas
Actividad: Coordinación y control de operativo
Equipos Ejecutores: Logística de empresas
Actividad: Distribución, recolección, precrítica, crítica y codificación y captura -
Equipos Ejecutores: Direcciones y subsedes territoriales
Actividad: depuración interactiva de formularios
Equipos Ejecutores: Equipos de Industria
Actividad: Procesamiento general EAM
Equipos Ejecutores: Logística Empresas – Sistemas
Actividad: Análisis de la información
Equipos Ejecutores: Temática industria – Logística de empresas
Actividad: Edición e impresión del material de la EAM
Equipos Ejecutores: Temática Industria - Publicaciones
Actividad: Difusión de resultados
Equipos Ejecutores: Banco de Datos
ESQUEMA OPERATIVO, MÉTODO Y PROCESAMIENTO PARA LA RECOLECCIÓN
Este esquema comprende dos etapas de ejecución simultánea en las Direcciones y subsedes territoriales; la primera corresponde a la distribución y recolección de los formularios y la otra al proceso de crítica, codificación, captura-depuración, consolidación y envío de la información y de los formularios al DANE Central. En general, comprende las siguientes actividades:
- Capacitación, selección y contratación del personal que realizará el operativo.
- Actualización del directorio de fuentes, incluidos los resultados de la miniencuesta y la inclusión de fuentes nuevas que se detecten durante el año..
- Arreglo y adecuación de material de la encuesta para su distribución.
- Instalación y prueba del sistema de seguimiento, control y captura-depuración.
- Distribución de formularios e instructivos de diligenciamiento a las fuentes, de acuerdo con el directorio correspondiente.
- Actualización del sistema con las fechas de distribución.
- Control y seguimiento del proceso de distribución. Corresponde al reporte sobre el estado de la distribución de formularios, que produce automáticamente el sistema, tomando como base el directorio y las fechas de entrega a cada fuente.
- Revisión o precrítica y recolección de los formularios cuyo propósito consiste en efectuar una revisión ágil y completa de la información, aclarar y corregir en forma personalizada con el informante los errores de diligenciamiento y aceptar o rechazar el formulario en razón directa con su consistencia.
- Actualización del sistema con las fechas de recolección.
- Control y seguimiento del estado de la recolección. Corresponde al reporte sobre el estado de la recolección de formularios, que produce automáticamente el sistema, tomando como base el directorio y las fechas de recibo de cada fuente, en la Dirección o subsede territorial.
- Crítica y codificación de la información recolectada. Este proceso consiste en realizar un análisis minucioso de la información rendida y la rectificación, corrección o aclaración de los datos incongruentes o inconsistentes, de acuerdo con las normas y parámetros señalados en el instructivo de crítica. Se pretende obtener la mayor precisión posible de los datos recolectados.
- Estrechamente vinculado al proceso de crítica se encuentra el proceso de codificación de la ubicación geográfica, de acuerdo con la división políticoadministrativa, de los establecimientos nuevos y de los productos y materias primas nuevas o aquellas que no fueron prediligenciadas, con base en la Clasificación Central de Productos.
- Análisis comparativo de los indicadores económicos, a nivel de cada formulario, con los del período inmediatamente anterior y con los resultados obtenidos en la Muestra Mensual Manufacturera, para las fuentes comunes a las dos investigaciones. Esto como control técnico de evolución de cada fuente en el tiempo.
- Actualización del sistema con las fechas de crítica y codificación.
- Control y seguimiento del proceso de crítica y codificación. Corresponde al reporte sobre el estado de la crítica de los formularios, que produce automáticamente el sistema, tomando como base el directorio y las fechas de entrega de los formularios debidamente criticados y codificados por parte de los críticos.
- Captura-depuración de la información, procedimiento que se realiza mediante el sistema, que permite, de una parte, capturar en medio magnético la totalidad de la información de cada formulario y, por otra parte, ejercer un estricto control de calidad sobre el proceso de crítica y codificación.
- Control y seguimiento del proceso de captura-depuración interactiva. Corresponde al reporte sobre el estado de la captura-depuración de los formularios, el cual produce automáticamente el sistema, tomando como base el directorio y las fechas de terminación de este proceso para cada fuente.
- Recepción, consolidación, análisis de los envíos de información y formularios y control del operativo de las subsedes. Esta actividad se ejecuta en la Dirección territorial sobre las subsedes de su jurisdicción de acuerdo con el reporte que suministra el sistema sobre el estado de distribución, recolección, crítica, captura, novedades del operativo y envíos a la sede.
- Control de procesos y de cobertura regional (incluye subsedes). Hace referencia al reporte que suministra el sistema sobre el operativo en la Dirección Territorial. Comprende el estado de distribución, recolección, crítica, captura, novedades del operativo y envíos de la sede al DANE Central.
- Consolidación y envío de información y formularios al DANE Central. Procedimiento que ejecuta el sistema y consiste en consolidar la información y enviar vía electrónica al DANE Central, la información de los formularios que resulten consistentes de acuerdo con los parámetros metodológicos estipulados.
- Evaluación del desarrollo del operativo en las regionales. Hace referencia al reporte que suministra el sistema sobre el operativo en la Dirección Territorial, incluidas las subsedes de su jurisdicción. Comprende el estado de distribución, recolección, crítica, captura, novedades del operativo y envíos realizados al DANE Central.