Intemic trabaja con conjuntos de datos estructurados que contienen encabezados de columna y filas con diferentes elementos o marcas de tiempo, como el formato Parquet. Diferentes fuentes de datos que contienen esos formatos (como SCADA, ERPs, MESs, y toda la información que se puede descargar en csv o excels) pueden importarse a la plataforma Intemic.
En la plataforma Intemic existen 4 formas diferentes de ingestión de datos:
1. Cargar conjuntos de datos desde el equipo local (archivos excel, csv, etc…)
2. Usar conjuntos de datos existentes
3. Cargar nuevos datos por lotes
4. Conectarse a fuentes de datos en línea en tiempo real
El proceso ETL (Extract Transform Load) se realiza en Databricks, que utiliza Apache Spark para un procesamiento de datos más eficiente. Cuando se carga, algunos de los encabezados de columna se muestran en el nodo, para dar una idea breve de qué datos está manejando, pero también puede inspeccionar sus conjuntos de datos cuando sea necesario.
Los conjuntos de datos filtrados y pretratados que generas en los diagramas, se pueden referenciar y usar tantas veces como desees para otras canalizaciones de datos que puedan tener otros fines
Los conjuntos de datos filtrados y pretratados que generas en los diagramas, se pueden referenciar y utilizar tantas veces como desees para otras canalizaciones de datos que puedan tener otros propósitos
Si tienes alguna pregunta o necesitas ayuda, no dudes en ponerte en contacto con nuestro equipo de soporte en info@intemic.com
Los conjuntos de datos filtrados y pretratados que generas en los diagramas, se pueden referenciar y utilizar tantas veces como desees para otros flujos de datos que puedan tener otros propósitos
A través de APIs y otros protocolos específicos de la industria como OPC-UA, nuestra plataforma puede conectarse a fuentes de datos en línea que provienen continuamente de sensores, u otros datalakes que se actualizan automáticamente
Los conjuntos de datos filtrados y pretratados que generas en los diagramas se pueden referenciar y utilizar tantas veces como desees para otras canalizaciones de datos que puedan tener otros propósitos
