¿Cuáles son las palabras clave en la era del big data?
En junio de 2021, Didi presentó un prospecto en el mercado de valores de EE. UU. Luego, en julio, “Didi Chuxing” violó gravemente las leyes y regulaciones sobre la recopilación y el uso de información personal. Según "Las disposiciones pertinentes de la Ley de Ciberseguridad de la República Popular China fueron retiradas de los estantes. Después de Didi, Yunmanman, Wuchebang y BOSS Zhipin también lanzaron revisiones de seguridad de la red, dando inicio a la revisión de seguridad de datos de 2021.
Detrás del incidente de Didi, las aplicaciones de datos y tecnología relacionadas con los productos de Internet no sólo involucran derechos personales y privacidad, sino que también se relacionan con cuestiones de seguridad pública e incluso de seguridad nacional. 2021 se considera el primer año de la seguridad de los datos. Tras la implementación de la "Ley de seguridad de datos" y la "Ley de protección de información personal", los departamentos pertinentes también emitieron las "Medidas para la evaluación de la seguridad de la transferencia de datos al extranjero (borrador para comentarios)".
Palabras clave: 2: Operaciones de datos del concepto a la práctica
DataOps (operaciones de datos) es una nueva disciplina que combina los roles de los equipos de DevOps con los ingenieros de datos y los científicos de datos juntos y brindan. las herramientas, procesos y estructuras organizativas para servir a la empresa centrada en datos. DataOps pone fin al complejo trabajo de los equipos de datos que constantemente intentan convertir datos sin procesar incorrectos en datos útiles. En cambio, pueden centrarse en lo que importa, que es ofrecer conocimientos prácticos. DataOps puede garantizar la disponibilidad de datos sin procesar de entrada, garantizar la precisión de los resultados, centrarse en el valor personal y * * * valor cooperativo y mantener al equipo de datos en el centro de los objetivos estratégicos de la empresa. Después de todo, ya no tienen que pasar meses produciendo resultados, son tan eficientes como los equipos de DevOps.
Palabra clave 3: Comercialización de elementos de datos
Ha pasado un año desde que el gobierno central propuso oficialmente “acelerar el cultivo del mercado de elementos de datos”. En 2021, varias industrias han iniciado muchas exploraciones en regulaciones, mecanismos y tecnologías. En primer lugar, se está mejorando la legislación relacionada con los datos, se ha promulgado oficialmente la Ley de Seguridad de Datos y está a punto de promulgarse la Ley de Protección de Información Personal (proyecto). La mejora continua de las leyes pertinentes proporciona una garantía para la comercialización de elementos de datos. Los gobiernos locales como Shenzhen, Shanghai y Anhui están formulando activamente regulaciones de datos locales. En segundo lugar, las transacciones de datos comenzaron a explorar nuevos modelos. Varios nuevos intercambios de big data, como Shandong, Beijing y el Golfo de Beibu, han comenzado a explorar nuevos modelos comerciales, como el registro de datos, la custodia de datos, la gestión de operaciones de datos y la titulización de activos de datos, y promover la creación de un sistema de datos estandarizado e integrado. ecosistema del mercado de circulación. En tercer lugar, la capitalización de datos corporativos ha desencadenado una ola de prácticas. Empresas líderes como China Southern Power Grid, China Everbright Bank y Shanghai Pudong Development Bank han comenzado a explorar la capitalización de datos en un nivel más profundo.
Palabras clave: 4: La informática de privacidad está marcando el comienzo de un período explosivo de desarrollo del mercado.
La informática de privacidad ha atraído mucha atención en 2021 y está a punto de marcar el comienzo de un período explosivo de desarrollo del mercado. La Comisión Nacional de Desarrollo y Reforma, la Administración del Ciberespacio de China, el Ministerio de Industria y Tecnología de la Información, la Administración Nacional de Energía, el Banco Popular de China y otros departamentos han publicado documentos para fomentar el desarrollo y la aplicación de tecnologías informáticas privadas como la multi Computación segura de terceros y aprendizaje federado para optimizar aún más el entorno de políticas. En la actualidad, el número de empresas y productos informáticos privados está aumentando rápidamente, los algoritmos se optimizan constantemente, las tecnologías relacionadas se aceleran e integran y la madurez y usabilidad de los productos se mejoran aún más. Al mismo tiempo, el mercado ha alcanzado una comprensión básica de la aplicación de la informática de privacidad. Los proyectos de licitación y los casos de aplicación relacionados con la informática de privacidad se han enriquecido continuamente, y la informática de privacidad ha entrado oficialmente en la etapa de solicitud.
Palabra clave 5: El sistema de servicios de big data se ha convertido en un nuevo punto competitivo.
El trabajo suave, como la consulta de planificación, la implementación y la implementación, y la operación y el mantenimiento, forman un sistema de servicios de big data que resuelve el problema de la "última milla" desde el producto hasta la aplicación. Sin embargo, debido a la complejidad de la tecnología de big data y su estrecha integración con las empresas, los proyectos de big data no pueden lograr proyectos "llave en mano" y requieren servicios continuos de alta calidad. Los últimos resultados de las pruebas de productos de la Academia de Tecnología de la Información y las Comunicaciones de China muestran que, aunque la tasa de calificación funcional de los productos nacionales de big data ha alcanzado el 95,69%, la brecha en las capacidades de servicio sigue siendo enorme. Los resultados de la evaluación de la capacidad de servicio de 2020 publicados por la Academia de Tecnología de la Información y las Comunicaciones de China muestran que la puntuación promedio de las empresas es solo 71 (sobre 100) y varios detalles son insuficientes. La principal contradicción en el desarrollo del mercado de big data ha pasado de una productización insuficiente a una capacidad de servicio insuficiente. Las capacidades de servicio de big data se convertirán en un nuevo punto competitivo para las empresas del lado de la oferta.
Palabra clave 6: Integración profunda de productos de tecnología de datos y computación en la nube
Con la madurez de la tecnología nativa de la nube y el enriquecimiento de las aplicaciones empresariales en la nube, la integración profunda de las grandes productos de tecnología de datos y computación en la nube La integración, desde la nube hasta la bioquímica nativa de la nube, le permite tener las características de pago por uso, bajo costo, gran escalabilidad, separación de almacenamiento y computación e implementación con un solo clic. En 2021, Amazon, Alibaba, Tencent y Huawei lanzaron respectivamente varios productos de tecnología de big data integrados con la nube, incluidos computación y análisis, almacenamiento y bases de datos.
Palabras clave: 7: La informática en tiempo real se está volviendo popular.
Una de las características 3V del big data es la puntualidad. A medida que las plataformas de procesamiento de flujo distribuido continúan madurando, varias industrias tienen demandas cada vez más fuertes de computación y análisis en tiempo real. Por el lado de la oferta, las capacidades de los productos de Stream Computing se están iterando rápidamente y la comunidad de código abierto de Stream Computing sigue siendo popular. Flink es uno de los proyectos de código abierto de Apache más activos. Además, las empresas de informática en tiempo real cuentan con el amplio apoyo del capital. Confluent, una empresa de comercialización de informática en tiempo real, está a punto de lanzar una oferta pública inicial con una valoración de más de 8.000 millones de dólares. En términos de aplicación, la tecnología informática en tiempo real ha penetrado en varios negocios de empresas de Internet y ha surgido una gran cantidad de casos prácticos.
Los escenarios de aplicación incluyen inventario de almacén en tiempo real, IA en tiempo real, integración de flujos y lotes, etc. , y gradualmente penetró en las finanzas, las telecomunicaciones, la industria y otras industrias.
Palabras clave: 8: El lago de datos ingresa a la etapa de productización
El lago de datos puede realizar el almacenamiento directo de datos originales sin conversión, lo que mejora en gran medida la eficiencia de la aplicación de datos. En la actualidad, el campo del código abierto ha formado tres principales escuelas de tecnología de código abierto, a saber, Bingshan, Woody y Delta Lake, que se caracterizan por admitir el procesamiento por lotes de flujo, la actualización de datos, los datos de origen escalables, múltiples motores de almacenamiento y múltiples motores informáticos, llenando el brecha entre Las deficiencias del big data ante la pila de tecnología. Después de años de desarrollo, los productos del lago de datos empresariales nacionales se lanzarán gradualmente en 2021. Huawei Cloud y Tencent Cloud lanzaron productos del lago de datos este año, y Alibaba Cloud lanzó el producto de integración lago-almacén 2.0 este año, acelerando el progreso del lago de datos. productización.
Palabra clave 9: Los gemelos digitales atraen mucha atención en industrias clave.
Las ciudades inteligentes y la Internet industrial se convertirán en lo más destacado del período del "14º Plan Quinquenal", y el emparejamiento digital es uno de los medios técnicos más básicos para hacer realidad las ciudades inteligentes y la Internet industrial. Los gemelos digitales son una combinación de una serie de tecnologías y tienen cinco capacidades técnicas clave: interoperabilidad de los mundos físico y digital, escalabilidad de los modelos de datos, representación digital en tiempo real, fidelidad multidimensional e impacto de circuito cerrado de lo digital en la física. . En la actualidad, la tecnología de gemelos digitales ha progresado rápidamente y se ha convertido en un punto caliente para la investigación y la estandarización. Instituciones de investigación como Gartner e IDC han comenzado a profundizar en el valor de investigación del emparejamiento digital. ISO/IEC inició la formulación de normas relacionadas con el hermanamiento digital, y la Academia China de Tecnología de la Información y las Comunicaciones estableció un comité de trabajo sobre la aplicación de la tecnología de hermanamiento digital para explorar los escenarios y aplicaciones de la tecnología de hermanamiento digital en ciudades inteligentes. Al mismo tiempo, empresas líderes como Alibaba Cloud, Huawei, AWS y Microsoft también han comenzado a diseñar y lanzar soluciones industriales de gemelos digitales.
Palabras clave: 10: Los cambios de hardware promueven la actualización y reconstrucción de productos de datos
El diseño y desarrollo de productos de tecnología de datos están estrechamente relacionados con la arquitectura y las funciones del hardware subyacente. Actualmente, el hardware subyacente está cambiando, lo que lleva a la reestructuración de los productos de tecnología de datos. Por un lado, los productos de tecnología de datos utilizarán directamente hardware para implementar funciones como la seguridad de los datos y el análisis de la red. Por otro lado, los futuros productos de tecnología de datos se optimizarán para la arquitectura ARM. En el futuro, la escala de los servidores basados en ARM continuará expandiéndose y también se optimizarán varios productos de tecnología de datos para ARM para mejorar las capacidades.