¿Cuál es el momento y los antecedentes del surgimiento de big data en China? ¿Cuál es la situación de desarrollo y la situación actual?

En los últimos años, con el rápido desarrollo y popularización de las computadoras y la tecnología de la información, la escala de los sistemas de aplicaciones industriales se ha expandido rápidamente y los datos generados por las aplicaciones industriales se han disparado. Los big data industriales y empresariales a menudo alcanzan cientos de terabytes o incluso decenas o cientos de petabytes, lo que supera con creces las capacidades de procesamiento de las tecnologías informáticas y los sistemas de información tradicionales existentes. Por lo tanto, se ha convertido en una necesidad urgente buscar tecnologías, métodos y medios eficaces de procesamiento de big data en el mundo real. En la actualidad, el volumen total de datos de Baidu ha superado los 1000 Pb, y los datos de la página web que deben procesarse todos los días han alcanzado los 10 Pb ~ 100 Pb; los datos de transacciones acumuladas de Taobao han alcanzado los 100 Pb; Twitter publica más de 200 millones de mensajes cada día; y Sina Weibo publica 80 millones de mensajes todos los días; los datos de registro de comunicaciones telefónicas de China Mobile en una determinada provincia pueden alcanzar 0,5 Pb ~ 1 pb por mes, los datos de monitoreo de vehículos de carretera de la Oficina de Seguridad Pública de una capital provincial pueden alcanzar 20 mil millones en; tres años, con un volumen total de 120TB. Según un informe de investigación de IDC, la empresa de análisis y consultoría de información de TI más autorizada del mundo, en el futuro (1ZB = 10.000 EB = 100.000 PB), el volumen global de datos crecerá de 0,8 ZB en 2009 a 35 ZB en 2020, y 100.000 PB aumentará 44 veces.

Hace unos años, la gente llamaba a los datos a gran escala "datos masivos", pero de hecho, el concepto de big data se había propuesto ya en 2008. En 2008, con motivo del décimo aniversario de la fundación de Google, la famosa revista "Nature" publicó un número especial para discutir una serie de cuestiones técnicas y desafíos relacionados con el futuro procesamiento de big data, en el que se proponía el concepto de "big data". .

Con la popularización del concepto de big data, la gente suele preguntarse: ¿cuántos datos son big data? De hecho, es difícil tener una definición muy cuantitativa de big data. Wikipedia ofrece una descripción cualitativa: Big data se refiere a conjuntos de datos que no se pueden obtener, administrar y procesar utilizando tecnologías y herramientas de software tradicionales y de uso común dentro de un cierto período de tiempo. Además, el enfoque actual del término "big data" no es solo la definición de escala de datos, sino que también representa que el desarrollo de la tecnología de la información ha entrado en una nueva era y representa el impacto que la información explosiva de datos ha traído a la informática tradicional. Tecnología y tecnología de la información Los desafíos y dificultades técnicos representan nuevas tecnologías y nuevos métodos necesarios para el procesamiento de big data, así como nuevos inventos, nuevos servicios y nuevas oportunidades de desarrollo que brinda el análisis y la aplicación de big data.