Resumen

Este artculo realiza un anlisis en profundidad y una investigacin sobre la seleccin automtica y la configuracin de parmetros de los componentes principales del software de Big Data mediante el uso del modelo de retencin y la seleccin automtica de componentes de Big Data mediante el establecimiento de un ndice de demanda estandarizado y el uso del modelo de rbol de decisin para resolver el problema de la seleccin de componentes en el desarrollo de aplicaciones de Big Data. Mediante el establecimiento de indicadores de demanda estandarizados y basndose en el modelo de retencin, se propone una plataforma intermedia de transmisin de datos para la deteccin bidireccional de datos basada en las tres demandas de entrada del usuario: almacenamiento, computacin y anlisis, as como en el problema de la prdida indetectable de paquetes en la transmisin de datos de las plataformas existentes de IoT y servicios web. El mdulo de comunicacin de datos de la plataforma intermedia de transmisin de datos permite la supervisin y deteccin mutuas de la interaccin de datos entre los terminales inteligentes IoT y las plataformas en la nube. El modo de retencin se construye por separado para realizar la seleccin automtica de componentes de Big Data. En este artculo, partimos de varios sistemas de almacenamiento distribuido convencionales y utilizamos Cassandra como ejemplo para los experimentos y pruebas. Utilizamos el mtodo de ajuste de regresin mltiple para construir un modelo de rendimiento correspondiente para los parmetros de hardware, tomamos los requisitos del usuario como entrada y utilizamos el modelo de rendimiento para configurar los parmetros de hardware del sistema; estudiando su principio de sistema, arquitectura, caractersticas y escenarios de aplicacin, construimos una base de conocimientos de configuracin de parmetros de software para guiar el software. Esto resuelve el difcil problema de seleccionar, desplegar y configurar parmetros para aplicaciones de Big Data.

• Materias:Algoritmos (Matemáticas) Algebra Ingeniería Lógica matemática Matemáticas
• Subjects:Agorithms (Math) Algebra Engineering Mathematical logic mathematics
• Palabras claves:Análisis; Investigación; Selección automática; Configuración de parámetros; Software de Big Data; Modelo de retención; Transmisión de datos; IoT; Plataformas de servicios web; Módulo de comunicación; Interacción de datos; Sistemas de almacenamiento distribuido; Cassandra; Modelo de rendimiento; Parámetros de hardware; Configuración de parámetros de software; Base de conocimientos; Escenarios de aplicación; Aplicaciones de Big Data.
• Keywords:Analysis; Research; Automatic selection; Parameter configuration; Big Data software; Retention model; Data transmission; IoT; Web service platforms; Communication module; Data interaction; Distributed storage systems; Cassandra; Performance model; Hardware parameters; Software parameter configuration; Knowledge base; Application scenarios; Big Data applications