Este artículo fue publicado como parte del Blogatón de ciencia de datos
Introducción
estadística, aprendizaje automático, modelado matemático e inteligencia artificial se conoce como analíticaLa analítica se refiere al proceso de recopilar, medir y analizar datos para obtener información valiosa que facilite la toma de decisiones. En diversos campos, como los negocios, la salud y el deporte, la analítica permite identificar patrones y tendencias, optimizar procesos y mejorar resultados. El uso de herramientas avanzadas y técnicas estadísticas es fundamental para transformar datos en conocimiento aplicable y estratégico.... predictiva. Con la ayuda de datos pasados, hace predicciones. Usamos la analítica predictiva en nuestro día a día sin pensarlo mucho. Por ejemplo, predecir las ventas de un artículo (por ejemplo, flores) en un mercado para un día en particular. Si es el día de San Valentín, ¡las ventas de rosas serían altas! Podemos decir fácilmente que las ventas de flores serían mayores en los días festivos que en los días normales.
En el análisis predictivo, encontramos los factores responsables, recopilamos datos, aplicamos técnicas de aprendizaje automático, minería de datos, modelado predictivo y otras técnicas analíticas para predecir el futuro. Los conocimientos de los datos incluyen patrones, la relación entre diferentes factores que podrían ser previamente desconocidos. Desentrañar esos conocimientos ocultos vale más de lo que crees. Las empresas utilizan el análisis predictivo para mejorar su proceso y lograr sus objetivos. La información obtenida de datos estructurados y no estructurados se puede utilizar para análisis predictivos.
¿Cómo ayudan las estadísticas de datos?
En los últimos años, las organizaciones han optado por recopilar grandes cantidades de datos asumiendo que, si recopilan una cantidad suficiente, eventualmente darán lugar a información empresarial relevante. Incluso Instagram y Facebook brindan información sobre las cuentas comerciales. Pero, los datos en su forma sin procesar no son útiles sin importar cuán grandes sean. Cuantos más datos hay que analizar, más difícil es separar la información empresarial valiosa de la irrelevante. Una estrategia de conocimiento de datos se basa en el potencial real de los datos, primero debe determinar por qué los está utilizando y qué valor comercial espera obtener de ellos. A continuación, se explica cómo obtener información valiosa a partir de los datos y cómo utilizarlos.
1. Definición del enunciado del problema / objetivo comercial.
Definir los resultados del proyecto, los entregables, el alcance del esfuerzo, los objetivos comerciales, preparar un cuestionario para los datos que se obtendrán en función del objetivo comercial.
2. Recolección de datos basados en las respuestas a las preguntas creadas en base al planteamiento del problema.
Basándose en el cuestionario, recopile las respuestas en forma de conjuntos de datos.
3. Integre los datos obtenidos de diversas fuentes.
La minería de datos para análisis predictivo prepara datos de múltiples fuentes para su análisis. Esto proporciona una vista completa de las interacciones con el cliente.
4. Análisis de datos con herramientas / software de analítica. Podemos visualizar los datos para observar patrones y relaciones entre varios factores.
El análisis de datos es el proceso de inspeccionar, limpiar, transformar y modelar datos con el objetivo de descubrir información útil para llegar a una conclusión.
5. Validar supuestos, hipótesis y probarlos utilizando modelos estadísticos.
El análisis estadístico permite validar los supuestos, hipótesis y probarlos mediante modelos estadísticos. Las suposiciones se basan en el planteamiento del problema, formado durante la EDA.
6. Generación de modelos
El modelo se genera con algoritmos para automatizar el proceso con los nuevos datos combinados con los datos existentes. También se pueden combinar varios modelos para obtener mejores resultados.
7. Implementar el modelo para generar predicciones y monitorear su precisión.
La implementación del modelo predictivo brinda la opción de implementar los resultados analíticos en el proceso diario de toma de decisiones para obtener resultados, informes y salidas al automatizar las decisiones basadas en el modelado.
Además, administramos y monitoreamos el desempeño del modelo para asegurarnos de que esté brindando los resultados esperados.
Los datos incorrectos o incompletos pueden dar lugar a modelos deficientes y precisión que provocan el caos. Por eso es extremadamente necesario tener un conjunto de datos adecuado para obtener información y entrenar el modelo. La analítica predictiva tiene sus propios desafíos, pero puede conducir a resultados comerciales invaluables, incluida la captación de clientes antes de que abandonen, la optimización del presupuesto comercial y la satisfacción de la demanda de los clientes.
Modelos y algoritmos
Varias técnicas de dominios, incluido el aprendizaje automático, la minería de datos, las estadísticas, el análisis y el modelado, se utilizan en el análisis predictivo. Los algoritmos predictivos se pueden clasificar ampliamente en dos grupos: modelos de aprendizaje automático y modelos de aprendizaje profundoEl aprendizaje profundo, una subdisciplina de la inteligencia artificial, se basa en redes neuronales artificiales para analizar y procesar grandes volúmenes de datos. Esta técnica permite a las máquinas aprender patrones y realizar tareas complejas, como el reconocimiento de voz y la visión por computadora. Su capacidad para mejorar continuamente a medida que se le proporcionan más datos la convierte en una herramienta clave en diversas industrias, desde la salud.... Algunos de ellos se describen en este artículo. Aunque tienen sus propios méritos y deméritos, un gran mérito de todos ellos es que son reutilizables y se pueden entrenar utilizando algoritmos con reglas específicas de la empresa. El análisis predictivo es un proceso iterativo que implica la recopilación, el preprocesamiento, el modelado y la implementación de datos para obtener resultados. Podemos automatizar el proceso para proporcionarnos nuevas predicciones basadas en los nuevos datos que se alimentan regularmente a lo largo del tiempo.
Una vez que se entrena un modelo, podemos ingresar nuevos datos para obtener predicciones y no es necesario entrenar una y otra vez, pero una desventaja es que necesita una gran cantidad de datos para ser entrenado. Dado que el análisis predictivo se basa en algoritmos de aprendizaje automático, requiere una clasificación adecuada de los datos en las etiquetas, lo que, de lo contrario, provocaría un rendimiento y una precisión deficientes. La generalización es un problema, ya que el modelo tiene poca capacidad para transferir sus hallazgos de un caso a otro. Aunque existen algunos problemas de aplicabilidad cuando se trata de los hallazgos derivados de un modelo de análisis predictivo, pueden resolverse mediante ciertos métodos, como el aprendizaje por transferencia.
Modelos de analítica predictiva
Modelo de clasificación
Es uno de los modelos más simples. Clasifica los datos nuevos en función de lo que aprendió de los datos históricos. Son los mejores para la clasificación binaria al responder preguntas binarias como Sí / No, Verdadero / Falso, pero también se pueden usar para la clasificación multiclase. Los árboles de decisión, las máquinas de vectores de soporte son algunos algoritmos de clasificación.
P.ej. : La aprobación de préstamos es un caso de uso clásico de un modelo de clasificación. Otro ejemplo son los mensajes / correos electrónicos de detección de spam.
Modelo de agrupación en clústeres
Un modelo de agrupamientoEl "agrupamiento" es un concepto que se refiere a la organización de elementos o individuos en grupos con características o objetivos comunes. Este proceso se utiliza en diversas disciplinas, incluyendo la psicología, la educación y la biología, para facilitar el análisis y la comprensión de comportamientos o fenómenos. En el ámbito educativo, por ejemplo, el agrupamiento puede mejorar la interacción y el aprendizaje entre los estudiantes al fomentar el trabajo... clasifica los puntos de datos en grupos según la similitud de los atributos. Hay muchos algoritmos de agrupación en clústeres, pero ningún algoritmo puede considerarse el mejor para todos los casos de uso. Es un algoritmo de aprendizaje no supervisadoEl aprendizaje no supervisado es una técnica de machine learning que permite a los modelos identificar patrones y estructuras en datos sin etiquetas predefinidas. A través de algoritmos como k-means y análisis de componentes principales, este enfoque se utiliza en diversas aplicaciones, como la segmentación de clientes, la detección de anomalías y la compresión de datos. Su capacidad para revelar información oculta lo convierte en una herramienta valiosa en la..., a diferencia de la clasificación supervisada.
Por ejemplo: Agrupar a los estudiantes de una escuela en función de su ubicación en una ciudad para los servicios de transporte. Agrupar a los clientes en función de sus preferencias de artículos para recomendar productos relacionados con sus intereses.
Modelo de pronóstico
Al ser uno de los modelos de análisis predictivo más utilizados, se ocupa de la predicción de valores métricos, estimando un valor numérico para nuevos datos basándose en lo aprendido de datos históricos. Se puede aplicar siempre que haya datos numéricos disponibles.
Ej .: Predicción de tráfico en la vía principal de una ciudad durante diferentes periodos. Tiendas estimando disponibilidad de productos en su almacén.
Modelo de valores atípicos
Como sugiere el nombre, se basa en las entradas de datos anómalas en su conjunto de datos. Un valor atípico podría ser un error de entrada de datos, error de medición, error experimental, intencional, error de procesamiento de datos, error de muestreo o error natural. Aunque los valores atípicos pueden provocar un rendimiento y una precisión deficientes, algunos nos ayudan a encontrar la novedad oa observar nuevas inferencias.
Ej .: Robo de tarjetas de crédito / débito.
Modelo de serie temporalUna serie temporal es un conjunto de datos recogidos o medidos en momentos sucesivos, generalmente en intervalos de tiempo regulares. Este tipo de análisis permite identificar patrones, tendencias y ciclos en los datos a lo largo del tiempo. Su aplicación es amplia, abarcando áreas como la economía, la meteorología y la salud pública, facilitando la predicción y la toma de decisiones basadas en información histórica....
Se puede utilizar para cualquier secuencia de puntos de datos con un período de tiempo como parámetro de entrada. Utiliza los datos pasados para desarrollar una métrica numérica y predice los datos futuros utilizando esa métrica.
Ej .: predicción meteorológica, mercado de acciones / predicción de precios de criptomonedas.
Algunos algoritmos predictivos comunes son Random Forests, modelo lineal generalizado, modelo de gradienteGradiente es un término utilizado en diversos campos, como la matemática y la informática, para describir una variación continua de valores. En matemáticas, se refiere a la tasa de cambio de una función, mientras que en diseño gráfico, se aplica a la transición de colores. Este concepto es esencial para entender fenómenos como la optimización en algoritmos y la representación visual de datos, permitiendo una mejor interpretación y análisis en... reforzado, agrupación de K-medias y Prophet. El bosque aleatorio es una combinación de árboles de decisión, en los que intentan lograr el menor error posible mediante el uso de la técnica de «embolsado» o «impulso». El modelo lineal generalizado es una variante más compleja del modelo lineal general que se entrena muy rápidamente. La variableEn estadística y matemáticas, una "variable" es un símbolo que representa un valor que puede cambiar o variar. Existen diferentes tipos de variables, como las cualitativas, que describen características no numéricas, y las cuantitativas, que representan cantidades numéricas. Las variables son fundamentales en experimentos y estudios, ya que permiten analizar relaciones y patrones entre diferentes elementos, facilitando la comprensión de fenómenos complejos.... de respuesta puede tener cualquier forma de tipo de distribución exponencial que proporcione una comprensión clara de cómo los predictores influyen en el resultado.
Aunque son resistentes al sobreajuste, requieren un gran conjunto de datos para el entrenamientoEl entrenamiento es un proceso sistemático diseñado para mejorar habilidades, conocimientos o capacidades físicas. Se aplica en diversas áreas, como el deporte, la educación y el desarrollo profesional. Un programa de entrenamiento efectivo incluye la planificación de objetivos, la práctica regular y la evaluación del progreso. La adaptación a las necesidades individuales y la motivación son factores clave para lograr resultados exitosos y sostenibles en cualquier disciplina.... y son susceptibles a valores atípicos. Gradient Boosted Model es un modelo de predicción basado en un conjunto de árboles de decisión. A diferencia de los bosques aleatorios, construyen un árbol a la vez y corrigen los errores anteriores mientras construyen un árbol nuevo. K-means es útil cuando se busca implementar un plan personalizado en un gran conjunto de datos. Se utiliza en modelos de agrupamiento. El profeta es un algoritmo utilizado en las series de tiempo y los modelos de pronóstico. No solo es automático, también incorpora heurísticas y suposiciones útiles. Es popular por ser rápido, confiable y robusto.
Algunos u
Predictive Analytics como se dijo ya tiene muchas aplicaciones en diferentes dominios. Por mencionar algunos,
- Cuidado de la salud
- Análisis de colección
- Detección de fraudes
- Gestión de riesgos
- Marketing directo
- Cruz-
Entonces, ¿cómo ayudan exactamente en sus dominios? Recibimos alertas cuando iniciamos sesiónLa "Sesión" es un concepto clave en el ámbito de la psicología y la terapia. Se refiere a un encuentro programado entre un terapeuta y un cliente, donde se exploran pensamientos, emociones y comportamientos. Estas sesiones pueden variar en duración y frecuencia, y su objetivo principal es facilitar el crecimiento personal y la resolución de problemas. La efectividad de las sesiones depende de la relación entre el terapeuta y el... en nuestra cuenta de Gmail desde un nuevo dispositivo. Recibimos alertas cuando usamos nuestras tarjetas de crédito / débito en nuevos lugares. ¿Cómo lo detectan? Con el análisis predictivo, los examinadores de fraude toman pocos conjuntos de variables predeterminadas que se sabe que están involucradas en eventos de fraude pasados y colocan esas variables en procesos para determinar la probabilidad de que los resultados o eventos futuros sean o no un fraude. Supongamos que usa regularmente sus tarjetas de crédito en Kerala, cuando su tarjeta de crédito se usa en Nueva Delhi es un posible caso de fraude. Commonwealth Bank utiliza análisis para predecir la probabilidad de actividad fraudulenta para cualquier transacciónLa "transacción" se refiere al proceso mediante el cual se lleva a cabo un intercambio de bienes, servicios o dinero entre dos o más partes. Este concepto es fundamental en el ámbito económico y legal, ya que implica el acuerdo mutuo y la consideración de términos específicos. Las transacciones pueden ser formales, como contratos, o informales, y son esenciales para el funcionamiento de mercados y negocios.... dada antes de que sea autorizada, dentro de los 40 milisegundos posteriores al inicio de la transacción.
Además de detectar el fraude en las reclamaciones, la industria de los seguros de salud está tomando medidas para identificar a los pacientes con mayor riesgo de padecer enfermedades crónicas y encontrar las mejores intervenciones. Express Scripts, una gran empresa de beneficios farmacéuticos, utiliza análisis para identificar a aquellos que no se adhieren a los tratamientos prescritos, lo que genera ahorros significativos. Las aplicaciones de análisis predictivo analizan el gasto, el uso y otros comportamientos de los clientes, lo que lleva a ventas cruzadas eficientes o vende productos adicionales a clientes actuales para una organización que ofrece múltiples productos.
Sobre el Autor
Soy Keerthana, una estudiante de ciencia de datos fascinada por las matemáticas y sus aplicaciones en otros dominios. También me interesa escribir artículos relacionados con las matemáticas y la ciencia de datos. Puedes conectarte conmigo en LinkedIn y Instagram. Mira mis otros artículos aquí.
Los medios que se muestran en este artículo no son propiedad de DataPeaker y se utilizan a discreción del autor.
