Resumen

En futuras redes celulares heterogéneas con celdas pequeñas, como D2D y relay, la coordinación de interferencias entre las células macro y las células pequeñas debe abordarse a través de una asignación eficaz de recursos y control de potencia. El juego de Stackelberg de dos pasos es un modelo ampliamente utilizado y factible para la formulación del problema de asignación de recursos y control de potencia. Tanto en los juegos de seguidores para las células pequeñas como en los juegos de líder para la célula macro, los parámetros de costo son una variable crítica para el rendimiento del juego de Stackelberg. Estudios previos no han abordado adecuadamente la optimización de los parámetros de costo. Este documento presenta un enfoque de aprendizaje por refuerzo para entrenar de manera efectiva los parámetros de costo para un mejor rendimiento del sistema. Además, se propone un algoritmo de preentrenamiento de dos etapas más epsilon-greedy para acelerar la convergencia del aprendizaje por refuerzo. Los resultados de la simulación pueden demostrar

• Materias:Comunicación inalámbrica Dispositivos móviles Seguridad de la información Algoritmo de inteligencia Sensor inteligente
• Subjects:Wireless communication Mobile devices Information security Algorithm intelligence Intelligent sensor
• Palabras claves:Futuro; Redes celulares heterogéneas; Coordinación de interferencias; Asignación de recursos; Control de potencia; Aprendizaje por refuerzo
• Keywords:Future; Heterogeneous cellular networks; Interference coordination; Resource allocation; Power control; Reinforcement learning