Transformación del Q-Learning para el Aprendizaje en Agentes JADE

• Cepero-Pérez, Nayma ^[1] ; Moreno-Espino, Mailyn ^[2]
  1. [1] Departamento de Inteligencia Artificial e Infraestructura de Sistemas Informáticos. Facultad de Ingeniería Informática. Instituto Superior Politécnico "José Antonio Echeverría" (CUJAE)
  2. [2] Dra. Profesor Auxiliar del Instituto Superior Politécnico José Antonio Echeverría (Cujae) Habana, Cuba
• Localización: Lámpsakos, ISSN-e 2145-4086, ISSN 2145-4086, Nº. 14, 2015 (Ejemplar dedicado a: Edición 14: Generación de Nuevo Conocimiento en Ingeniería), págs. 25-32
• Idioma: español
• DOI: 10.21501/21454086.1517
• Títulos paralelos:
  • Q-Learning Transformation for Training on JADE Agents
• Enlaces
  • Texto completo (pdf)
• Resumen
  • español

    El aumento de la interacción entre los sistemas informáticos ha modificado la forma tradicional de analizarlos y desarrollarlos. La necesidad de la interacción entre los componentes del sistema es cada vez más importante para poder resolver tareas conjuntas, que de forma individual serían muy costosas o incluso imposibles de desarrollar. Los sistemas multi-agente ofrecen una arquitectura interesante y completa para ejecutar tareas distribuidas que cooperan entre sí. La creación de un sistema multi-agente o un agente requiere de gran esfuerzo por lo que se han adoptado métodos como los patrones de implementación. El patrón Proactive Obsever_JADE permite crear los agentes e incluirle en cada uno comportamientos dotados de inteligencia que pueden evolucionar utilizando técnicas de aprendizaje automático. El aprendizaje por refuerzo es una técnica del aprendizaje automático que permite a los agentes aprender a través de interacciones de prueba y error, en un ambiente dinámico. El aprendizaje por refuerzo en sistemas multi-agente ofrece nuevos retos derivados de la distribución del aprendizaje, como pueden ser la necesidad de la coordinación entre agentes o la distribución del conocimiento, que deben ser analizados y tratados.

  • English

    Increased interaction between computer systems has modified the traditional way to analyze and develop them. The need for interaction between the system components is increasingly important to solve joint tasks, which individually would be very expensive or even impossible to develop once. Multi-agent systems offer an interesting and complete distributed architecture to execute tasks cooperate. The creation of a multi-agent system or an agent requires great effort so methods have been adopted as the deployment patterns. The pattern creates Proactive Obsever_JADE agents and include in each endowed with intelligence behaviors can evolve using machine learning techniques. The reinforcement learning is a machine learning technique that allows agents to learn through trial and error interactions in a dynamic environment. Reinforcement learning in multi-agent systems offers new challenges arising from the distribution of learning, such as the need for coordination between agents or distribution of knowledge, which should be analyzed and treated.

• Referencias bibliográficas
  • M. Wooldridge. “An Introduction to MultiAgent Systems”. 2nd. 2009, John Wiley & Sons. ISBN: 9780470519460.
  • FIPA, FIPA Agent Management Specification, 2003, Foundation for Intelligent Physical Agents. URL: http://www.fipa.org/specs/fipa00023/
  • FIPA, FIPA Communicative Act Library Specification, 2003, FOUNDATION FOR INTELLIGENT PHYSICAL AGENTS. URL: http://www.fipa.org/specs/fipa00037/SC00037J.html
  • J. Ferber. “Multi-agent systems: an introduction to distributed artificial intelligence”. 1999, Addison-Wesley. ISBN 0-201-36048-9
  • F. L. Bellifemine, G. Caire & D. Greenwood. “Developing Multi-Agent Systems with JADE”. 1st. 2007, Chichester: John Wiley & Sons,...
  • F. Bellifemine, F. Bergenti, G. Caire & A. Poggi, “Jade-A Java Agent Development Framework”, in Multi-Agent Programming, R. Bordini, et...
  • M. Moreno, A. Carrasco, A. Rosete & M. D. Delgado. “Patrones de Implementación para Incluir Comportamientos Proactivos”. Polibits, Vol....
  • B. Henderson-Sellers, “From Object-Oriented to Agent-Oriented Software Engineering Methodologies”, in Software Engineering for Multi-Agent...
  • DARPA Envisions the Future of Machine Learning, 2013. URL: http://www.darpa.mil/news-events/2013-03-19a
  • T. Ishida, L. Gasser & M. Yokoo. “Organization self-design of distributed production systems”. IEEE Transactions on Knowledge and Data...
  • OMG, Agent Platform Special Interest Group: Agent Technology – Green Paper, 2000. URL: http://www.objs.com/agent/agents_Green_Paper_v100.doc
  • S. Franklin &A. Graesser, “Is It an agent, or just a program?: A taxonomy for autonomous agents”, in Intelligent Agents III Agent Theories,...
  • S. Russell &P. Norvig. “Artificial Intelligence: A Modern Approach”. 3rd, illustrated. 2010, Prentice Hall. ISBN: 978-0136042594
  • J. M. Crant. “Proactive Behavior in Organizations”. Journal of Management, Vol. 26, No. 3, pp. 435-462, 2000. DOI: 10.1177/014920630002600304
  • A. M. Grant &S. J. Ashford. “The dynamics of proactivity at work”. Research in Organizational Behavior, Vol. 28, No. -, pp. 3-34, 2008....
  • S. K. Parker, U. K. Bindl & K. Strauss. “Making Things Happen: A Model of Proactive Motivation”. Journal of Management, Vol. 36, No. 4,...
  • F. Bellifemine, A. Poggi & G. Rimassa, JADE – A FIPA-compliant agent framework, 1999. URL: http://sharon.cselt.it/projects/jade/papers/PAAM.pdf
  • E. Gamma, R. Helm, R. Johnson & J. Vlissides. “Design Patterns: Elements of Reusable Object-oriented Software”. 2004, Pearson Education....
  • FIPA, FIPA Subscribe Interaction Protocol Specification, 2003, FOUNDATION FOR INTELLIGENT PHYSICAL AGENTS. URL: http://www.fipa.org/specs/fipa00095/PC00095A.pdf
  • R. Barr &C. Rovee-Collier. “Encyclopedia of the Sciences of Learning”. 2012, Estados Unidos: Springer. URL: http://www.springer.com/us/book/9781441914279
  • P. Domingos. “A few useful things to know about machine learning”. Commun. ACM, Vol. 55, No. 10, pp. 78-87, 2012. DOI: 10.1145/2347736.2347755
  • A. Shhab, G. Guo & D. Neagu, A Study on Applications of Machine Learning Techniques in Data Mining, 2005. URL: http://pythia.inf.brad.ac.uk/paper/BNCODWorkshop.pdf
  • Leslie Pack Kaelbling, Michael L. Littman & A. W. Moore. “Reinforcement Learning: A Survey”. Artificial Intelligence Research, Vol. 4,...
  • R. S. Sutton &A. G. Barto. “Reinforcement Learning: An Introduction”. 1998, Cambridge, Massachusetts: The IMT Press. ISBN: 978-0262193986
  • INTECHOPEN. “New Advances in Machine Learning”. 2010, InTech. 374p. ISBN 978-953-307-034-6
  • C. Germain-Renaud, A. Cady, P. Gauron, M. Jouvin, Ch. Loomis, et al. "The Grid Observatory". IEEE Computer Society Press. IEEE/ACM...