La teoría del control dual es una rama de la teoría del control que se ocupa del control de sistemas cuyas características se desconocen inicialmente. [ 1 ] [ 2 ] Se denomina dual porque, al controlar un sistema de este tipo, los objetivos del controlador son dobles:
- (1) Acción : Controlar el sistema lo mejor posible basándose en el conocimiento actual del sistema.
- (2) Investigación : Experimentar con el sistema para aprender sobre su comportamiento y controlarlo mejor en el futuro.
Estos dos objetivos pueden estar parcialmente en conflicto. En el contexto del aprendizaje por refuerzo , esto se conoce como la compensación entre exploración y explotación (por ejemplo, el problema del bandido multi-brazo#Motivación empírica ).
La teoría del control dual fue desarrollada por Alexander Aronovich Fel'dbaum en 1960. Demostró que, en principio, la solución óptima puede hallarse mediante programación dinámica , pero esto suele ser poco práctico; como resultado, se han ideado varios métodos para diseñar controladores duales subóptimos.
Ejemplo
Para usar una analogía : si conduces un coche nuevo, quieres llegar a tu destino de forma económica y sin contratiempos, pero también quieres comprobar su aceleración, frenado y dirección para familiarizarte con la conducción, así que realizarás algunas maniobras de prueba. De forma similar, un controlador dual inyectará una señal de sondeo (o exploración) en el sistema que puede afectar negativamente al rendimiento a corto plazo, pero mejorará el control en el futuro.
Referencias
- ↑ Feldbâum, Ά. Á. (1963-06-01). "Problemas de la teoría del control dual". Actas de la IFAC . 2.º Congreso Internacional de la IFAC sobre Control Automático y Remoto: Teoría, Basilea, Suiza, 1963. 1 (2): 541– 550. doi : 10.1016/S1474-6670(17)69687-3 . ISSN 1474-6670 .
- ↑ Chen, Wen-Hua; Rhodes, Callum; Liu, Cunjia (2021-11-01). "Control dual para explotación y exploración (DCEE) en búsqueda autónoma" (PDF) . Automatica . 133 109851. doi : 10.1016/j.automatica.2021.109851 . ISSN 0005-1098 . S2CID 228372721 .
- Feldbaum, AA (abril de 1961) [septiembre de 1960 (en ruso, págs. 1240–1249)]. "Teoría del control dual, Parte I". Automatización y control remoto . 21 (9): 874–880 .
- Feldbaum, AA (mayo de 1961) [noviembre de 1960 (en ruso, págs. 1453–1464)]. "Teoría del control dual, parte II". Automatización y control remoto . 21 (11): 1033–1039 .
- Stengel, RF, (1994), "Control dual". Control óptimo y estimación [ https://stengel.mycpanel.princeton.edu/OptConEst.html ], Dover Publications, pp. 436-443.
- Wittenmark, B. (junio de 1995). "Métodos de control dual adaptativo: una visión general". Universidad de Lund: 67–72 . CiteSeerX 10.1.1.25.7446 .
{{cite journal}}: Para citar una revista se requiere|journal=( ayuda )
- Teoría de control