<?xml version="1.0" encoding="utf-8"?>
<TEI xmlns="http://www.tei-c.org/ns/1.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:hal="http://hal.archives-ouvertes.fr/" xmlns:gml="http://www.opengis.net/gml/3.3/" xmlns:gmlce="http://www.opengis.net/gml/3.3/ce" version="1.1" xsi:schemaLocation="http://www.tei-c.org/ns/1.0 http://api.archives-ouvertes.fr/documents/aofr-sword.xsd">
  <teiHeader>
    <fileDesc>
      <titleStmt>
        <title>HAL TEI export of hal-00553895</title>
      </titleStmt>
      <publicationStmt>
        <distributor>CCSD</distributor>
        <availability status="restricted">
          <licence target="https://creativecommons.org/publicdomain/zero/1.0/">CC0 1.0 - Universal</licence>
        </availability>
        <date when="2026-05-21T16:14:53+02:00"/>
      </publicationStmt>
      <sourceDesc>
        <p part="N">HAL API Platform</p>
      </sourceDesc>
    </fileDesc>
  </teiHeader>
  <text>
    <body>
      <listBibl>
        <biblFull>
          <titleStmt>
            <title xml:lang="fr">Gestion de l'incertitude dans le cadre de l'approximation de la fonction de valeur pour l'apprentissage par renforcement</title>
            <author role="aut">
              <persName>
                <forename type="first">Matthieu</forename>
                <surname>Geist</surname>
              </persName>
              <email type="md5">c025140e3cc06ac39e7de0f0db2a4b70</email>
              <email type="domain">univ-lorraine.fr</email>
              <idno type="idhal" notation="string">matthieu-geist</idno>
              <idno type="idhal" notation="numeric">6945</idno>
              <idno type="halauthorid" notation="string">7492-6945</idno>
              <affiliation ref="#struct-26305"/>
            </author>
            <author role="aut">
              <persName>
                <forename type="first">Olivier</forename>
                <surname>Pietquin</surname>
              </persName>
              <email type="md5">d7ca8400327f875d5b916c43fee3b2c5</email>
              <email type="domain">univ-lille1.fr</email>
              <idno type="idhal" notation="string">olivier-pietquin</idno>
              <idno type="idhal" notation="numeric">4024</idno>
              <idno type="halauthorid" notation="string">23089-4024</idno>
              <idno type="IDREF">https://www.idref.fr/142821861</idno>
              <idno type="ORCID">https://orcid.org/0000-0002-5386-465X</idno>
              <affiliation ref="#struct-26305"/>
            </author>
            <editor role="depositor">
              <persName>
                <forename>Sébastien</forename>
                <surname>Van Luchene</surname>
              </persName>
              <email type="md5">983556412cb0e7fb6d6508a01ac9cf46</email>
              <email type="domain">supelec.fr</email>
            </editor>
          </titleStmt>
          <editionStmt>
            <edition n="v1" type="current">
              <date type="whenSubmitted">2011-01-10 10:50:58</date>
              <date type="whenModified">2023-02-14 03:38:04</date>
              <date type="whenReleased">2011-01-10 12:27:05</date>
              <date type="whenProduced">2010-05-17</date>
            </edition>
            <respStmt>
              <resp>contributor</resp>
              <name key="123540">
                <persName>
                  <forename>Sébastien</forename>
                  <surname>Van Luchene</surname>
                </persName>
                <email type="md5">983556412cb0e7fb6d6508a01ac9cf46</email>
                <email type="domain">supelec.fr</email>
              </name>
            </respStmt>
          </editionStmt>
          <publicationStmt>
            <distributor>CCSD</distributor>
            <idno type="halId">hal-00553895</idno>
            <idno type="halUri">https://centralesupelec.hal.science/hal-00553895</idno>
            <idno type="halBibtex">geist:hal-00553895</idno>
            <idno type="halRefHtml">&lt;i&gt;CAP 2010&lt;/i&gt;, May 2010, Clermont-Ferrand, France. pp.101-112</idno>
            <idno type="halRef">CAP 2010, May 2010, Clermont-Ferrand, France. pp.101-112</idno>
            <availability status="restricted"/>
          </publicationStmt>
          <seriesStmt>
            <idno type="stamp" n="SUPELEC">SUPELEC</idno>
            <idno type="stamp" n="CENTRALESUPELEC">Ecole CentraleSupélec</idno>
          </seriesStmt>
          <notesStmt>
            <note type="audience" n="1">Not set</note>
            <note type="invited" n="0">No</note>
            <note type="popular" n="0">No</note>
            <note type="peer" n="1">Yes</note>
            <note type="proceedings" n="1">Yes</note>
          </notesStmt>
          <sourceDesc>
            <biblStruct>
              <analytic>
                <title xml:lang="fr">Gestion de l'incertitude dans le cadre de l'approximation de la fonction de valeur pour l'apprentissage par renforcement</title>
                <author role="aut">
                  <persName>
                    <forename type="first">Matthieu</forename>
                    <surname>Geist</surname>
                  </persName>
                  <email type="md5">c025140e3cc06ac39e7de0f0db2a4b70</email>
                  <email type="domain">univ-lorraine.fr</email>
                  <idno type="idhal" notation="string">matthieu-geist</idno>
                  <idno type="idhal" notation="numeric">6945</idno>
                  <idno type="halauthorid" notation="string">7492-6945</idno>
                  <affiliation ref="#struct-26305"/>
                </author>
                <author role="aut">
                  <persName>
                    <forename type="first">Olivier</forename>
                    <surname>Pietquin</surname>
                  </persName>
                  <email type="md5">d7ca8400327f875d5b916c43fee3b2c5</email>
                  <email type="domain">univ-lille1.fr</email>
                  <idno type="idhal" notation="string">olivier-pietquin</idno>
                  <idno type="idhal" notation="numeric">4024</idno>
                  <idno type="halauthorid" notation="string">23089-4024</idno>
                  <idno type="IDREF">https://www.idref.fr/142821861</idno>
                  <idno type="ORCID">https://orcid.org/0000-0002-5386-465X</idno>
                  <affiliation ref="#struct-26305"/>
                </author>
              </analytic>
              <monogr>
                <title level="m">Actes de la conférence francophone sur l'apprentissage automatique</title>
                <meeting>
                  <title>CAP 2010</title>
                  <date type="start">2010-05-17</date>
                  <date type="end">2010-05-19</date>
                  <settlement>Clermont-Ferrand</settlement>
                  <country key="FR">France</country>
                </meeting>
                <imprint>
                  <publisher>PUG</publisher>
                  <biblScope unit="pp">101-112</biblScope>
                  <date type="datePub">2010-05</date>
                </imprint>
              </monogr>
            </biblStruct>
          </sourceDesc>
          <profileDesc>
            <langUsage>
              <language ident="en">English</language>
            </langUsage>
            <textClass>
              <classCode scheme="halTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halOldTypology" n="COMM">Conference papers</classCode>
              <classCode scheme="halTreeTypology" n="COMM">Conference papers</classCode>
            </textClass>
            <abstract xml:lang="fr">
              <p>Le dilemme entre exploration et exploitation est un problème important en apprentissage par renforcement (AR). Les approches associées les plus efficaces utilisent généralement une information d'incertitude des valeurs estimées pendant l'apprentissage. D'un autre côté, la prise en compte de grands espaces d'état est problématique en AR et l'approximation de la fonction de valeur est devenue un domaine de recherche important. Ces deux problèmes co-existent dans la plupart des applications. Cependant, peu d'approches permettent à la fois d'approcher la fonction de valeur et d'en déduire une information d'incertitude sur les estimations. Dans cet article, nous montrons comment une telle information d'incertitude se déduit naturellement d'un cadre de travail basé sur les différences temporelles et le filtrage de Kalman. Nous introduisons un schéma d'apprentissage actif pour un algorithme du second ordre du type itération de la valeur (nommément KTD-Q). Nous proposons également l'adaptation de quelques méthodes traitant du dilemme entre exploration et exploitation initialement conçues pour le cas tabulaire.</p>
            </abstract>
          </profileDesc>
        </biblFull>
      </listBibl>
    </body>
    <back>
      <listOrg type="structures">
        <org type="laboratory" xml:id="struct-26305" status="OLD">
          <orgName>SUPELEC-Campus Metz</orgName>
          <date type="start">1985-01-01</date>
          <date type="end">2014-12-31</date>
          <desc>
            <address>
              <addrLine>2 rue Edouard Belin 57070 Metz</addrLine>
              <country key="FR"/>
            </address>
            <ref type="url">http://www.metz.supelec.fr/metz/</ref>
          </desc>
          <listRelation>
            <relation active="#struct-303397" type="direct"/>
          </listRelation>
        </org>
        <org type="institution" xml:id="struct-303397" status="VALID">
          <orgName>Ecole Supérieure d'Electricité - SUPELEC (FRANCE)</orgName>
          <desc>
            <address>
              <country key="FR"/>
            </address>
          </desc>
        </org>
      </listOrg>
    </back>
  </text>
</TEI>