<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;" class="">
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class="">Our next Mobilize Center Seminar is scheduled for Thursday, June 8th, and features <b class="">Ambuj Tewari
</b><span class="">from the University of Michigan</span>.  He will be presenting “From Ads to Interventions: Contextual Bandits in Mobile Health.”<o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""> </font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class="">Our seminars are held on a monthly basis. We look forward to seeing you next week and at future seminars!<o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""> <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">TITLE:</b>      <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">From Ads to Interventions: Contextual Bandits in Mobile Health</b></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class=""> </b></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">WHEN:</b>     <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">Thursday, June 8</b><o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">noon - 1 pm</b> <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""> <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">WHERE:</b>  <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class=""><span style="color: rgb(251, 2, 7);" class="">Y2E2 300, Stanford University </span></b><o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""> <o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">Abstract:</b><o:p class=""></o:p></font></div>
<div style="margin: 0in 0in 0.0001pt;" class="">
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class="">A key problem in designing just-in-time adaptive interventions (JITAIs) for mobile health is to learn decision rules from data that can map tailoring variables (user mood, time of day,
 weather conditions) to intervention options (should we send a message to the user’s phone right now?). Contextual bandit algorithms attempt to construct such decision rules with the goal of maximizing some numerical outcome following every decision point (say,
 the number of steps walked in 30 minutes after sending an activity encouraging message).</font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><br class="">
</font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class="">The first paper on contextual bandits was written by Michael Woodroofe in 1979 but the term “contextual bandits” was invented only recently in 2008 by Langford and Zhang. Woodroofe’s
 motivating application was clinical trials whereas modern interest in this problem was driven to a great extent by problems on the internet, such as online ad and online news article placement. We have now come full circle because contextual bandits provide
 a natural framework for sequential decision making in mobile health. We will survey the contextual bandits literature with a focus on modifications needed to adapt existing approaches to the mobile health setting. We discuss specific challenges in this direction
 such as: good initialization of the learning algorithm, finding interpretable policies, assessing usefulness of tailoring variables, computational considerations, robustness to failure of assumptions, and dealing with variables that are costly to acquire or
 missing.</font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><br class="">
</font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><b class="">Bio:</b></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class="">Ambuj Tewari is an assistant professor in the Department of Statistics and the Department of EECS (by courtesy) at the University of Michigan, Ann Arbor. His is also affiliated with
 the Michigan Institute for Data Science (MIDAS). He obtained his PhD under the supervision of Peter Bartlett at the University of California at Berkeley. His research interests lie in machine learning including statistical learning theory, online learning,
 reinforcement learning and control theory, network analysis, and optimization for machine learning. He collaborates with scientists to seek novel applications of machine learning in mobile health, learning analytics, and computational chemistry. His research
 has been recognized with paper awards at COLT 2005, COLT 2011, and AISTATS 2015. He received an NSF CAREER award in 2015 and a Sloan Research Fellowship in 2017.</font></div>
</div>
<div style="margin: 0in 0in 0.0001pt; text-align: justify;" class=""><font face="Arial" class=""> </font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><font face="Arial" class=""><font class="">To keep up-to-date on upcoming speakers and the dates, visit </font><a href="http://mobilize.stanford.edu/events/" class="">Mobilize Events</a><font class="">.</font></font></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><span style="color: rgb(31, 73, 125);" class=""><font face="Arial" class=""> </font></span></div>
<div style="margin: 0in 0in 0.0001pt;" class=""><span style="color: rgb(31, 73, 125);" class=""><font face="Arial" class=""> </font></span></div>
<div class="">
<div class=""><font face="Arial" class="">Diane Bush<br class="">
Assistant to Professor Scott Delp<br class="">
NMBL, Mobilize Center, OpenSim<br class="">
Stanford University<br class="">
<a href="mailto:dbush1@stanford.edu" class="">dbush1@stanford.edu</a><br class="">
</font></div>
</div>
<br class="">
</body>
</html>