Ebben a fejezetben a számítógépet a zord, koszos világhoz csatlakoztatjuk.

Az észlelés információhoz juttatja az ágenst arról a világról, amelyben létezik. Az észlelést az érzékelők (sensors) kezdeményezik. Egy érzékelő lehet bármi, ami a környezet valamelyik aspektusát rögzíti és továbbítja az ágensprogram számára. Ez olyan egyszerű is lehet, mint egy egybites érzékelő, amely egy kapcsoló be és ki állapotát jelzi, de lehet olyan bonyolult is, mint az emberi szem retinája, amely több mint százmillió fotoérzékeny elemet tartalmaz. Ebben a fejezetben a látásra összpontosítunk, mert a fizikai világ kezelésében ez az észlelésfajta messze a leghatásosabb.