How computers learn like people | Doina Precup | TEDxMcGill

la grande magia di essere qui e di dire
tu un po ‘su quello che fanno così
una storia è che sono cresciuto in Romania
ai tempi in cui era comunista
paese quindi le cose erano piuttosto deprimenti e
di conseguenza, so di essere ribelle
adolescenti abbiamo fatto cose molto radicali
è come guardare film di fantascienza pirata
anche molto altro da fare radicale e così via
Non sto guardando gli androidi come beta
e robot e ho pensato che tu lo sappia
è davvero cool che mi piace di
qualcosa di simile
quindi mi ha davvero ispirato ad andare davvero
all’interno dell’informatica del
Università e uno dei primi tipi di
incarichi significativi che ho avuto lì
era quello di costruire un programma che potesse suonare
scacchi ora solo come un gioco che le persone
consideri segno distintivo dell’intelligenza I
ho pensato che va bene
realizzerò un set per costruire
alcuni robot un altro perché mio
incarico e queste persone hanno detto bene
sai pensare a come suoni
scacchi e poi fare quelle regole e
i programmi che conosco ne hanno fatto sono davvero un
pessimo giocatore di scacchi quindi tutto quello che potevo fare è
in sostanza dire al programma alcuni molto
cose molto semplici su come i pezzi
spostare non era davvero molto buono ora io
ho deciso di non mollare e così sono andato a
grad scuola e all’inizio della mia
scuola elementare in realtà un momento spartiacque
per l’intelligenza artificiale è successo
questa è una foto che era nelle notizie
al momento questo è Gary Kasparov che
è stato il campione di scacchi del mondo battuto da
un computer e il computer era blu era
una creazione di IBM e davvero tutti noi
studiavo l’ intelligenza artificiale e siamo molto ispirati
da questo abbiamo pensato bene ora questo è vero
computer di intelligence è meglio di a
di nuovo
davvero considerare di essere molto significativo
e quindi non siamo molto entusiasti
benvenuti a leggere i documenti che descrivono
la tecnologia e poi l’ha capito
in realtà questa è stata un’impresa strabiliante, ma è così
era essenzialmente un piede umano c’era a
computer che è stato costruito appositamente per giocare
gli scacchi erano tutto ciò che poteva fare
davvero non giocavo a scacchi ma
era molto speciale e non poteva fare molto
di qualsiasi altra cosa
anche le persone pensano molto
attentamente su come i maestri hanno interpretato il
gioco e hanno costruito questa capacità in
il computer è stato fantastico ma è così
non era proprio quello che stavo cercando ora
sì, siamo 20 anni dopo e in realtà
le cose si sono mosse un bel po ‘così queste
sono alcune immagini tratte dai giochi
di goal di Lisa e di kg chi ha giocato anche
programma per computer questa volta al gioco
di Dio ora vai è un gioco antico che è
considerato significativamente più difficile di
gli scacchi se sono tutti strategia così come
tattica ed è un po ‘considerevole
più difficile anche perché ce ne sono molti
molte molte mosse possibili e le persone hanno
pensare che molto vicino va bene cattura
territorio come difendo e così via e
si scopre che questo programma ha chiamato
alfa del ed è una specie di prossima versione
chiamato alfa zero in realtà era davvero
veramente buono al punto che sia ora
essenzialmente il miglior portiere del mondo e
ha reso la copertura della natura e molto
ci siamo molto emozionati e adesso
hanno in realtà un modo molto più interessante
di fare questo tipo di impresa che è
non tanto ingegneria, quindi è questo
Voglio raccontarti come fanno questi
i programmi effettivamente fanno il gioco che gira
che non sono così tanti programmi come
avrebbero imparato come farlo ora quando tu
pensa all’apprendimento dei bambini che imparano
viene in mente sta andando a scuola okay così
vai a scuola, hai un insegnante, poi mangia
il vostro selfie varie cose che tipo di
ingerire nel menu impara come fare cose
questo è un modo per imparare in
computer è chiamato supervisionato
imparando così puoi avere per esempio a
computer che vuole imparare come
etichetta immagini come facciamo questo ciò che sarà
mostra al computer molte immagini dove
qualcuno è entrato e in realtà
etichettato le cose che sono interessanti
quindi in questo caso siamo al computer per
impara come etichettare i volti e così via
qualcuno sta passando per menzionato disegnato
alcuni piccoli quadrati intorno ai volti e
Ho intenzione di mostrare queste informazioni a
il computer l’ immagine è solo un insieme di
pixel e sappiamo cosa stiamo cercando
per a immagine e così ora siamo in grado di mostrare
il computer è molto, molto e molto
immagini milioni di immagini mentre gira
fuori e per imparare a riconoscere i volti
ora cosa ha il computer dentro
ha un piccolo cervello per l’artificiale
rete neurale o una grande rete così dentro
la foto laggiù ha davvero
alcune unità molto piccole che possono fare molto
le cose semplici vanno bene come calcolare a
determinate funzioni di linea o forse come a
funzione linea ondulata in modo che ognuno di
il circuito è molto molto semplice tipo di
come il neurone umano arriva il potere
dalle connessioni le connessioni
avere numeri su di loro e questi numeri
quando vengono addestrati, alcuni di loro tirano fuori Kai
alcuni di loro si abbassano e ognuno di questi
piccole unità che sono molto specializzate
tipo di cosa così per esempio alcuni di
loro semplicemente impareranno a farlo
riconoscere bordi o linee
alcuni di loro stanno per effettivamente
riconoscere certi tipi di volti si trasforma
alcuni di questi nomi in realtà imparano
come riconoscere i gatti, va bene, perché?
perché un sacco di danni su internet
sono gatti e cani e così via e così noi
ora hanno questi meravigliosi artificiali
cervelli che sono veramente bravi in
riconoscere i gatti da tutti gli angoli e tutti
razze diverse quindi questo è interessante
questo è parte del modo in cui la fattura alfa
le cose, in effetti, vanno bene, quindi, intendo
da quello inizialmente dopo se estraniato
guardando un sacco di giochi che le persone
giocare buoni giocatori di livello Grandmaster e
essenzialmente pensando alla mossa che loro
è stato il diritto di muoversi a posto
e così il programma impara a rifiutare
usa queste mosse ora è fantastico
è molto interessante è molto
programma potente ma c’è un problema
qui che è questo richiede molto
i dati forniti dalle persone vanno bene
con le immagini abbiamo bisogno di milioni di
immagini etichettate da persone che ora ottengono le persone
annoiato molto rapidamente da questo tipo di compito
e quindi i soggetti sono come un meccanico
in realtà non ci sono molti giochi
che sono interpretati da grandi maestri che noi
può cercare informazioni così ora se noi
pensa a come le persone imparano si tu
impara cose a scuola ma in realtà
stai andando tipi di cose anche prima
vai tu stesso che impari come
riconoscere gli oggetti e quali sono i colori
non c’è bisogno di contare e si impara a
interagire attraverso il mondo in vari
modi e così questo è il tipo di processo
vorremmo imitare in un computer
è un tipo diverso di apprendimento chiamato
apprendimento per rinforzo e si scopre
che questo non è nemmeno solo qualcosa
che le persone fanno ma gli animali lo fanno è
molto diffuso nel mondo naturale e
quindi in una foto c’è una build
Topo
sta imparando un compito il compito è
sequenza di leve essenzialmente cupressa
per ottenere un refrigerante e il
bocca solo tipo di polvere cose a caso
inciampa sui credenti quando ottiene il
femore destro come si ottiene il cibo e
questa è la sua ricompensa, va bene così
quindi nessun odore è felice e dopo cosa
tipo di innesca un percorso di apprendimento che
fa ricordare quali erano queste cose
Ottengo che come me oggi ricompensa
si scopre che possiamo addestrare i computer in
più o meno allo stesso modo attraverso il rinforzo
perché così pensi al computer
programma ora come esposto al
mondo si guarda il mondo che può fare
cose è un servitore di evangelizzazione e come
risultato di ciò che fa può ricevere un
ricompensa ora questo potrebbe essere un positivo
ricompensa numero e numero e il tutto
il computer è trovare azioni che
essenzialmente dargli un numero così grande come
possibile
questo è un pregiudizio che abbiamo messo, ma è
mai detto la cosa reale che essa
dovrebbe fare è permesso di sperimentare
l’altra cosa interessante è quella
questi numeri potrebbero arrivare molto dopo
perché l’ azione è avvenuta per quelli di
tu che stai facendo l’università tu
probabilmente sai che aspettarti qualche premio a
la fine della giornata quando ottieni il tuo
laurea se ci vorranno alcuni anni
per arrivarci e quindi non lo farà nessuno
fallo in qualche modo ancora da far rispettare
le nostre azioni così che è in realtà come
alphago impara che guarda alla lavagna
prova qualcosa che è un’azione
non c’è feedback fino alla fine del
gioco sì
osserva se è un grande a
mostruosità e se ha vinto la partita
farà tutte le azioni
ciò accade durante quel gioco un po ‘
un po ‘ più probabile perché ovviamente
andiamo finché non arrivano le bambole e se il
il gioco fermerà tutte quelle azioni
diventerà un po ‘meno probabile
quindi questo è il principio di base e non
il programma sta andando a sedersi lì
nel suo felice angolo del computer e giusto
incolpare milioni e milioni di giochi
morde si scopre che questo porta
il miglior programma al mondo non solo
ma perché il programma non lo è
ha davvero detto qual è la cosa giusta da fare
perché apprende dalla sperimentazione essa
può infatti inventare nuovi modi di giocare
che sono diversi da ciò che le persone
credo che questo sia un grafico che è
mostrando dopo quell’anno o l’apprendimento
la prestazione è alta più è alto il
meglio così questo è che è in affitto e
dopo tre giorni in realtà supera
la capacità del nostro portiere questo è il
versione che prendiamo in affitto a tutti loro
forza molto dall’apprendimento supervisionato e
poi dopo 21 giorni effettivamente raggiunge
il livello di padrone che è quello
che ha sconfitto il tasto G e alla fine di
l’allenamento dopo 40 giorni diventa così
bene che batte la versione precedente
un centinaio di giochi a nulla così è
assolutamente il miglior giocatore di go in the
mondo che altro è interessante
questo programma è che ora non c’è
hardware per scopi speciali ok accende il
computer normale e l’algoritmo è
in realtà molto generale non c’è nulla in
l’ algoritmo che ha detto al computer
questo è specifico
anche se sappiamo solo che dovresti
preferisco vincere e ora salire e mostrare
fuori i giochi e capirlo così
questo è un concetto molto potente perché
si generalizza a molti molti diversi
situazioni ora
ovviamente sono molto felice con i giochi e
molti di noi informatici sono molto
felice con i giochi ma in realtà c’è
applicazioni reali a questo e così nel nostro
laboratorio guardiamo tutti i tipi di modi in cui
intelligenza artificiale e questi tipi
dei metodi di apprendimento possono essere applicati uno
del suo qui rappresentato è il progetto
abbiamo in corso presso i bambini
Ospedale che sta guardando molto
bambini prematuri quindi in questo caso il
i bambini nascono sono molto piccoli loro
non riesco a respirare da solo e così via
sono collegati a un ventilatore e
ora vorremmo capire quando
essi sono in realtà pronti per essere presi
fuori da quella macchina del ventilatore che è a
decisione presa da un medico ma dal medico
ha bisogno di aiuto perché in realtà non lo sono
sempre lì ad osservare il bambino e così via
hanno quantità limitate di informazioni
e anche c’è molto rumore
è un ambiente gratificante per i bambini
sollevato e abbassato i sensori perdono
contatto e così via quindi quello che facciamo è noi
raccogliere dati in ambito ospedaliero e
quindi vogliamo essenzialmente un computer
prevedere il loro rischio che il bambino sarebbe
sono incorsi se dovesse essere estubato
adesso e in questo caso il computer
in realtà non sta sperimentando
prendere provvedimenti
sta semplicemente imparando a predire il
risultato giusto ed è stato premiato
per predire il momento giusto c’è
un’altra applicazione che ti mostrerò
ecco qual è l’immagine dei dati
i dati che sono molto corrotti non sono sicuro
se sai dire cosa c’è in questa immagine
okay è un po ‘difficile da dire ma
se lascio che il computer faccia il suo lavoro, va bene
vedete alcune cifre su qui
immagine ora questo è un compito che viene chiamato
fissando i dati corruttori i nostri dati
imputazione in termini statistici è a
problema dove devi guardare il
dati che sono lì per tipo di
prendici ma cosa non c’è e gente
sono bravi a mettere un po ‘ di questo
un ragazzo scomparso ma non sono così bravo
quando mancano molti dati e tu
può tipo di vedere che sta per essere
difficile per te riconoscere queste immagini
devono riempire le lacune
senza alcun aiuto quindi a cosa serve il computer
non fa altro che esamina l’immagine sembra
nel contesto di ciò che manca e può
decidere di inserire un pixel o meno e
tipo di fa questo nel tempo poco a poco
poco e ancora è ricompensato da
ottenendo alla fine la risposta giusta
ma una volta addestrato, può farlo
qualsiasi altro tipo di immagini così nel
contesto di questa presentazione del dare
voce penso che sia davvero importante per
a pensare di come stiamo andando a utilizzare
questi strumenti molto potenti ora nel nostro
vive sono disponibili alcuni di voi
probabilmente li usi tutti i giorni, se tu
interagire con il tuo telefono che parli
al tuo telefono il tuo telefono che un po ‘di voce
riconoscimento se si esegue la traduzione di Google
traduci con cui interagirai
questi tipi di metodi come stai andando
per fare uso di questo in modo che questo
la tecnologia può effettivamente aiutarci a migliorare
e spero che tutti si può pensare
alcuni modi utili IT
[Applausi]