Press "Enter" to skip to content

Comprendre une image, pas si simple pour une machine | Antoine Bordes | TEDxTours


buona sera a tutti ti parlerò
di intelligenza artificiale stasera e
Ti ho parlato del lavoro che stiamo facendo
nel laboratorio di Facebook dove io
il lavoro è il primo che volevo
inizia con un piccolo esempio, immagina
che sei invitato a visitare gli amici e
una sera e tu arrivi ma in realtà
si sta visivamente alterata avvicinato
il tavolo e tu vai fuori il tuo
telefono e arrivi dopo un
foto che hai dopo una foto tu
non potevo farti prendere
una foto e purtroppo la foto e ci sei tu
fai una domanda molto semplice in
fatto
è un piatto vegetariano
quando è una domanda che può essere
produrre per una ragione completa e così dentro
fatto ovviamente se lo sei mai stato
l’hai chiesto ad un amico che lo sarà
in grado di rispondere immediatamente
lui guarderà sulla pizza rilevata
chi sono i piccoli pezzi di chi
sembra carne secondo me
non è tutto quello che è in grado di dire quella quercia
è un vegetariano non mangia
carne
questa pizza di carne così è
non è un piatto vegetariano è davvero
non molto complicato e ben immaginare
che se lo chiedi a un assistente
personale che sarebbe nel telefono
una macchina apparentemente intelligente e
beh lei sarà molto molto seccata
rispondere a tali domande
e cercherò di spiegare perché
e spiegare come è fatto
per una macchina dopo un po ‘
poiché in grado di rispondere a
domanda simile, quindi perché è questo
che è complicato per una macchina
perché in effetti questo compito lo è
usi molto semplici tre di
principali problemi di intelligenza
artificiale
Lo so molto bene
tre problemi principali 1 il
la percezione è ciò che ci consente di entrare
lo rileviamo sulla pizza
c’è carne ok 2 questo è il
la conoscenza è in realtà è tutto
conoscenza che abbiamo buon senso
conoscenza del mondo che ci vuole
ancora bene proprio lì in questo momento
lì siamo in grado di usare il fatto
lo sappiamo perché il vegetariano non mangia
carne
ok ma non è nemmeno ovvio e
eppure è tutto salato 3 questo è il
ragionamento è che ci vuole
non che abbiamo impostato il rilevamento
carne e che abbiamo anche
posto
trova le nostre idee che abbiamo conoscenza
un vegetale maneggia la carne
combina i due in realtà ha detto questo
piccolo ragionamento che qui è molto
semplici carte per una macchina può
essere molto complicato e così di fatto
Ti ho posto in questa
presentazione un po ‘di lavoro
ricerca che viene fatta in questi tre
indicazioni per provare a migliorare
poiché le macchine sono in grado di
per farlo iniziamo con la percezione
lì vedi sullo schermo cos’è
la maggior parte delle macchine vocali quando
mostriamo loro una foto
Quindi è ancora abbastanza
astratto non è una tavola cubica
dovrebbe essere una foto
appare una scena di vita normale
così in effetti il ​​maj sta andando a
blocchi che sono in realtà attorno agli oggetti
che ha rilevato e quando è a
un po ‘più sofisticato ma io
Sto anche mettendo le etichette così
qui avrei potuto aggiungere che la macchina
ha fatto in modo che i tre blocchi siano dentro
rende le persone
lo stesso se ti do questo
informazioni vedrai un passaggio
prima mi fa male dire in realtà
cosa sta succedendo in questa scena così
ricerca percettiva in questo
stava cercando di migliorare questo
rappresentazione che la macchina può
per migliorare le immagini che desidera
dì forse in grado di determinare
contorni
questi accordi invece di avere un
scatola che è molto maleducata stiamo andando
cercare di essere in grado di fare ciò che noi
chiede una segmentazione, cioè
essere in grado di circondarsi
completamente gli oggetti quindi a
next step cdc same to put a
scheletro sulle persone cosa noi
chiamare determinare la rottura così lì
per esempio potrebbe vedere un uomo ottenere
proprio come uno dei rannicchiati
l’esterno è già se tu vedi mai
questo è ciò che è sempre alle voci
ancora nessun pixel dell’immagine che abbiamo
ancora molto più facile da vedere
già cosa sta succedendo e con un po ‘
po ‘di fantasia può essere forse
determinato che in effetti lo era
di una scena di baseball sono d’accordo
facebook è un’azienda americana
Avrei dovuto prendere il calcio
quindi è davvero l’idea che sia
per cercare di andare avanti e farlo per
un’immagine ma per farlo
qualsiasi immagine per farlo
tutte le immagini che arrivano su
facebook e fallo anche su
video quindi non è solo farlo
così
un esempio del genere dobbiamo farlo
molto rapidamente e in tempo reale
ci vuole lavoro, ma poi
quando si migliora la percezione può
fare cose interessanti e
divertente possiamo dire ok
proverà a mescolare la percezione e
conoscenza e per ciò che creeremo
abbiamo un compito che ci serve
valutare come le macchine
vieni a combinare i due è un
compito molto semplice diamo immagini
un’immagine e chiediamo alla macchina
descrivere la leggenda
ok , ecco qui dove ti mostro
due foto che ci servono come test e
queste sono le leggende che hanno scritto il
macchina ok è una macchina tutta da sola
non è stato scritto da un umano
ecc Cercando rivisto la sua tale lavoro
hanno due anni tutti sono stati
bluffato in realtà sono le leggende
estremamente corretto cioè
destra
la leggenda un uomo che naviga su un
l’onda è perfetta si incolla
perfettamente nella foto noi persone
Erano lì, le macchine sono
davvero estremamente forte e abile e
mostriamo un’altra immagine che non ha nulla
nemmeno gli stessi colori
niente affatto gli stessi oggetti e il
macchina capace di dire che lo è
di una giraffa di un lupo vicino a un albero
quando potremmo dire ah sì in realtà
le macchine hanno ancora il
senso abbastanza forte, ma dobbiamo fare
attenzione nella scienza, quindi possiamo
dare altre immagini qui sono altri
immagini che sono meno comuni e a
un po ‘più sorprendente e qui ci sono i
didascalie che sono state generate da
la macchina
così una volta che li abbiamo visti
le immagini le abbiamo dette ok ok c’è ancora
di lavoro è in effetti ciò che è
passare qui
sta realmente accadendo che la macchina sia
capace di rivelare oggetti che
Vi mostro una precoce è in grado di
fare abbastanza bene, ma noi
è in grado di farlo
così in effetti c’è nella foto giusta
la macchina rileverà ciò che il
settori l’aereo e lvt una strada
ok e dopo lei ci proverò
fare un’associazione di cosa si tratta
molto probabilmente quando vedo un aereo
una strada è bene là la strada è a
asfalto di un aeroporto così vuole
semplicemente dire
che un aereo e su internet riporta
sono tutte le altre foto con
pianifica è nel cielo così
quindi è molto semplice come l’altro
foto Rilevo una moto che rilevo
qualcosa che assomiglia
polvere di sabbia bene bene è semplice
è qualcuno che rotola su una spiaggia
è ovvio qui ed è effettivamente così
torni a ricordare entrambi
immagini che ho mostrato prima di kaki per
che ha funzionato
in effetti il ragionamento c’è
molto molto semplice nella foto con il
surfer in realtà la macchina era quella
sei un uomo in piedi su due lotti
va bene che è da lì
non cinquantamila possibilità
finalmente non so che tu possa essere
creativo ma la macchina non lo è
lei creativa così lei dirà bomba
un uomo che cammina su oit surf
bene qui e dopo che stiamo navigando
cosa su un’onda e non su cinquanta
mille opzioni quindi ecco un uomo
surf su un’onda e l’altra è
la stessa macchina rileva una giraffa
Il Giura vallesano è in piedi tutto il tempo
quindi è stato facile così eccolo qui
quel gerardo del gusto così era
facile e dopo vicino ad un albero
bene, in realtà è fortuna
un’immagine infuocata è ancora sufficiente
alto così non mangia pane io
significa una giraffa in piedi vicino a
albero e questo è in realtà li hanno così
infatti bisognava stare molto attenti
perché in effetti sono le macchine
in grado di rilevare oggetti e
fare associazioni molto semplici in
superficie in modo che proveranno a
cercare il più il fenomeno il
più comune ma non appena andiamo
in cose più inaspettate
le cose che in realtà hanno chiesto hanno avuto un
migliore conoscenza del mondo e
fenomeno in quel momento è
sempre il disastro
un altro metodo un altro compito
lo usiamo per importare
conoscenza del mondo fisico a
macchinario
anche questi compiti è molto semplice
per definire daremo l’inizio di a
video e inoltrare la macchina di
prevedere il resto e quindi sta cedendo
molto poco video a cui non siamo
fare film interi così mette dentro
ci serve specialmente è il
piccole clip è per cercare di vedere
che la macchina può avere un’idea
processi fisici
quando vedo che è un oggetto o è
l’oggetto quando mi muovo in quel modo
non farmi apparire
la parte posteriore, ma piuttosto da fare
apparire prima perché in effetti e il
aspetti dello spostamento e così è dentro
fai dietro di me
le prime immagini sono quando il
video che abbiamo dato e dal
quando è circondato in rosso è
quello che dopo dieci scali prevede m
achille va bene e quindi in realtà cosa
è molto interessante per noi è
che la macchina era totalmente capace
per predire che tutta la folla
della banda musicale stava per entrare nel
buona direzione seguendo il giusto ritmo
è stato davvero molto molto
imponente
tuttavia, c’è qualcosa che è
molto interessante per noi è quello
le trombe hanno la loro esplosione
non se vedi
quindi questo è effettivamente ciò che è
qualcosa che è ancora carino
di nuovo inaspettato e perché
questo è in realtà le macchine non hanno
dell’idea del buon senso di ciò che sono
gli oggetti di cui non hanno idea
cose che sono molto fisiche
quelli semplici che sono quelli del
conservazione di massa e così via
stanno solo cercando di farlo
pianifica un video che vada bene con questo
che ha visto e in realtà il problema di
le trombe sono quei trombettisti
ma ancora fatica a trovare
è esattamente nello stesso posto che può
la salita lì scende per girarla
e quindi rende la macchina quando a
prevedere la posizione della tromba
lei cercherà di trovare una specie di
a destra, medio, ben bene, a metà destra
appena fatto un grande blocco di specie john
o è possibile essere la tromba
mentre noi preferiamo
scegli una posizione anche se lo è
non moda e questo è qualcosa
che è molto complicato ma che anche
ci diamo dei lead di ricerca
estremamente interessante quindi qui
Ho parlato della percezione di cui ho parlato
conoscenza e là ora io
volevo parlare del terzo pilastro di cui
Ho parlato all’inizio questo è il
ragionando allora so che è un
un po ‘tardi forse, ma vado
ancora ti do degli esercizi
che sono abbastanza complicati, ecco qui
questi due ragazzi se quello che effettivamente abbiamo che abbiamo
design e nel nostro laboratorio per
prova a testare le funzionalità di
macchine di ragionamento qui d
esercizio estremamente duro, quindi io
leggi queste piccole storie e dai loro
le domande così ho nel
giardino prendo la palla
Paul va in cucina dov’è il
okay, palloncino ok , ecco qua
normalmente se nessuno dorme nel
il mondo dovrebbe distinguere il giardino
ma posso chiederti che l’ ho messo
persona scomoda ma
ma tuttavia è ancora così
questo metodo lì due anni fa questo
compito lì due anni fa le macchine
dire intelligente non ha avuto il
risolvere
okay, ecco perché ci vuole
stai attento
perché perché in effetti è molto
semplice ma in realtà lo devi ancora fare
essere in grado di mettere dentro
la frase coincide così spesso
fare storie che sono
forse un po ‘più lungo di quello
Devo trovare
le due frasi li inserisce
corrispondenza i telefoni da dentro
ovviamente fa nella frase che parliamo
del pallone non diamo giardino così lui
dovrebbe capire che io
stava raccogliendo il pallone così jean sta tenendo il
palloncino e che in effetti il ​​colpo del landreau è
trova la palla ma è la mia grande
buchi di persone per te è ovvio
è un bagno divertente per una macchina
non era affatto ovvio e in effetti
grazie alle sue piccole storie lo si è
in grado di aumentare la complessità questo
chiederemo alle macchine così noi
creerà sempre più storie
complicato e quindi chiederemo al
macchine per fare più ragionamenti
più complicato ed è molto
interessante per noi perché noi
arriva a testimoniare la capacità di
ragionamento senza dover affrontare
percezione delle cose di cui ho parlato
prima saranno trattati le cose di
conoscenza del mondo fisico che sono
problemi che sono complicati
anche noi arriviamo così trattati
modo isolato
possiamo fare storie che
finalmente sono anche molto felici ma
che sono già molto più complicati
anche per gli umani così da cucinare
e a nord del corridoio il bagno
è ad ovest della stanza l’ufficio
è ad est del corridoio e della cucina e
a sud della stanza come arrivare
l’ufficio nella stanza è qui è necessario
seguire il cliente non è qui
Non è molto parole su
tutto molto semplice ci sono quattro frasi
c’è una domanda è la risorsa il wii
già è più complicato in realtà
perché ed è qualcosa che
in realtà si unisce a ciò che facciamo nel
anche le macchine è una questione di
rappresentazione della conoscenza
non è assolutamente abituato a
rappresentano un piano sotto forma di
frasi come queste sono ancora
non è assolutamente naturale se io
darti il ​​piano così è
estremamente ovvio trovi tutto
via così come l’ufficio
agenti di colori ufficio in realtà
doveva passare attraverso il corridoio ma lui
doveva anche passare attraverso le cucine
ma hey è un sacco di voci lì e
così infatti possiamo anche testare
il modo in cui sono le macchine
in grado di elaborare i ragionamenti
ma anche per vedere quanto
come stiamo dando loro
informazioni quali sono
rappresentato che ha un impatto è questo
anche le macchine devono
rappresentare un piano da risolvere
questo compito o meno la notizia è
non hanno bisogno che arrivino
molto più facile di noi
il favore è che arriviamo molto meglio
lei
questi sono ma ovviamente questi compiti
sintetico queste storie ci serve
strumento per cercare di sviluppare
metodi
ovviamente non è quello che vogliamo
per fare alla fine abbiamo alcuni obiettivi
leggermente superiore e superiore
compiti utili alla fine, quindi ecco
l’idea è di cercare di estinguere
ad esempio questo lavoro vorrebbe quindi
risolvere il problema dall’inizio con il
ovviamente la pizza ma ce ne sono altri
compiti cioè, ad esempio
puoi dirmi che faremo la stessa cosa
domande e risposte tranne che lì
la domanda vuole più complicata e quindi
è un passo è un testo, ma stiamo andando
per dire questo per cercare di rispondere
in tutto ma chi paga ok così è
ancora più tempo ci vuole più di
tempo un collegamento e daremo al
macchina solo articoli di wikipedia
quel dito si collega e si è trovato il
la risposta è così per esempio io
chiesto alla nostra macchina per
si sta sviluppando in questo momento
domanda che torna stasera come
fu chiamato torre nell’antichità e poi
tutti lo sanno, ovviamente io
Suppongo che non non voglio chiedere e
Lo sapevo anche io, ovviamente
lo dirò comunque e questo è per
bene mi dichiaro lì così e così dentro
fare quello che vorremmo è che il
quindi qui puoi leggerti m
inoltre, è ancora difficile
per pronunciare giovedì
è il prefetto di casa di strada di
aspetta per il momento, quindi in ogni caso questo
quello che vorremmo in questo caso è quello
la macchina è in grado di estendere il
questione di andare a leggere gli articoli di
trova l’articolo giusto che non lo è
necessariamente quello della città delle torri
inoltre in questo caso poi in
l’articolo per trovare la frase che se il
in primo luogo è in realtà di leggere la frase
di una frase che dice Caesar autonomo e
il nome della città dell’impero caldo che ha
ha preceduto il giro oltre così le persone
per discutere del fatto che in realtà
in realtà era girata o no
sempre altrove andrò lì
in esso ma in ogni caso io cosa
Sono interessato alla macchina
passa compiti sintetici che abbiamo
fatto per un’estensione che fa appello
processo quasi a mano, ma a
molto più grande e uno può
prova a vedere come le macchine
sono in grado di comportarsi
Il ragazzo era a dire il vero la macchina
rispose Gregory
qual era il nome della torre
l’antichità non stiamo nascondendo nulla e
è il motivo, ma è interessante
perché perché in effetti ho una formula
con la domanda è quello che è stato chiamato e
è stato effettivamente chiamato è spesso associato
in festa chiama persone e non
posti necessariamente dove vicino il
macchina pronta a provare piuttosto
prova a cercare una persona in più
che un posto così è ancora un errore
puoi dire un po ‘
importante
ma improvvisamente preferirà cercare
una personalità importante connessa a
girare nell’antichità e in effetti lei
Gregory mi ha detto per la pagina del santo
Gregorio di torri che non era
corretto
quindi ecco in realtà in questo
presentazione volevo mostrarti un
un panorama già 2 dove siamo
funzionario dell’intelligence su
compiti che sono davvero fondamentali
percezione dell’acquisizione di
La conoscenza è il ragionamento
come possiamo provare
combinarli per provare a fare
compiti sempre più complessi
mostra anche i limiti di
i metodi attuali i suoi limiti che sono
è importante per noi provare
determinare dove è il confine e dove
possiamo lavorare per
prova a migliorare ed è così che io
ti ho detto che stava lavorando a
facebook all’inizio sto ancora andando
finiscono per mostrarti un’app
su cui lavoriamo in realtà
applicazione vi diretta
mostrato all’inizio così che in realtà
è quello coinvolto che è dove è
interfaccia di news feed di Facebook
ma come in realtà e funziona è
mirato per il tempo non visibile
precisamente è accessibile per
visivamente e in effetti v’è un
era il modo
è tardi e in ogni caso c’è un
interfaccia che consente effettivamente una voce
leggere tutto quello che succede sul filo
notizie e il problema che si pone
è che ovviamente il flash era
pieno di foto e che le foto
non posso leggerli
quindi in effetti ciò che abbiamo sviluppato
continuiamo con la sviluppata
squadre di facebook
in realtà è in grado di farlo
genera automaticamente
descrizioni che possono essere anche lui
che dà un’idea migliore
quindi per ora cosa è
è schierato negli Stati Uniti sta andando
per dire che in effetti l’immagine può contenere
delle arti del cielo e andando fuori
quindi ci fermiamo con quello che siamo piuttosto
in un primo momento ciò che ho dimostrato è
che abbiamo una descrizione piuttosto limitata e
in effetti noi semplicemente con il
metodi che vorremmo
genera una descrizione come questa
lì questa immagine contiene un cielo blu
bellissima circondata da enormi sequoie
è stato preso in basso angolo è dentro
è la vera immagine qui e in
è davvero allineato con cosa
Te l’ho detto e adesso può farlo
sembra dare alle persone che lo sono
non è in grado di accedere alle foto a
davvero una rappresentazione migliore
di quello che sta succedendo sul filetto cotto e
grazie mólto
[Applausi]
Please follow and like us:

Be First to Comment

Lascia un commento