Testes A/B em sistemas de AI e ML (convidado: Jose Carlos Santos)

Published: Sept. 9, 2020, 11:19 a.m.

b'

O epis\\xf3dio de hoje aborda um tema muito relevante para qualquer projeto cont\\xednuo de AI. Como fazer valida\\xe7\\xf5es dos nossos modelos seguindo um modelo de teste A/B? Como saber se as altera\\xe7\\xf5es que estamos a fazer est\\xe3o a ter impacto real e esperado no resultado que queremos medir? Este problema torna-se ainda mais importante quando temos um ambiente produtivo muito complexo, com m\\xfaltiplas equipas e scopes que podem contaminar a valida\\xe7\\xe3o do que queremos fazer. E para partilhar connosco a sua vis\\xe3o e experi\\xeancia no tema, temos como convidado o Jos\\xe9 Carlos Santos, Principal Software Engineer na equipa da Microsoft do produto Bing com uma vasta experi\\xeancia em implementa\\xe7\\xe3o e defini\\xe7\\xe3o de testes A/B e em como medir o impacto das mudan\\xe7as em modelos de ML/AI.

\\n

Links IA News:

\\n

A team of researchers from Stanford University simulating the annual tournament with the help of artificial intelligence - https://cs.stanford.edu/~haotianz/research/vid2player/

\\n

AI tool detects child abuse images with 99% accuracy - https://artificialintelligence-news.com/2020/07/31/ai-tool-detect-child-abuse-images-accuracy/

\\n

Microsoft is fighting deepfakes ahead of the 2020 US election - https://www.cnet.com/news/microsoft-is-fighting-deepfakes-ahead-of-the-2020-us-election/

\\n

http://www.spotdeepfakes.org

'