Was AI uns gebracht hat und wohin - The Billion Parameter Club 2/6

88 Aufrufe
Published
In Teil 2 diskutieren Oliver Groth und Peter Hense die "Heilige Dreifaltigkeit des Deep Learning": Big Data, Big Networks und Big Computer. Doch nicht nur quantitative Hürden gilt es in der KI-Forschung zu meistern, vor allem qualitative Probleme offenbaren sich, wenn unbesehen Datensätze aus der Online-Vorurteilswelt gegenüber marginalisierten Menschen einbezogen werden.


Peter Hense und Oliver Groth stellen in der sechsteiligen Kurzserie "Was AI uns gebracht hat und wohin" ein wechselseitiges Verständnis zwischen Recht und Technologie der Gegenwart und Zukunft her: https://www.youtube.com/watch?v=PY_6QtbVVl4&list=PLTGoOEeXpiZ_JtygeQqaqgPLzHr6YviNB

Peter Hense ist IT- und Datenschutzexperte, Rechtsanwalt und Partner bei Spirit Legal. https://spiritlegal.com


Oliver Groth ist Doktorand in Computer Vision und Robotik an der Universität Oxford. https://ogroth.github.io/

Show Notes:

GPT-2:
https://openai.com/blog/gpt-2-1-5b-release/

GPT-3:
https://arxiv.org/pdf/2005.14165.pdf

Wu Dao 2.0

https://mixed.de/sprach-ki-aus-china-wu-dao-2-0-ist-zehnmal-groesser-als-gpt-3/

Perceiver (Universal-Transformer für mehrere Modalitäten):

https://arxiv.org/pdf/2103.03206.pdf


AI Scaling Laws:

https://arxiv.org/pdf/2001.08361.pdf

CO2-Bilanz von Transformer-Modellen: Strubell et al, 2019
https://arxiv.org/pdf/1906.02243.pdf



Data Sheets: Gebru et al, 2018
https://arxiv.org/pdf/1803.09010.pdf



Model Cards: Mitchell et al, 2018
https://arxiv.org/pdf/1810.03993.pdf



CO2-Calculator:
https://mlco2.github.io/impact/#compute
Kategorien
Autos
Kommentare deaktiviert.