Differential Privacy in 30 seconds

What you'll learn

• Differential privacy is a technique that allows large language models to be trained without sensitive training data becoming permanently stored in model weights
• VaultGemma is the first open-weight LLM trained from scratch with differential privacy by Google Research
• Differential privacy prevents rarely seen secrets from training data, such as phone numbers or addresses, from being permanently retained in the model

Frequently asked questions

Topics

In this video

Read next

• OpenAI mikt op lang draaiende agents met overname van Ona

  OpenAI neemt Ona over, voorheen bekend als Gitpod, een startup die AI-agents laat draaien in cloud sandboxes. De overname versterkt Codex en stelt OpenAI in staat agents taken te laten uitvoeren die uren of dagen in beslag nemen.

• Google Research publiceert TurboQuant, een compressiealgoritme voor grote taalmodellen

  Google Research heeft TurboQuant gepubliceerd, een algoritme dat de KV-cache van grote taalmodellen comprimeert tot ongeveer 3 bits. Volgens de onderzoekers leidt dit tot zes keer minder geheugengebruik en acht keer hogere doorvoer op dezelfde GPU-hardware, zonder nauwkeurigheidsverlies.

• Dexter Energy helpt energiebedrijven kortetermijnmarkten beter benutten met AI-software

  Dexter Energy, een Amsterdams softwarebedrijf opgericht in 2017, combineert weerdata, marktinformatie en activagegevens tot prognoses en handelssignalen voor producenten van zonne- en windenergie.

• OpenAI introduceert ChatGPT Work, een AI-agent die taken zelfstandig afrondt

  OpenAI heeft ChatGPT Work gelanceerd, een AI-agent binnen ChatGPT die complexe projecten zelfstandig uitvoert en eindproducten oplevert zoals spreadsheets, presentaties en webapplicaties. De lancering gaat gepaard met het samenvoegen van de Codex-app in de ChatGPT-desktopapp en de introductie van de GPT-5.6-modelreeks.

• OpenAI lanceert ChatGPT Work, agent voor workflows in Google Drive en Slack

  OpenAI presenteert ChatGPT Work, een agentgebaseerd product met GPT-5.6 dat zelfstandig complexe workflows over meerdere applicaties kan afhandelen.

• Google-AI-team ondergaat reorganisatie met vertrekkende toptalenten

  Meerdere vooraanstaande leden van Google's AI-team hebben deze week nieuwe functies gekregen, waarbij sommigen Google verlaten.

Description from the channel

Full video: 🎥 https://youtu.be/UwX5zzjwb_g Large language models often memorize what they see — even a single phone number or address can stick forever in their weights. Google’s new VaultGemma changes that: it’s the first open-weight LLM trained from scratch with differential privacy, meaning secrets seen seldomly during training leaves no trace. 👉 In this video, we explain Differential Privacy through the concrete example of VaultGemma — how it works, why it matters, and what it means for the future of trustworthy AI. AI Coffee Break Merch! 🛍️ https://aicoffeebreak.creator-spring.com/ Thanks to our Patrons who support us in Tier 2, 3, 4: 🙏 Vignesh Valliappan, Ivan Janov, Sunny Dhiana, Andy Ma ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀ 🔥 Optionally, pay us a coffee to help with our Coffee Bean production! ☕ Patreon: https://www.patreon.com/AICoffeeBreak Ko-fi: https://ko-fi.com/aicoffeebreak Join this channel as a Bean Member to get access to perks: https://www.youtube.com/channel/UCobqgqE4i5Kf7wrxRxhToQA/join ▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀▀ 🔗 Links: AICoffeeBreakQuiz: https://www.youtube.com/c/AICoffeeBreak/community Twitter / X: https://twitter.com/AICoffeeBreak LinkedIn: https://www.linkedin.com/in/letitia-parcalabescu/ Threads: https://www.threads.net/@ai.coffee.break Bluesky: https://bsky.app/profile/aicoffeebreak.bsky.social Reddit: https://www.reddit.com/r/AICoffeeBreak/ YouTube: https://www.youtube.com/AICoffeeBreak Substack: https://aicoffeebreakwl.substack.com/ Web: https://explanationmark.de/letitia https://aicoffeebreak.com #AICoffeeBreak #MsCoffeeBean #MachineLearning #AI #research​ Video editing: Nils Trost