AI Endpoints : OVHcloud comme alternative souveraine aux GAFAM

A presentation at AI Days in June 2024 in Brest, France by Eléa PETTON

Slide 1

Slide 1

AI ENDPOINTS Eléa Petton

Slide 2

Slide 2

PRÉSENTATION Eléa Petton Machine Learning Engineer OVHcloud AI Solutions Team 02 @EleaPetton eleapttn Eléa PETTON

Slide 3

Slide 3

OVHcloud en quelques mots 03

Slide 4

Slide 4

OVHcloud UNE PRÉSENCE MONDIALE 04

Slide 5

Slide 5

À PROPOS D‘OVHcloud OVHcloud est un fournisseur mondial de services de cloud computing spécialisé dans les solutions performantes et rentables pour mieux gérer, sécuriser et faire évoluer les données. Private Cloud Public Cloud PaaS portfolio 05 Bare Metal Web Cloud

Slide 6

Slide 6

À PROPOS D‘OVHcloud OVHcloud est un fournisseur mondial de services de cloud computing spécialisé dans les solutions performantes et rentables pour mieux gérer, sécuriser et faire évoluer les données. Public Cloud PaaS portfolio 05 AI Solutions

Slide 7

Slide 7

OVHcloud DATA & IA 06

Slide 8

Slide 8

AI SOLUTIONS et sa gamme complète de GPUs 07

Slide 9

Slide 9

OVHcloud AI SOLUTIONS 08 AI NOTEBOOKS AI TRAINING AI DEPLOY Notebook As A Service Environnement prépackagé Persistence du workspace Container As A Service Entraînement de modèles Facturation à la minute Container As A Service Inférence de modèles Haute disponibilité - autoscaling

Slide 10

Slide 10

OVHcloud ET SA GAMME DE GPUs 09 H100 A100 L40S extreme fine-tuning and training, demanding model inference, LLM projects ALREADY AVAILABLE V100S L4 deep-learning training or inference, generative AI, LLM projects advanced training and inference of AI models enhanced AI capabilities workloads A100 - ALREADY AVAILABLE L40S - ALREADY AVAILABLE ALREADY AVAILABLE ALREADY AVAILABLE

Slide 11

Slide 11

OVHcloud AI SOLUTIONS AI NOTEBOOKS AI TRAINING AI DEPLOY AI ENDPOINTS Notebook As A Service Environnement prépackagé Persistence du workspace Container As A Service Entraînement de modèles Facturation à la minute Container As A Service Inférence de modèles Haute disponibilité - autoscaling AI As A Service APIs d’IA prêtes à l’emploi Solution serverless, simple, sécurisée NEW - alpha 10

Slide 12

Slide 12

AI ENDPOINTS “seamless AI with strong privacy” 11

Slide 13

Slide 13

OVHcloud AI ENDPOINTS 12

Slide 14

Slide 14

DÉMOCRATISER L‘IA “ Améliorez vos applications avec AI Endpoints ” CONÇU POUR LES DÉVELOPPEURS ENGAGÉ ENVERS LA CONFIDENTIALITÉ LISTE ORGANISÉE DE MODÈLES D’IA TECHNOLOGIE SANS VERROUILLAGE avec une documentation complète, des API simples et des exemples de code nous ne stockons pas et ne partageons pas vos données pendant ou après l’utilisation du modèle mise à disposition des derniers modèles, optimisés pour des performances et une précision maximales grâce à notre transparence sur les modèles d’IA utilisés, les clients peuvent mettre en œuvre ces modèles sur leur propre infrastructure ou sur d’autres services cloud 13

Slide 15

Slide 15

AI ENDPOINTS et son catalogue de modèles 14

Slide 16

Slide 16

CATALOGUE DE MODÈLES “ Une plate-forme serverless donnant accès à des modèles d’IA avancés, comme les LLM, le NLP, la traduction, la reconnaissance vocale ou encore la reconnaissance d’images. ” 15 ASSISTANT AUDIO ANALYSIS COMPUTER VISION EMBEDDINGS NLP TRANSLATION

Slide 17

Slide 17

COMMENT UTILISER CES ENDPOINTS ? PARCOURIR le catalogue d’AI Endpoints INTÉGRER les call API dans son code TESTER le playground depuis l’interface utilisateur 16 PROFITER de sa solution à la pointe de la technologie PERFECTIONNER son application avec des API d’IA optimisées

Slide 18

Slide 18

DEMO TIME “AI Endpoints in action” 17

Slide 19

Slide 19

DEMO 1 - USAGE DE BASE “ Un unique Endpoint en tant que réponse à votre besoin ! ” QUERY 18 AI ENDPOINT RESPONSE

Slide 20

Slide 20

DEMO 1 - USAGE DE BASE “ Un unique Endpoint en tant que réponse à votre besoin ! ” INTÉGREZ UN ENDPOINT LLM À VOTRE SOLUTION QUERY 18 AI ENDPOINT LLM RESPONSE

Slide 21

Slide 21

“INTÉGREZ SIMPLEMENT UN AI ENDPOINT À VOTRE SOLUTION EN QUELQUES LIGNES DE CODE” 19

Slide 22

Slide 22

DEMO 2 - COMBINER LES ENDPOINTS À L’INFINI “ Speech-To-Text, LLM, Translation, Text-To-Speech… Comment assembler ces Endpoints pour obtenir une solution complète et adaptée à mon besoin ? ” QUERY 20 AI ENDPOINT N°1 AI ENDPOINT N°2 RESPONSE

Slide 23

Slide 23

DEMO 2 - COMBINER LES ENDPOINTS À L’INFINI “ Speech-To-Text, LLM, Translation, Text-To-Speech… Comment assembler ces Endpoints pour obtenir une solution complète et adaptée à mon besoin ? ” QUERY 20 AI ENDPOINT N°1 AI ENDPOINT N°2 AI ENDPOINT N°3 RESPONSE

Slide 24

Slide 24

DEMO 2 - COMBINER LES ENDPOINTS À L’INFINI “ Speech-To-Text, LLM, Translation, Text-To-Speech… Comment assembler ces Endpoints pour obtenir une solution complète et adaptée à mon besoin ? ” INTERROGEZ UN LLM VERBALEMENT GRÂCE AU SPEECH AI QUERY 20 AI ENDPOINT ASR AI ENDPOINT LLM AI ENDPOINT TTS RESPONSE

Slide 25

Slide 25

“ASSEMBLEZ CES AI ENDPOINTS ENTRE EUX POUR UNE SOLUTION INNOVANTE ET SUR-MESURE” 21

Slide 26

Slide 26

DEMO 3 - UN CHATBOT INCOLLABLE SUR VOS DONNÉES “ Utiliser AI Endpoints et LangChain pour créer son propre chatbot, c‘est possible ! ” AI ENDPOINT EMBEDDINGS VECTOR DB RETRIEVED CONTEXTS QUERY AI ENDPOINT LLM RESPONSE 22

Slide 27

Slide 27

“CRÉEZ VOTRE PROPRE RAG AVEC AI ENDPOINTS ET LANGCHAIN POUR UN CHATBOT PERSONNALISÉ” 23

Slide 28

Slide 28

CONCLUSION que retenir de AI Endpoints ? 24

Slide 29

Slide 29

CONCLUSION Que retenir de la solution AI Endpoints ? 25 CONFIDENTIALITÉ Avec AI Endpoints nous ne stockons pas et ne partageons pas vos données pendant ou après l’utilisation du modèle. TRANSPARENCE Grâce à la transparence d’AI Endpoints sur les modèles d’IA utilisés, les clients peuvent mettre en œuvre ces modèles sur leur propre infrastructure ou sur d’autres services cloud. ACCESSIBILITÉ AI Endpoints est conçu dans le but de simplifier et de démocratiser l’IA et permet aux développeurs de tous niveaux d’utiliser des APIs de pointe, sans aucune expertise nécessaire. IA OPTIMISÉES AI Endpoints met à disposition les derniers modèles les plus puissants, optimisés par les ingénieurs en IA d’OVHcloud pour des performances et une précision maximales.

Slide 30

Slide 30

CONCLUSION Que retenir de la solution AI Endpoints ? 26 TESTEZ PAR VOUS MÊME !

Slide 31

Slide 31

MERCI !

Slide 32

Slide 32

CONTACTEZ-NOUS ! Informations https://www.ovhcloud.com/ OVHcloud elea.petton@ovhcloud.com @OVHcloud