Vue normale

Il y a de nouveaux articles disponibles, cliquez pour rafraîchir la page.
À partir d’avant-hierFlux principal
  • ✇LEBIGDATA.FR
  • Installer votre ChatGPT local non-censuré : le guide GPT4ALL
    Marre de la censure de ChatGPT et des autres IA ? Découvrez comment installer votre propre chatbot local, non censuré, entraîné à partir de vos propres données ! Suivez le guide !  Les chatbots IA comme ChatGPT sont des outils très utiles pour de nombreuses personnes ! Depuis son lancement en 2022, le service d’OpenAI a réuni plus de 180 millions d’utilisateurs.  Cependant, ils comportent des restrictions qui les rendent difficiles à utiliser dans certains contextes. C’est tout particulièr

Installer votre ChatGPT local non-censuré : le guide GPT4ALL

Par : Bastien L.
11 octobre 2024 à 19:19

Marre de la censure de et des autres IA ? Découvrez comment installer votre propre chatbot local, non censuré, entraîné à partir de vos propres données ! Suivez le guide ! 

Les chatbots IA comme ChatGPT sont des outils très utiles pour de nombreuses personnes ! Depuis son lancement en 2022, le service d’ a réuni plus de 180 millions d’utilisateurs

Cependant, ils comportent des restrictions qui les rendent difficiles à utiliser dans certains contextes. C’est tout particulièrement le cas pour les modèles gratuits. 

En guise d’alternative, saviez-vous que vous pouvez installer un chatbot sans aucune censure sur votre machine locale ? Voici comment procéder pour profiter d’une IA totalement libérée ! 

GPT4All : une version locale de ChatGPT 

En utilisant ChatGPT, vous vous êtes peut-être rendu compte que ses réponses sur certains sujets sont limitées

Toutefois, le projet GitHub GPT4All permet d’exécuter les LLM de façon privée sur votre machine locale. 

Vos données resteront privées, et vous n’aurez donc pas à vous inquiéter d’une collecte par OpenAI. Les réponses ne sont pas filtrées selon des règles de censure, contrairement à celles de ChatGPT

Vous pouvez utiliser votre LLM local avec des documents personnels, afin de profiter de réponses sur mesure basées sur votre façon d’écrire et de penser. 

Autre avantage : même si vous êtes déconnecté, votre LLM est toujours sur votre machine locale, prêt à être utilisé pour n’importe quel besoin. 

Alors, vous êtes convaincu ? Voici comment installer votre propre chatbot IA sur votre PC, étape par étape ! 

Télécharger et installer GPT4All 

Pour commencer, téléchargez le package GPT4All depuis ce site de démarrage rapide. Vous aurez besoin d’environ 1GB d’espace de stockage pour l’application de base, sans compter l’espace requis pour les modèles. 

Après avoir choisi l’emplacement d’installation, attendez que tous les fichiers soient téléchargés et lancez l’installation. 

Grâce à la façon dont Nomic a développé l’application, l’installation fonctionne sur la plupart des systèmes d’exploitation.

Les distributions sont disponibles pour Windows, Linux et macOS. Vous devez uniquement prêter attention à disposer de suffisamment d’espace. 

Exécuter GPT4All sur votre machine 

Après avoir complété l’installation, il vous suffit de lancer GPT4All comme n’importe quel logiciel. Plusieurs options vous sont proposées. 

Vous pouvez le nourrir avec des documents locaux ou discuter avec le modèle embarqué. Sur le côté gauche de l’écran, vous pouvez accéder à l’historique de conversations  et vérifier les documents locaux utilisés pour mettre à jour le chatbot. 

L’onglet le plus important est celui des modèles. Par défaut, aucun modèle n’est installé, mais vous réaliserez rapidement que vous avez accès à une large variété de modèles que vous pouvez télécharger et installer gratuitement… 

Obtenir de nouveaux modèles pour votre chatbot local 

Situé en haut à gauche de l’écran, l’onglet des modèles ouvre une fenêtre permettant de parcourir les différents modèles. 

Chacun d’entre eux a une description indiquant ce que le modèle offre, et pour quel usage il est adapté. 

Elle donne également une idée de l’espace dont vous aurez besoin pour l’installation, allant de 2GB à 7GB. 

Mieux vaut éviter -4. Celui-ci requiert une clé d’accès API payante. La version 3.5 est gratuite, mais ses performances sont limitées. 

Avec GPT4All, vous pouvez exploiter l’accès API, mais ceci requiert que le modèle envoie des données de prompt à OpenAI. 

Certes, les documents locaux ne seront accessibles qu’à vous et OpenAI affirme que les données collectées via l’API ne seront pas utilisées pour entraîner son LLM… mais peut-on vraiment se fier à cette promesse

Il existe heureusement de nombreuses alternatives. Pour un chatbot totalement hors-ligne, je vous recommande plutôt d’utiliser le modèle français Mistral

Celui-ci ne collecte pas vos données, et vous donnera généralement des réponses de haute qualité. C’est également le cas de Meta LLama 3 Instruct et Orca. Selon vos préférences, il peut s’agir de meilleures options que ChatGPT. 

La meilleure façon de choisir est de mener vos propres expériences, afin de déterminer quel modèle correspond à vos besoins. Pensez simplement à supprimer les modèles entre chaque pour ne pas encombrer inutilement le stockage de votre machine… 

Configurer l’accès pour les documents locaux 

Si vous prévoyez d’utiliser votre chatbot local pour la création de documents ou pour vous aider sur d’autres tâches, vous devez d’abord configurer une collection de documents

Avec GPT4All, le processus est simplifié. Placez tous les documents auxquels vous voulez que le modèle accède dans un dossier facile d’accès, et pointez le moteur vers ce dossier en utilisant le bouton « Ajouter Collection »

Le temps de traitement peut varier selon le volume de documents du dossier, mais devrait être relativement court. 

Après avoir ajouté votre dossier de document local, votre chatbot sera capable d’accéder et de lire les documents et de vous conseiller sur n’importe quelle thématique

C’est particulièrement utile si vous voulez apprendre à propos d’un sujet particulier, sans avoir le temps de vous plonger dans de nombreux ouvrages.  

Il vous suffit d’interroger le robot avec des questions précises, et vous recevrez en réponse les informations dont vous avez besoin ! 

Les meilleures astuces pour bien utiliser votre chatbot 

Pour exploiter tout le potentiel de votre chatbot, il y a plusieurs choses à savoir si vous êtes un débutant. 

Tout d’abord, notez qu’un minimum de 8GB de RAM est nécessaire pour faire tourner GPT4All. Avec moins de mémoire vive, le chatbot pourra difficilement tourner. 

Par ailleurs, sachez que vous pouvez construire des collections pour différentes catégories de documents. Imaginons par exemple que vous avez un ensemble de documents que vous utilisez pour un projet occasionnel, et l’autre pour un usage professionnel.

Announcing GPT4All 3.4 💫

– Now supporting 3B and 1B parameter models comparable in performance to Llama 13B!
– Microsoft Office Data Integrations
– Advanced Excel Support
– Local RAG performance improvements

LLaMa 3.2 1B running at 100 tok/second 🔥 pic.twitter.com/7B4hhcogoR

— Nomic AI (@nomic_ai) October 9, 2024

Dans ce cas de figure, le chatbot peut développer deux styles de réponses différents basés sur vos besoins. Chaque collection peut être traitée individuellement pour éviter le chevauchement. 

Rappelez vous aussi de garder vos modèles à jour. Vérifiez régulièrement si des mises à jour sont disponibles, et lisez les notes pour découvrir les éventuelles nouveautés. 

Si vous utilisez un nouveau modèle, vous devrez à nouveau traiter vos documents en l’utilisant. Il n’y a pas de rétrocompatibilité avec les anciennes versions. 

Les chatbots peuvent être de puissants outils pour apprendre rapidement ou pour vos projets créatifs comme l’écriture d’un roman. Toutefois, il ne s’agit en définitive que d’outils et leurs performances dépendant des données sur lesquels ils se basent et des modèles qui leur servent de moteur… 

Avoir un chatbot local vous donne le pouvoir de contrôler les données auquel le robot a accès et à partir desquelles il apprend. Cela permet aussi d’obtenir des réponses plus spécifiques. C’est donc un parfait assistant ! 

Allez-vous installer votre chatbot local ? Pour quel cas d’usage ? Quel modèle allez-vous choisir ? Partagez votre avis en commentaire !

Cet article Installer votre ChatGPT local non-censuré : le guide GPT4ALL a été publié sur LEBIGDATA.FR.

  • ✇Intelligence artificielle
  • LocalAI – L’alternative open source puissante à OpenAI
    Aujourd’hui, j’aimerais vous présenter LocalAI, une alternative open source à OpenAI. En tout cas, c’est comme ça que le créateur du projet le présente. Il s’agit d’une solution idéale pour tous ceux qui cherchent une API REST compatible avec les spécifications de l’API OpenAI pour l’inférence locale. Grâce à LocalAI, vous pouvez exécuter des modèles linguistiques, générer des images, de l’audio et bien d’autres choses encore, localement ou sur site avec du matériel grand public, et ce, sa

LocalAI – L’alternative open source puissante à OpenAI

Par : Korben
19 mars 2024 à 09:00

Aujourd’hui, j’aimerais vous présenter LocalAI, une alternative open source à OpenAI. En tout cas, c’est comme ça que le créateur du projet le présente. Il s’agit d’une solution idéale pour tous ceux qui cherchent une API REST compatible avec les spécifications de l’API OpenAI pour l’inférence locale.

Grâce à LocalAI, vous pouvez exécuter des modèles linguistiques, générer des images, de l’audio et bien d’autres choses encore, localement ou sur site avec du matériel grand public, et ce, sans avoir besoin d’un GPU ! Le projet a pour principal objectif de rendre l’IA accessible à tous.

Pour résumer, voici les principales caractéristiques de LocalAI :

  • Une API REST locale, alternative à OpenAI. Comme ça, vous gardez bien au chaud vos propres données.
  • Pas besoin de GPU. Pas besoin d’accès internet non plus. Toutefois, l’accélération GPU est possible en option.
  • Prise en charge de plusieurs modèles.
  • Dès qu’ils sont chargés une première fois, les modèles restent en mémoire pour une inférence plus rapide.
  • N’utilise pas de shell, mais des liaisons directes pour une inférence plus rapide et de meilleures performances.

En termes de fonctionnalités, LocalAI offre une large gamme d’options, parmi lesquelles :

  • La génération de texte avec les modèles GPT (comme llama.cpp ou gpt4all.cpp).
  • La conversion de texte en audio.
  • La transcription audio en texte avec whisper.cpp.
  • La génération d’images avec Stable Diffusion.
  • Les dernières fonctionnalités d’OpenAI récemment ajoutées comme l’API Vision par exemple.
  • La génération d’embeddings pour les bases de données vectorielles.
  • Les grammaires contraintes.
  • Le téléchargement de modèles directement à partir de Huggingface.

LocalAI est bien sûr un projet communautaire donc n’hésitez pas si vous souhaitez vous impliquer !

Pour commencer rapidement avec LocalAI, vous pouvez consulter leur guide Getting Started qui décrit les différentes méthodes d’installation et les exigences matérielles ou aller consulter les guides de la communauté. Je vous ferais aussi probablement un tutoriel prochainement si mon emploi du temps me le permet.

LocalAI est disponible sous forme d’image conteneur et de binaire, compatible avec divers moteurs de conteneurs tels que Docker, Podman et Kubernetes. Les images de conteneurs sont publiées sur quay.io et Docker Hub, et les binaires peuvent être téléchargés à partir de GitHub.

Concernant les exigences matérielles, ça varie en fonction de la taille du modèle et de la méthode de quantification utilisée mais pour choper quelques repères de performance avec différents backends, comme llama.cpp, vous pouvez consulter ce lien.

Maintenant pour en savoir plus, vous pouvez explorer le site localai.io. Vous y trouverez de nombreuses informations et des exemples d’utilisation pour vous aider à tirer le meilleur parti de LocalAI.

Merci à Lorenper

Outil IA : Forge, API, services temps procésseurs, serveur less, IA en local

# Replicate : plateforme de modèles IA
https://www.premieroctet.com/blog/premiers-pas-avec-replicate (exemple caméra)
https://youtu.be/OjdIgxvZVYw?si=5Fcx7acZQKvvZw_c&t=561 (exemple création vidéo + explications seveurless + nocode)
https://replicate.com/explore

# Hugging Face : Centrale dans l’IA open source, car elle propose un service similaire à GitHub
- partage du codes, des données plus les modèles déjà entraînés.
https://www.leparisien.fr/high-tech/intelligence-artificielle-cest-quoi-hugging-face-la-pepite-francaise-valorisee-a-45-milliards-deuros-25-08-2023-QSZZY7WJ2RHRBDRUQJNEQDXW2M.php
https://www.youtube.com/watch?v=uD-9aHFII8A (exemple avec Stable diffusion + colab)
https://huggingface.co/

# Google Colab
https://www.youtube.com/watch?v=TpwNlP1nLag (code en python)
https://colab.research.google.com/notebooks/intro.ipynb
https://colab.research.google.com/


## En local

- LM Studio  LM Studio fonctionne sous macOS, Windows et Linux, permet  de télécharger des LLMs (Large Language Models) et de les faire tourner en local. https://korben.info/lm-studio-local-llms-integration-code-usage.html

- Ollama permet de charger des modèles LLM et de les faire fonctionner en fond de tâche sur son ordinateur.
https://klu.ai/glossary/ollama-fr
https://www.geeek.org/tutoriel-installation-llama-2-et-code-llama/
https://ollama.com/
https://github.com/ollama/ollama?tab=readme-ov-file&ref=geeek.org#community-integrations

- onprem est conçu pour les développeurs Python pour faire tourner des models LLM :  https://www.bortzmeyer.org/onprem-debut.html

- GPT4All  modèle d’intelligence avec mention ggml, alors compatible   https://zonetuto.fr/intelligence-artificielle/ajouter-un-modele-au-format-ggml-dans-gpt4all-sur-linux-ubuntu/
http://actu.azqs.com/geeknik/p/i/?search=+GPT4All

- Stable Diffusion WebUI (SDXL  Stable Cascade) https://zonetuto.fr/intelligence-artificielle/installer-stable-diffusion-webui-en-local-sur-ubuntu-debian/

- Jam IA https://www.youtube.com/watch?v=iVYP2lyreAA
https://jan.ai/ : opensource

- Pinoccio / Pinokio : l'Installation d'Outils d'Intelligence Artificielle
https://proguideah.com/lordinateur-virtuel-pinokio-ai-vous-permet-dinstaller-dexecuter-et-dautomatiser-nimporte-quelle-application-dia-en-un-seul-clic-28524/
https://www.youtube.com/watch?v=EChic1SH2IY
https://pinokio.computer/
https://github.com/pinokiocomputer/pinokio

- developpement de plugin en local via plusieurs ia
https://floneum.com/
https://www.aixploria.com/floneum-ai-workflows/
https://fr.wikipedia.org/wiki/WebAssembly

- Edge computiing (local et frugal)
http://liens.azqs.com/GeekNik/?searchtags=ia+edge-computing
http://actu.azqs.com/geeknik/p/i/?a=normal&get=t_17
http://liens.azqs.com/GeekNik/?searchtags=ia+programmation
(Permalink)
  • ✇Intelligence artificielle
  • Ajouter un modèle au format ggml dans GPT4All sur Linux Ubuntu
    Ce n’est pas la première fois que je vous parle de GPT4All et pour cause, c’est un logiciel libre totalement gratuit et disponible GitHub qui rencontre actuellement un franc succès. En quelques mots, il vous permet d’avoir une interface graphique qui s’inspire et qui ressemble beaucoup à ce que vous connaissez avec ChatGPT. Sauf qu’avec ... Lire la suite L’article Ajouter un modèle au format ggml dans GPT4All sur Linux Ubuntu est apparu en premier sur ZoneTuto.

Ajouter un modèle au format ggml dans GPT4All sur Linux Ubuntu

Par : MrTuto
15 août 2023 à 12:03

Ce n’est pas la première fois que je vous parle de GPT4All et pour cause, c’est un logiciel libre totalement gratuit et disponible GitHub qui rencontre actuellement un franc succès. En quelques mots, il vous permet d’avoir une interface graphique qui s’inspire et qui ressemble beaucoup à ce que vous connaissez avec ChatGPT. Sauf qu’avec ... Lire la suite

L’article Ajouter un modèle au format ggml dans GPT4All sur Linux Ubuntu est apparu en premier sur ZoneTuto.

  • ✇Intelligence artificielle
  • GPT4All : une IA avec interface graphique à installer sur son PC 
    Je suis désolé pour tout ce qui déteste le sujet, mais on va une nouvelle fois reparler d’intelligence artificielle. Pour les autres, installez-vous bien, car il y a encore des nouveautés sur l’IA, ou plutôt comment facilement y accéder sur votre ordinateur. En lisant un peu ici et là ça reste un sujet clivant, même ... Lire la suite L’article GPT4All : une IA avec interface graphique à installer sur son PC  est apparu en premier sur ZoneTuto.

GPT4All : une IA avec interface graphique à installer sur son PC 

Par : MrTuto
7 août 2023 à 00:28

Je suis désolé pour tout ce qui déteste le sujet, mais on va une nouvelle fois reparler d’intelligence artificielle. Pour les autres, installez-vous bien, car il y a encore des nouveautés sur l’IA, ou plutôt comment facilement y accéder sur votre ordinateur. En lisant un peu ici et là ça reste un sujet clivant, même ... Lire la suite

L’article GPT4All : une IA avec interface graphique à installer sur son PC  est apparu en premier sur ZoneTuto.

  • ✇Intelligence artificielle
  • J’ai lancé un mini ChatGPT en local sur mon CPU avec GPT4All
    On vient encore de passer de nouvelles étapes dans le domaine de l’intelligence artificielles, et tout cela est librement accessible. Attention ne vous attendez pas à des révolutions dans cet article, mais j’ai trouvé ça impressionnant et surtout bien optimisé. Ça m’a tout de suite fait penser à Stable et avec la communauté du libre ... Lire la suite L’article J’ai lancé un mini ChatGPT en local sur mon CPU avec GPT4All est apparu en premier sur ZoneTuto.

J’ai lancé un mini ChatGPT en local sur mon CPU avec GPT4All

Par : MrTuto
10 avril 2023 à 18:44

On vient encore de passer de nouvelles étapes dans le domaine de l’intelligence artificielles, et tout cela est librement accessible. Attention ne vous attendez pas à des révolutions dans cet article, mais j’ai trouvé ça impressionnant et surtout bien optimisé. Ça m’a tout de suite fait penser à Stable et avec la communauté du libre ... Lire la suite

L’article J’ai lancé un mini ChatGPT en local sur mon CPU avec GPT4All est apparu en premier sur ZoneTuto.

❌
❌