STERNENLABOR

Wiki und Dokuspace

Benutzer-Werkzeuge

Webseiten-Werkzeuge


playground:howto:ki-tools

Unterschiede

Hier werden die Unterschiede zwischen zwei Versionen angezeigt.

Link zu dieser Vergleichsansicht

Beide Seiten der vorigen RevisionVorhergehende Überarbeitung
Nächste Überarbeitung
Vorhergehende Überarbeitung
playground:howto:ki-tools [2024/04/26 09:45] – [Windows] ralfplayground:howto:ki-tools [2025/03/24 10:46] (aktuell) ralf
Zeile 6: Zeile 6:
   * Text: Tools für local LLMs    * Text: Tools für local LLMs 
     * [[https://lmstudio.ai/|LM Studio]]     * [[https://lmstudio.ai/|LM Studio]]
-    * [[https://ollama.ai/|Ollama]] auf dem WSL Ubuntu+    * [[https://ollama.ai/|Ollama]] auf Windows und dem WSL Ubuntu
     * [[https://github.com/oobabooga/text-generation-webui|Text Generation WebUI]]     * [[https://github.com/oobabooga/text-generation-webui|Text Generation WebUI]]
     * [[https://github.com/Mintplex-Labs/anything-llm|AnythingLM]] Docker - localhost:3001 - RAG     * [[https://github.com/Mintplex-Labs/anything-llm|AnythingLM]] Docker - localhost:3001 - RAG
Zeile 18: Zeile 18:
     * [[https://github.com/AUTOMATIC1111/stable-diffusion-webui|Automatic1111]]     * [[https://github.com/AUTOMATIC1111/stable-diffusion-webui|Automatic1111]]
     * [[https://github.com/lllyasviel/Fooocus|Fooocus]]      * [[https://github.com/lllyasviel/Fooocus|Fooocus]] 
- +  * Audio 
-===== Polarstern - AMD GPU ===== +    * [[https://github.com/facebookresearch/audiocraft|AudiCraft]] 
- +      * starte Anaconda Powershell Prompt (miniconda3) ->  conda activate audiocraft -> C:\Users\Sternenlabor\audiocraft
- * Ziel ist es die KI-Modelle auf einer eigenen Partition zu speichern, um von allen Programmen aus Windows und Linux heraus genutzt zu werden. +        MusicGen python -m demos.musicgen_app --share  --> http://127.0.0.1:7860/
-==== Windows ==== +
- +
- * Large Language Models (LLMs)  +
-    * [[https://lmstudio.ai/|LM Studio - ROCm Preview]] +
-      * starte LM Studio  +
-      * GPU support via ROCm, LLMs werden auf D:\llm gespeichert +
-      * in LM Studio lassen sich system prompts pflegen, um die Eigenschaften des Bots zu beeinflussen. [[https://github.com/mustvlad/ChatGPT-System-Prompts/tree/main|Beispiele]]. +
-    * [[https://ollama.com/|Ollama]] +
-      * [[https://github.com/ollama/ollama/issues/2551|change model location]] to D:\llm  +
-    * [[https://github.com/Mintplex-Labs/anything-llm|AnythingLM für RAG Test]]  +
-      * starte Docker Desktop -> starte AnythingLM container -> Öffne localhost:3001 im Browser +
-      * Zugriff auf LLMs von LM Studio Server  +
-  * Agenten +
-    * [[https://autogen-studio.com/|AutoGen Studio]]  +
-      * starte Anaconda Powershell Prompt (miniconda3) -> conda activate autogenstudio -> autogenstudio ui -> Öffne http://localhost:8081/ im Browser +
-    * [[https://github.com/joaomdmoura/CrewAI|CrewAI]] +
-      * starte Anaconda Powershell Prompt (miniconda3) ->  conda activate crewai -> schreib deinen eigenen .py code +
-   * Visual Studio Code Extension:  +
-      * [[https://marketplace.visualstudio.com/items?itemName=Continue.continue|Continue]] (CoPilot der auch für lokale LLMs genutzt werden kann) [[https://docs.continue.dev/intro|Docs]]; [[https://medium.com/@smfraser/how-to-use-a-local-llm-as-a-free-coding-copilot-in-vs-code-6dffc053369d|Guide]] +
-      * starte Ollama Server mit "ollama serve" --> 127.0.0.1:11434  und dann VisualStudioCode +
-* Stable Diffusion +
-    * [[https://github.com/comfyanonymous/ComfyUI|ComfyUI]] +
-      * starte Anaconda Powershell Prompt (miniconda3) ->  conda activate comfyui ->  C:\Users\Sternenlabor\comfyui--> python main.py --directml +
-      GPU support via DirectML (langsamer als ROCm) +
-      * ToDoKonfig anpassen, dass die Modelle aus D:\stable-diffusion genutzt werden  +
-    * [[https://github.com/lllyasviel/Fooocus|Fooocus]] +
-      * starte Anaconda Powershell Prompt (miniconda3) ->  conda activate fooocus - C:\Users\Sternenlabor\fooocus\ --> python -s entry_with_update.py --directml +
-      * GPU support via DirectML  +
-      * ToDoKonfig anpassen, dass die Modelle aus D:\stable-diffusion genutzt werden  +
- +
-==== LinuxMint ==== +
  
  
playground/howto/ki-tools.1714117518.txt.gz · Zuletzt geändert: 2024/04/26 09:45 von ralf

Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki