Lokal AI
Lokal AI
Kör AI lokalt på er egen Mac
Allt fler företag i Karlstad och Värmland vill använda AI utan att skicka känslig information till molntjänster i andra länder. Attimo hjälper er att köra AI lokalt på era egna datorer, där all bearbetning sker på er Mac och datan stannar i huset. Vi väljer rätt maskin, installerar modeller och verktyg och visar er hur ni kommer igång. En färdigkonfigurerad Mac mini är ofta den enklaste vägen in.
Attimo i Karlstad
Galleria Duvan, plan 2
054-18 63 00
info@attimo.se
Vad är lokal AI?
Lokal AI är AI-modeller som körs direkt på era egna datorer i stället för i en molntjänst. När ni ställer en fråga eller analyserar ett dokument sker hela bearbetningen på maskinen framför er. Ingenting skickas vidare till en extern leverantör, och svaret skapas av modellen som ligger lokalt på datorn.
Skillnaden mot vanliga molntjänster är var datan hamnar. När ni använder en tjänst på nätet lämnar er text leverantörens servrar för bearbetning. Med en lokal modell stannar samma text på er egen dator. För många verksamheter är det skillnaden mellan att kunna använda AI på riktigt känsligt material eller inte alls.
Varför ska företag köra AI lokalt?
Lokal AI ger er kontroll över er egen information. Det är den största fördelen, och flera andra följer av den.
Integritet och GDPR
Datan stannar på er dator och passerar aldrig en extern server. Det gör det betydligt enklare att hantera personuppgifter och annan känslig information i linje med GDPR, eftersom ni slipper fråga var i världen en molnleverantör lagrar och bearbetar er data.
Kontroll över affärshemligheter
Ritningar, avtal, kundregister och kod kan analyseras med AI utan att lämna verksamheten. Ert material används inte för att träna någon annans modell och hamnar inte i en logg ni inte styr över.
Fungerar offline
När modellen är installerad körs den utan internet. AI fungerar även när uppkopplingen ligger nere, och ni är inte beroende av att en extern tjänst är igång eller av hur den ändrar sina villkor.
Förutsägbar kostnad
En lokal lösning är en känd investering i hårdvara i stället för en löpande kostnad per användare och fråga. Ni vet vad det kostar oavsett hur mycket ni använder den.
Snabba svar på er egen maskin
Bearbetningen sker på plats, så ni slipper väntan på att data ska skickas fram och tillbaka till en server. Det märks särskilt när ni arbetar med större mängder text eller många frågor i rad.
Trygghet
Känslig information som aldrig lämnar verksamheten
För vården, juridiken, ekonomifunktioner och tekniktunga företag är det ofta omöjligt att lägga in riktigt material i en publik AI-tjänst. Lokal AI löser det genom att hålla all bearbetning på er egen dator.
Ni kan låta AI gå igenom journaler, avtalsutkast eller bokföring utan att informationen någonsin skickas vidare. Det öppnar för användningsområden som annars skulle stanna på idéstadiet.
Hur har Apple byggt hårdvaran för lokal AI?
Apple har byggt sina egna chip, Apple Silicon, där processor, grafik och en särskild AI-krets sitter på samma chip. Det som gör dem starka för lokal AI är det delade minnet. CPU, GPU och Neural Engine använder samma minnespool i stället för att ha varsitt separat minne.
På en vanlig PC måste data kopieras mellan systemets minne och grafikkortets eget minne, och grafikkortets minne sätter en hård gräns för hur stor en AI-modell får vara. På Apple Silicon finns ingen sådan uppdelning. Hela det delade minnet kan användas till modellen, vilket gör att en Mac kan köra större modeller än man väntar sig av storleken på maskinen.
Apple Silicon har också en Neural Engine, en krets byggd just för att snabba upp AI-beräkningar, och en grafikdel som via Apples teknik Metal gör det tunga arbetet när en språkmodell körs. Apples M4 Pro har enligt Apple 273 GB i sekunden i minnesbandbredd, vilket ger gott om utrymme för att köra språkmodeller lokalt.
Ovanpå hårdvaran har Apple byggt MLX, ett eget ramverk som är optimerat för Apple Silicon och det delade minnet. Tillsammans med färdiga verktyg gör det att en Mac kan köra moderna AI-modeller lokalt med god prestanda, utan separat grafikkort.
Vilken Mac passar för lokal AI?
Alla Mac med Apple Silicon kan köra AI lokalt. Vilken modell ni behöver beror på hur stora modeller ni vill använda och hur mycket ni kör samtidigt. Ju mer delat minne maskinen har, desto större språkmodeller får plats.
Mac mini är den enklaste och mest prisvärda vägen in. Den är liten, tyst och energisnål, och med M4 Pro kan den konfigureras med upp till 48 GB delat minne. Det räcker för att köra stora språkmodeller lokalt, samma typ som annars kräver dyr serverhårdvara.
För tyngre behov finns Mac Studio. Den kan konfigureras med M4 Max eller M3 Ultra, betydligt mer delat minne och högre minnesbandbredd, upp till 819 GB i sekunden med M3 Ultra. Då har ni i praktiken en lokal AI-server som står under skrivbordet och kan köra ännu större modeller.
Så hjälper Attimo er igång
Attimo tar hela vägen från idé till en lösning som fungerar i er vardag. Ni behöver inte vara tekniska för att komma igång.
Behovsanalys
Vi går igenom vad ni vill använda AI till och hur känslig informationen är. Utifrån det avgör vi vilken modell och vilken Mac mini som passar er.
Färdigkonfigurerad Mac
Vi väljer rätt modell, oftast en Mac mini, installerar operativsystem, modell och verktyg och levererar en maskin som är klar att använda. Inget krångel med installation hos er.
Rätt verktyg för lokal AI
Vi sätter upp beprövade verktyg som körs lokalt på Mac, till exempel Ollama och LM Studio, så att ni kan ladda ner och köra modeller med ett enkelt gränssnitt.
Utbildning
Vi visar er hur ni använder den lokala modellen i ert arbete och kombinerar gärna detta med vårt program för AI i ledning och organisation.
Support efteråt
Vi finns kvar som er IT-partner och hjälper er när behoven växer eller modellerna utvecklas. Ni har ett kontaktställe för hela er Apple-miljö.
Vanliga frågor om lokal AI
Vad är lokal AI?
Lokal AI är AI-modeller som körs direkt på era egna datorer i stället för i molnet. All bearbetning sker på maskinen, vilket gör att texter, dokument och frågor aldrig lämnar er verksamhet.
Behöver datorn vara uppkopplad?
Nej. När modellen är installerad körs den fullständigt offline. Lokal AI fungerar även utan internet, och inga frågor skickas vidare till en extern tjänst.
Är en lokal modell lika bra som de stora molntjänsterna?
De allra största modellerna i molnet är fortfarande kraftfullast. För många uppgifter som sammanfattningar, utkast och analys av era egna dokument räcker en lokal modell mycket långt, och den klarar material ni aldrig skulle lägga i en molntjänst.
Vilken Mac behöver vi?
Det beror på vilka modeller ni vill köra. Ju mer delat minne, desto större modeller. En Mac mini med M4 Pro och upp till 48 GB delat minne räcker långt, och för riktigt stora modeller finns Mac Studio med betydligt mer minne. Vi rekommenderar rätt maskin utifrån era behov.
Kan ni hjälpa oss även om vi inte är tekniska?
Ja. Vi levererar en färdigkonfigurerad maskin, installerar allt och utbildar er. Ni behöver ingen egen IT-avdelning för att komma igång med lokal AI.
Kan företag köra AI lokalt utan att skicka data till molnet?
Ja, det är just poängen med lokal AI. Allt material stannar på er egen utrustning, vilket passar känsliga dokument och interna uppgifter.
Är lokal AI säkrare för känslig företagsdata?
Eftersom data inte lämnar er utrustning minskar risken att känslig information hamnar utanför företaget. Det är ett starkt skäl för organisationer som arbetar med skyddsvärt material. Vi hjälper er sätta upp det på ett tryggt sätt.
Kan vi träna eller finjustera en modell på egen data?
Ja, en fördel med lokala modeller är att de kan anpassas och finjusteras på er egen data så att de blir vassa på just ert område. Vi hjälper er resonera kring vad som är möjligt.
Vad kan vi använda lokal AI till på kontoret?
Lokal AI kan hjälpa till att skriva och sammanfatta texter, analysera dokument, ta fram utkast och stödja interna arbetsflöden, allt med materialet kvar hos er. Vi visar konkreta exempel utifrån er verksamhet.
Mattias Johansson
IT-konsult
Vill ni köra AI lokalt?
Mattias går igenom era behov och föreslår rätt Mac för er, ofta en färdigkonfigurerad Mac mini. Ring, mejla eller kom förbi företagsbutiken på plan 2 i Galleria Duvan.