Eenheid 2 / 10

Gesloten gewicht en open gewicht: een evenwicht tussen controle, kosten en privacy

Winst:

  • Concreet begrip van het concept van modelgewicht en het impliciete/expliciete onderscheid
  • Bekijk het verschil tussen openweight en open source en hun valkuilen op het gebied van licentieverlening
  • Mogelijkheid om een gesloten, open of gemengde aanpak te kiezen, met verantwoording afhankelijk van de situatie van het bedrijf

Toen ik de aanbieders in de vorige unit leerde kennen, stond er in de tabel een kolom met de naam "gewichtstype": gesloten, open, gemengd. Deze enkele kolom verbergt feitelijk een van de meest strategische beslissingen van uw modelselectie. Of u nu met een gesloten of open gewichtsmodel gaat werken; Het bepaalt direct waar uw gegevens worden verwerkt, hoe uw maandelijkse kosten worden vormgegeven, wat uw technische team nodig heeft en uw juridische verantwoordelijkheden. Tegen de tijd dat dit onderdeel is afgerond, zul je een concreet begrip hebben van het concept van "gewicht", het subtiele maar kritische verschil zien tussen open gewicht en open source, en in staat zijn de juiste aanpak voor je eigen situatie te rechtvaardigen.

Wat is precies "gewicht"?

Een AI-model wordt getraind met een enorm stuk tekst, terwijl de miljarden numerieke waarden (parameters) daarin langzaam worden aangepast. Al deze getallen worden modelgewichten genoemd. In gewichten slaat het model ‘alles wat het heeft geleerd’ op; Je kunt het vergelijken met de kracht van synapsen in iemands hersenen. De grammatica, wereldkennis en redeneerpatronen van het model zijn allemaal in deze cijfers gecodeerd.

Een model 'uitvoeren' betekent dat u deze gewichten in een computer laadt en de tekst die u invoert eroverheen laat lopen. De cruciale vraag is: wie heeft toegang tot deze gewichtsbestanden?

  • Gesloten gewicht: Gewichten bevinden zich alleen op de servers van de provider. Je hebt er geen directe toegang toe; Je gebruikt het via internet via een interface (API) op een "send text, get response" manier. Anthropic Claude, OpenAI GPT en Google Gemini zijn zo. (API is een interface waarmee software via een standaardpoort een verzoek naar andere software kan sturen en een antwoord kan ontvangen.)
  • Open-gewicht: Gewichtsbestanden kunnen worden gedownload. Als u wilt, kunt u het op uw eigen server installeren en uitvoeren. Sommige modellen van Meta Llama, DeepSeek, Mistral zijn zo.
Tip: Beschouw het gesloten gewicht als “huurappartement” en het open gewicht als “gekochte woning”. Verhuizen in een huurwoning is eenvoudig, het onderhoud is niet jouw verantwoordelijkheid, maar de verhuurder bepaalt de regels. Alles in de gekochte woning is van jou, maar ook verbouwingen, beveiliging en rekeningen zijn jouw verantwoordelijkheid.

Open gewicht is niet hetzelfde als Open Source

Er is hier sprake van een veel voorkomende conceptuele fout. "Open-weight" en "open-source" worden vaak door elkaar gebruikt, maar ze zijn niet hetzelfde.

  • Open weging betekent dat alleen de geleerde parameters van het model worden gedeeld. Meestal wordt niet uitgelegd hoe het model wordt getraind en met welke data het wordt gevoed.
  • Volledig open source betekent idealiter dat zowel de gewichten, trainingsgegevens als trainingscode worden gedeeld en vrij kunnen worden gebruikt.

Er is ook nog de kwestie van de licentieverlening. Zelfs als de gewichten van een model kunnen worden gedownload, kan de licentie ervan het commerciële gebruik beperken, aanvullende eisen stellen boven een bepaald aantal gebruikers, of concurrerende productontwikkeling verbieden. Dus "Ik kan het downloaden" en "Ik kan het gebruiken zoals ik wil" zijn verschillende dingen.

Let op: Voordat u een model met open gewicht in uw bedrijf installeert, moet u de licentie ervan lezen. Laat u niet misleiden door het woord "open"; Sommige licenties vereisen afzonderlijke overeenkomsten boven een bepaald aantal maandelijks actieve gebruikers, en sommige beperken het gebruik van de output voor bepaalde doeleinden. Dit is iets dat u aan uw juridische team moet vragen.

Vergelijking van twee benaderingen

In de onderstaande tabel worden de twee benaderingen op de belangrijkste dimensies naast elkaar gezet.

Grootte

Gesloten gewicht

Open gewicht

Installatie

Geen, kant-en-klare interface

Server en technisch team vereist

Waar worden gegevens verwerkt

Op de server van de provider

In een omgeving onder uw controle

Initiële kosten

Laag (pay as you go)

Hoog (hardware, installatie)

Kosten op schaal

neemt toe met het volume

Voorspelbaar met vaste hardware

Update/onderhoud

bij de aanbieder

jij ook

privacycontrole

beperkt

vol

Toegang tot het krachtigste model

meestal hier

Variabel

In deze tabel is er geen eenduidig antwoord op de vraag "wat beter is"; Elke regel is plus of min, afhankelijk van uw prioriteit. Als u wilt dat de initiële kosten laag zijn, gesloten gewicht; Als data het bedrijf nog geen millimeter mogen verlaten, komt het open gewicht naar voren.

Drie realistische gevallen

Geval 1 – Opstarten van e-commerce (gesloten gewichtstoename). Een e-commerceteam van vijf personen wil productbeschrijvingen maken. Ze hebben geen technische teams, ze willen geen servers beheren, het maandelijkse volume is variabel. Ze beginnen met een gesloten model, waarbij ze betalen voor wat ze gebruiken. In de eerste maand verwerken ze 1,2 miljoen tokens en betalen ze ongeveer $ 15 uit; Naarmate hun bedrijf groeit, groeit de rekening ook proportioneel. Er is geen server-, onderhouds- of updateprobleem. De juiste keuze voor dit profiel is duidelijk.

Geval 2 — Ziekenhuis (tekort neemt toe). Een ziekenhuis wil patiëntaantekeningen samenvatten en coderen. De gegevens zijn zeer gevoelige gezondheidsgegevens; mogen onder geen enkele omstandigheid de instelling verlaten. Ze bouwen een open gewichtsmodel in hun datacenters. Ze doen een flinke initiële investering in installatie en hardware (bijvoorbeeld een server van $ 40.000 en twee weken installatiewerk), maar daarna betalen ze geen extra tokenkosten per patiënt en gaan de gegevens nooit naar een externe server. Het hoge volume en de absolute vertrouwelijkheid rechtvaardigen de initiële kosten.

Casus 3 — Middelgroot accountantskantoor (hybride aanpak wint). Een accountantskantoor gebruikt een closed-weight model uit een kant-en-klare interface voor de dagelijkse algemene correspondentie en conceptteksten; omdat het de installatie-inspanning voor deze klussen niet waard is. Ze besteden gevoelige analyses van financiële gegevens van klanten echter uit aan een open gewichtsmodel dat op hun eigen servers draait. Zo profiteren ze tegelijkertijd van gemak en privacy. In hoofdstuk 9 komen we terug op deze “gemengde portefeuille”-benadering.

Zwakke prompt/sterke prompt: bij het vragen om beslissingsondersteuning

Zwakke prompt:

Moet ik open gewicht of gesloten gewicht gebruiken?

Krachtige prompt:

Jouw rol: enterprise AI architect. Mijn situatie: Wij zijn een accountantskantoor met 12 medewerkers, we hebben geen technisch team maar wel een externe IT-consultant. ~500.000 tokens per maand. Een deel van de gegevens betreft financiële gegevens van klanten (gevoelig), een deel betreft algemene correspondentie. Wij moeten voldoen aan KVKK. Taak: Vergelijk de gesloten, open en gemengde aanpak dienovereenkomstig. Voor elk: geschiktheid (1-5), geschatte kosten voor het eerste jaar, privacyverklaring, belangrijkste risico. Geef ten slotte één suggestie en vat de reden samen in drie punten.

Met de tweede prompt kan het model een aanbeveling doen die echt bij uw bedrijf past, omdat het alle grenzen aangeeft die nodig zijn voor de beslissing (team, volume, gegevenstype, juridisch kader).

Kopieerbare sjablonen

1. Beslissing over het soort gewicht:

Mijn taak: [BESCHRIJVING]. Technisch team: [JA/NEE]. Maandelijks tokenvolume: [NUM].Gegevensgevoeligheid: [LOW/MEDIUM/HIGH].Voorkeur voor budgetstructuur: [LOW START / PREDICTABLE FIXED].Vergelijk gesloten, open en gemengde opties volgens dit profiel en geef één enkele aanbeveling.

2. Licentiecontrole:

Vereenvoudig de licentie voor dit open gewichtsmodel: [LICENSE NAME/TEXT]. Beantwoord deze vragen: Is commercieel gebruik toegestaan? Zijn er gebruikers-/opbrengstlimieten? Kan ik de uitvoer doorverkopen? Welke toepassingen zijn er verboden? Als het onduidelijk is, schrijf dan "vraag het aan een advocaat".

3. Uitsplitsing van de kosten:

Verdeel de totale eigendomskosten voor een naaktmodel: hardware, installatiearbeid, elektriciteit/hosting, onderhoud, updates. Maak een ruwe vergelijking over drie jaar met het gesloten gewichtsalternatief. Mijn maandvolume: [NUMBER].

4. Screening van privacyrisico's:

Traceer waar gegevens van waar naar toe gaan in de volgende workflow: [WORKFLOW DESCRIPTION]. Als ik gesloten gewicht gebruik, op welk punt gaan de gegevens dan uit? Hoe verandert dit risico bij open gewicht? Stel voor elk risico een beperkende maatregel voor.

Veel voorkomende fouten

  • Het woord “open” verwarren met “gratis en onbeperkt”: Open gewicht garandeert geen gratis of onbeperkt commercieel gebruik; vergunning is doorslaggevend.
  • Open gewicht denken is "gemakkelijk": het runnen van een open gewicht model vereist servers, technisch personeel en onderhoud; Het onderschatten van de installatie is een veelgemaakte fout.
  • Helemaal geen rekening houden met de gesloten gewichtsgegevens: in het gesloten model gaan de gegevens naar de aanbieder; Het is riskant om te beginnen zonder vooraf uit te zoeken welke gegevens weg mogen.
  • Als we alleen maar naar de initiële kosten kijken: hoewel open gewicht in eerste instantie misschien duur lijkt, kan het op de lange termijn goedkoper zijn bij zeer hoge volumes. Kijk naar de totale kosten over drie jaar.
  • Het motto 'het sterkste patroon is altijd gesloten': Hoewel dit meestal waar is, is het niet absoluut; modellen met open gewicht kunnen voor bepaalde taken meer dan voldoende zijn.

Samengevat

  • Modelgewichten zijn miljarden parameters die de informatie opslaan die het model heeft geleerd; Het onderscheid "uit/aan" gaat over toegang tot deze parameters.
  • Gesloten gewicht: kant-en-klare interface, lage start, op dataprovider. Het voor de hand liggende gewicht: uw eigen server, volledige controle, hoge opstart- en onderhoudsoverhead.
  • Open gewicht is niet hetzelfde als open source; Licentievoorwaarden kunnen commercieel gebruik beperken.
  • De juiste keuze; Varieert afhankelijk van team, volume, datagevoeligheid en budgetstructuur. Een hybride aanpak is zinvol voor de meeste middelgrote bedrijven.

Applicatie taak

Neem het behoeftenprofiel dat u in de vorige unit hebt gemaakt. Geef het aan een AI-model met behulp van sjabloon 1 (beslissing over gewichtstype) in dit blok. Evalueer de resulterende aanbeveling zelf door deze één voor één te matchen met de zeven dimensies in de tabel (installatie, datalocatie, opstartkosten, schaalkosten, onderhoud, privacy, toegang tot het krachtige model). Als uw evaluatie afwijkt van de aanbeveling van het model, noteer dan in één zin waar u van mening verschilt.

controlelijst

  • [ ] Ik kan het concept "gewicht" in mijn eigen woorden uitleggen.
  • [ ] Ik kan de voor- en nadelen van gesloten en open gewicht vergelijken in zeven dimensies.
  • [ ] Ik ken het verschil tussen openweight en open source en het licentierisico.
  • [ ] Ik kan de keuze gesloten/open/hybride voor mijn eigen bedrijf verantwoorden.
  • [ ] Ik kan volgen waar gegevens naartoe gaan in een workflow en de risicopunten laten zien.