หน่วย
1. ระบบนิเวศของผู้ให้บริการ AI: แผนที่ แนวคิด และ 'ไม่มีโมเดลที่ดีที่สุด' 2. น้ำหนักปิดและน้ำหนักเปิด: ความสมดุลของการควบคุม ต้นทุน และความเป็นส่วนตัว 3. เจาะลึกยักษ์ใหญ่ของสหรัฐฯ: มานุษยวิทยา, OpenAI, Google 4. ผู้เล่นที่แข็งแกร่งคนอื่นๆ: Meta, Mistral, xAI, DeepSeek, Cohere 5. โทเค็น หน้าต่างบริบท และความหลากหลาย: วิธีการทำงานของจิตใจของแบบจำลอง 6. ตรรกะการกำหนดราคา: เศรษฐกิจโทเค็นและความสมดุลด้านต้นทุนและคุณภาพ 7. ระดับและความสามารถของโมเดล: การใช้เหตุผล ความเร็ว และการเลือกโมเดลขนาดเล็ก/ใหญ่ 8. อธิปไตยของข้อมูล KVKK/EU และความเป็นส่วนตัว: คุณไว้วางใจข้อมูลกับใคร? 9. การเลือกแบบจำลองที่เหมาะสม: แผนผังการตัดสินใจและผลงานแบบจำลอง 10. การประยุกต์ใช้แบบครบวงจร: การประเมิน การตรวจสอบความถูกต้อง จริยธรรม และขอบเขต
หน่วย 2 / 10

น้ำหนักปิดและน้ำหนักเปิด: ความสมดุลของการควบคุม ต้นทุน และความเป็นส่วนตัว

กำไร:

  • ความเข้าใจอย่างเป็นรูปธรรมเกี่ยวกับแนวคิดของแบบจำลอง 'น้ำหนัก' และความแตกต่างโดยนัย/ชัดเจน
  • ดูความแตกต่างระหว่าง openweight และ open source และข้อผิดพลาดด้านลิขสิทธิ์
  • ความสามารถในการเลือกแนวทางปิด เปิด หรือผสมโดยมีเหตุผล ขึ้นอยู่กับสถานการณ์ของธุรกิจ

ในขณะที่ทำความรู้จักกับผู้ให้บริการในหน่วยที่แล้ว มีคอลัมน์ชื่อ "ประเภทน้ำหนัก" ในตาราง: ปิด, เปิด, คละ คอลัมน์เดียวนี้ซ่อนหนึ่งในการตัดสินใจเชิงกลยุทธ์ที่สุดในการเลือกแบบจำลองของคุณ ไม่ว่าคุณจะทำงานกับโมเดลน้ำหนักปิดหรือเปิด โดยจะกำหนดโดยตรงว่าข้อมูลของคุณจะถูกประมวลผลที่ใด ค่าใช้จ่ายรายเดือนจะถูกกำหนดอย่างไร ความต้องการของทีมเทคนิค และความรับผิดชอบทางกฎหมายของคุณ เมื่อเนื้อหานี้เสร็จสิ้น คุณจะมีความเข้าใจอย่างเป็นรูปธรรมเกี่ยวกับแนวคิดเรื่อง "น้ำหนัก" เห็นความแตกต่างที่ละเอียดอ่อนแต่สำคัญระหว่างน้ำหนักแบบเปิดและโอเพ่นซอร์ส และสามารถปรับแนวทางที่เหมาะสมสำหรับสถานการณ์ของคุณได้

"น้ำหนัก" คืออะไร?

โมเดล AI ได้รับการฝึกฝนด้วยข้อความจำนวนมากในขณะที่ค่อยๆ ปรับค่าตัวเลข (พารามิเตอร์) นับพันล้านค่าภายในนั้น ตัวเลขทั้งหมดนี้เรียกว่าตุ้มน้ำหนักแบบจำลอง ตุ้มน้ำหนักคือจุดที่โมเดลจัดเก็บ "ทุกสิ่งที่ได้เรียนรู้"; คุณสามารถเปรียบเทียบกับพลังของไซแนปส์ในสมองของบุคคลได้ ไวยากรณ์ ความรู้ทางโลก และรูปแบบการใช้เหตุผลของแบบจำลองล้วนถูกเข้ารหัสด้วยตัวเลขเหล่านี้

“การรัน” แบบจำลองหมายถึงการโหลดตุ้มน้ำหนักเหล่านี้ลงในคอมพิวเตอร์และเรียกใช้ข้อความที่คุณป้อนทับ คำถามสำคัญคือ ใครบ้างที่สามารถเข้าถึงไฟล์น้ำหนักเหล่านี้ได้

  • น้ำหนักปิด: น้ำหนักจะอยู่บนเซิร์ฟเวอร์ของผู้ให้บริการเท่านั้น คุณไม่สามารถเข้าถึงได้โดยตรง คุณใช้งานผ่านอินเทอร์เน็ตผ่านอินเทอร์เฟซ (API) ในลักษณะ "ส่งข้อความ รับการตอบกลับ" Anthropic Claude, OpenAI GPT, Google Gemini ก็เป็นเช่นนี้ (API คืออินเทอร์เฟซที่อนุญาตให้ซอฟต์แวร์ส่งคำขอไปยังซอฟต์แวร์อื่นผ่านพอร์ตมาตรฐานและรับการตอบกลับ)
  • Open-weight: สามารถดาวน์โหลดไฟล์ Weight ได้ หากต้องการ คุณสามารถติดตั้งและรันบนเซิร์ฟเวอร์ของคุณเองได้หากต้องการ Meta Llama, DeepSeek, Mistral บางรุ่นจะเป็นแบบนี้
เคล็ดลับ: คิดว่าน้ำหนักปิดเป็น "อพาร์ทเมนต์เช่า" และน้ำหนักเปิดเป็น "ซื้อบ้าน" ง่ายต่อการย้ายในแฟลตเช่า การดูแลรักษาไม่ใช่ความรับผิดชอบของคุณ แต่เจ้าของบ้านเป็นผู้กำหนดกฎเกณฑ์ ทุกอย่างในบ้านที่ซื้อเป็นของคุณ แต่การปรับปรุงใหม่ การรักษาความปลอดภัย และใบเรียกเก็บเงินก็เป็นความรับผิดชอบของคุณเช่นกัน

Open Weight ไม่เหมือนกับ Open Source

มีข้อผิดพลาดทางแนวคิดที่พบบ่อยมากที่นี่ "Open-weight" และ "open-source" มักใช้สลับกัน แต่ก็ไม่เหมือนกัน

  • การถ่วงน้ำหนักแบบเปิดหมายถึงการแบ่งปันเฉพาะพารามิเตอร์ที่เรียนรู้ของโมเดลเท่านั้น โดยปกติจะไม่มีการอธิบายว่าโมเดลได้รับการฝึกฝนอย่างไรและข้อมูลใดบ้างที่ป้อน
  • โอเพ่นซอร์สโดยสมบูรณ์หมายถึงว่าทั้งน้ำหนัก ข้อมูลการฝึก และรหัสการฝึกมีการแบ่งปันและสามารถใช้งานได้อย่างอิสระ

นอกจากนี้ยังมีปัญหาเรื่องใบอนุญาต แม้ว่าน้ำหนักของโมเดลจะสามารถดาวน์โหลดได้ แต่ใบอนุญาตของโมเดลนั้นอาจจำกัดการใช้งานเชิงพาณิชย์ กำหนดข้อกำหนดเพิ่มเติมนอกเหนือจากจำนวนผู้ใช้ที่กำหนด หรือห้ามการพัฒนาผลิตภัณฑ์ที่แข่งขันกัน ดังนั้น "ฉันสามารถดาวน์โหลดได้" และ "ฉันสามารถใช้งานได้ตามที่ฉันต้องการ" จึงเป็นคนละเรื่องกัน

ข้อควรระวัง: ก่อนที่จะใส่แบบจำลอง Open Weight ในธุรกิจของคุณ โปรดอ่านใบอนุญาตก่อน อย่าหลงกลกับคำว่า "เปิด"; ใบอนุญาตบางฉบับจำเป็นต้องมีข้อตกลงแยกต่างหากเหนือจำนวนผู้ใช้ที่ใช้งานรายเดือนจำนวนหนึ่ง และบางใบอนุญาตก็จำกัดการใช้เอาต์พุตเพื่อวัตถุประสงค์บางประการ นี่คือสิ่งที่คุณควรถามทีมกฎหมายของคุณ

การเปรียบเทียบสองแนวทาง

ตารางด้านล่างแสดงวิธีการทั้งสองแบบเคียงข้างกันในมิติข้อมูลหลัก

ขนาด

น้ำหนักปิด

เปิดน้ำหนัก

การติดตั้ง

ไม่มี อินเทอร์เฟซพร้อม

ต้องการเซิร์ฟเวอร์และทีมงานด้านเทคนิค

ข้อมูลถูกประมวลผลที่ไหน

บนเซิร์ฟเวอร์ของผู้ให้บริการ

ในสภาพแวดล้อมภายใต้การควบคุมของคุณ

ต้นทุนเริ่มต้น

ต่ำ (จ่ายตามที่คุณไป)

สูง (ฮาร์ดแวร์, การติดตั้ง)

ต้นทุนในระดับ

เพิ่มขึ้นตามปริมาณ

คาดการณ์ได้ด้วยฮาร์ดแวร์แบบคงที่

อัพเดต/บำรุงรักษา

ที่ผู้ให้บริการ

คุณก็เหมือนกัน

การควบคุมความเป็นส่วนตัว

จำกัด

เต็ม

เข้าถึงโมเดลที่ทรงพลังที่สุด

ปกติจะอยู่ที่นี่

ตัวแปร

ในตารางนี้ ไม่มีคำตอบเดียวว่า "อันไหนดีกว่า"; แต่ละบรรทัดจะมีค่าบวกหรือลบขึ้นอยู่กับลำดับความสำคัญของคุณ หากคุณต้องการให้ต้นทุนเริ่มต้นต่ำ น้ำหนักปิด; หากข้อมูลต้องไม่ออกไปจากบริษัทแม้แต่มิลลิเมตร น้ำหนักแบบเปิดก็มาก่อน

สามกรณีที่สมจริง

กรณีที่ 1 — การเริ่มต้นอีคอมเมิร์ซ (น้ำหนักเพิ่มแบบปิด) ทีมอีคอมเมิร์ซห้าคนต้องการสร้างคำอธิบายผลิตภัณฑ์ พวกเขาไม่มีทีมงานด้านเทคนิค พวกเขาไม่ต้องการจัดการเซิร์ฟเวอร์ ปริมาณรายเดือนมีความผันแปร พวกเขาเริ่มต้นด้วยโมเดลน้ำหนักปิดโดยจ่ายเงินตามสิ่งที่พวกเขาใช้ ในเดือนแรก พวกเขาประมวลผลโทเค็น 1.2 ล้านโทเค็นและจ่ายเงินประมาณ 15 ดอลลาร์ เมื่อธุรกิจของพวกเขาเติบโตขึ้น การเรียกเก็บเงินก็เพิ่มขึ้นตามสัดส่วนด้วย ไม่มีปัญหาเซิร์ฟเวอร์ การบำรุงรักษา หรือการอัปเดต ตัวเลือกที่เหมาะสมสำหรับโปรไฟล์นี้ชัดเจน

กรณีที่ 2 — โรงพยาบาล (ขาดดุลทำให้น้ำหนักเพิ่มขึ้น) โรงพยาบาลต้องการสรุปและเขียนรหัสบันทึกผู้ป่วย ข้อมูลนี้เป็นข้อมูลด้านสุขภาพที่มีความละเอียดอ่อนสูง ไม่ควรออกจากสถาบันไม่ว่ากรณีใดๆ พวกเขากำลังสร้างแบบจำลองน้ำหนักเปิดในศูนย์ข้อมูลของตน พวกเขาลงทุนเริ่มแรกอย่างมหาศาลในการตั้งค่าและฮาร์ดแวร์ (เช่น เซิร์ฟเวอร์ 40,000 ดอลลาร์สหรัฐฯ และค่าแรงในการตั้งค่าสองสัปดาห์) แต่แล้วพวกเขาก็ไม่ต้องจ่ายค่าธรรมเนียมโทเค็นเพิ่มเติมต่อคนไข้ และข้อมูลจะไม่ไปที่เซิร์ฟเวอร์ภายนอก ปริมาณสูงและการรักษาความลับอย่างสมบูรณ์ทำให้ต้นทุนเริ่มต้นเหมาะสม

กรณีที่ 3 — สำนักงานบัญชีขนาดกลาง (วิธีไฮบริดชนะ) สำนักงานบัญชีใช้แบบจำลองน้ำหนักปิดจากอินเทอร์เฟซสำเร็จรูปสำหรับจดหมายทั่วไปและร่างข้อความรายวัน เพราะมันไม่คุ้มค่ากับความพยายามในการติดตั้งสำหรับงานเหล่านี้ อย่างไรก็ตาม พวกเขาจ้างบุคคลภายนอกในการวิเคราะห์ที่ละเอียดอ่อนที่เกี่ยวข้องกับข้อมูลทางการเงินของลูกค้าให้กับแบบจำลอง Open Weight ที่ทำงานบนเซิร์ฟเวอร์ของตนเอง จึงได้รับประโยชน์จากทั้งความสะดวกสบายและความเป็นส่วนตัวไปพร้อมๆ กัน เราจะกลับมาที่แนวทาง "พอร์ตโฟลิโอแบบผสมผสาน" ในหน่วยที่ 9

พร้อมท์ที่อ่อนแอ / พร้อมท์ที่แข็งแกร่ง: เมื่อขอความช่วยเหลือในการตัดสินใจ

พรอมต์ที่อ่อนแอ:

ฉันควรใช้น้ำหนักเปิดหรือน้ำหนักปิด?

พรอมต์อันทรงพลัง:

บทบาทของคุณ: สถาปนิก AI ระดับองค์กร สถานการณ์ของฉัน: เราเป็นบริษัทบัญชีที่มีพนักงาน 12 คน เราไม่มีทีมงานด้านเทคนิค แต่เรามีที่ปรึกษาด้านไอทีภายนอก ~500,000 โทเค็นต่อเดือนธุรกิจ ข้อมูลบางส่วนเป็นข้อมูลทางการเงินของลูกค้า (ละเอียดอ่อน) บางส่วนเป็นข้อมูลโต้ตอบทั่วไป เราต้องปฏิบัติตาม KVKK ภารกิจ: เปรียบเทียบแนวทางปิด เปิด และผสมตามลำดับ สำหรับแต่ละข้อ: ความเหมาะสม (1-5) ช่วงต้นทุนในปีแรกโดยประมาณ บันทึกความเป็นส่วนตัว ความเสี่ยงหลัก สุดท้ายให้ข้อเสนอแนะหนึ่งข้อและสรุปเหตุผลเป็น 3 ข้อ

พรอมต์ที่สองช่วยให้โมเดลสามารถสร้างคำแนะนำที่เหมาะสมกับธุรกิจของคุณได้จริง เนื่องจากให้ขอบเขตทั้งหมดที่จำเป็นสำหรับการตัดสินใจ (ทีม ปริมาณ ประเภทข้อมูล กรอบกฎหมาย)

เทมเพลตที่คัดลอกได้

1. การตัดสินใจประเภทน้ำหนัก:

งานของฉัน: [รายละเอียด] ทีมเทคนิค: [ใช่/ไม่ใช่] ปริมาณโทเค็นรายเดือน: [NUM] ความละเอียดอ่อนของข้อมูล: [ต่ำ/ปานกลาง/สูง] การตั้งค่าโครงสร้างงบประมาณ: [เริ่มต้นต่ำ / คงที่ที่คาดการณ์ได้] เปรียบเทียบตัวเลือกที่ปิด เปิด และผสมตามโปรไฟล์นี้ และให้คำแนะนำเพียงข้อเดียว

2. การตรวจสอบใบอนุญาต:

ลดความซับซ้อนของใบอนุญาตสำหรับโมเดล Open Weight นี้: [LICENSE NAME/TEXT] ตอบคำถามเหล่านี้: อนุญาตให้ใช้ในเชิงพาณิชย์หรือไม่ มีการจำกัดจำนวนผู้ใช้/รายได้หรือไม่? ฉันสามารถขายผลผลิตได้หรือไม่? ห้ามใช้อะไร? ถ้าไม่ชัดเจน ให้เขียนว่า "ask aทนายความ"

3. รายละเอียดต้นทุน:

แจกแจงต้นทุนรวมในการเป็นเจ้าของสำหรับโมเดลน้ำหนักเปล่า: ฮาร์ดแวร์ ค่าแรงในการติดตั้ง ค่าไฟฟ้า/โฮสติ้ง การบำรุงรักษา การอัปเดต ทำการเปรียบเทียบคร่าวๆ เป็นเวลา 3 ปีกับทางเลือกน้ำหนักปิด ปริมาณรายเดือนของฉัน: [NUMBER]

4. การคัดกรองความเสี่ยงด้านความเป็นส่วนตัว:

ติดตามว่าข้อมูลไปจากที่ใดไปยังที่ใดในเวิร์กโฟลว์ต่อไปนี้: [คำอธิบายเวิร์กโฟลว์] หากฉันใช้น้ำหนักปิด ข้อมูลจะออกไปที่จุดใด ความเสี่ยงนี้เปลี่ยนแปลงอย่างไรเมื่อเปิดน้ำหนัก? เสนอแนะมาตรการบรรเทาความเสี่ยงแต่ละอย่าง

ข้อผิดพลาดทั่วไป

  • การเข้าใจผิดว่าคำว่า "เปิด" เป็น "ฟรีและไม่จำกัด": Open Weight ไม่รับประกันการใช้งานเชิงพาณิชย์ฟรีหรือไม่จำกัด; ใบอนุญาตถือเป็นเด็ดขาด
  • การคิดว่าน้ำหนักแบบเปิดนั้น "ง่าย": การเรียกใช้แบบจำลองน้ำหนักแบบเปิดต้องใช้เซิร์ฟเวอร์ เจ้าหน้าที่ด้านเทคนิค และการบำรุงรักษา การประเมินการติดตั้งต่ำเกินไปถือเป็นข้อผิดพลาดทั่วไป
  • ไม่พิจารณาข้อมูลน้ำหนักปิดเลย: ในแบบจำลองปิด ข้อมูลจะถูกส่งไปยังผู้ให้บริการ การเริ่มต้นโดยไม่แยกแยะล่วงหน้าว่าข้อมูลใดจะไปได้นั้นมีความเสี่ยง
  • เพียงดูที่ต้นทุนเริ่มต้น: แม้ว่าน้ำหนักเปิดอาจดูมีราคาแพงในช่วงแรก แต่อาจมีราคาถูกกว่าในระยะยาวในปริมาณที่สูงมาก ดูต้นทุนรวมตลอดสามปี
  • คำขวัญ 'รูปแบบที่แข็งแกร่งที่สุดมักจะปิดเสมอ': แม้ว่าสิ่งนี้จะเป็นจริงเกือบตลอดเวลา แต่ก็ไม่ได้แน่นอน โมเดลน้ำหนักเปิดอาจเกินพอสำหรับงานบางอย่าง

โดยสรุป

  • น้ำหนักโมเดลคือพารามิเตอร์นับพันล้านที่เก็บข้อมูลที่โมเดลได้เรียนรู้ ความแตกต่าง "ปิด/เปิด" เป็นเรื่องเกี่ยวกับการเข้าถึงพารามิเตอร์เหล่านี้
  • น้ำหนักปิด: อินเทอร์เฟซพร้อม เริ่มต้นต่ำ บนผู้ให้บริการข้อมูล น้ำหนักที่ชัดเจน: เซิร์ฟเวอร์ของคุณเอง การควบคุมเต็มรูปแบบ ค่าใช้จ่ายในการเริ่มต้นและการบำรุงรักษาที่สูง
  • น้ำหนักเปิดไม่เหมือนกับโอเพ่นซอร์ส เงื่อนไขสิทธิ์การใช้งานอาจจำกัดการใช้งานเชิงพาณิชย์
  • ทางเลือกที่เหมาะสม; ขึ้นอยู่กับทีม ปริมาณ ความละเอียดอ่อนของข้อมูล และโครงสร้างงบประมาณ แนวทางแบบผสมผสานเหมาะสมสำหรับธุรกิจขนาดกลางส่วนใหญ่

งานสมัคร

ใช้โปรไฟล์ความต้องการที่คุณสร้างไว้ในหน่วยก่อนหน้า มอบให้กับโมเดล AI โดยใช้เทมเพลต 1 (การตัดสินใจประเภทน้ำหนัก) ในหน่วยนี้ ประเมินคำแนะนำผลลัพธ์ด้วยตัวคุณเองโดยจับคู่ทีละรายการกับมิติข้อมูลทั้งเจ็ดในตาราง (การติดตั้ง ตำแหน่งข้อมูล ต้นทุนการเริ่มต้น ต้นทุนขนาด การบำรุงรักษา ความเป็นส่วนตัว การเข้าถึงโมเดลอันทรงพลัง) หากการประเมินของคุณแตกต่างจากคำแนะนำของแบบจำลอง ให้จดบันทึกว่าคุณแตกต่างในประโยคเดียว

รายการตรวจสอบ

  • [ ] ฉันสามารถอธิบายแนวคิดเรื่อง "น้ำหนัก" ด้วยคำพูดของฉันเอง
  • [ ] ฉันสามารถเปรียบเทียบข้อดี/ข้อเสียของน้ำหนักปิดและน้ำหนักเปิดได้ในเจ็ดมิติ
  • [ ] ฉันรู้ถึงความแตกต่างระหว่าง openweight และ open source และความเสี่ยงด้านลิขสิทธิ์
  • [ ] ฉันสามารถพิจารณาตัวเลือกแบบปิด/เปิด/ไฮบริดสำหรับธุรกิจของตัวเองได้
  • [ ] ฉันสามารถติดตามว่าข้อมูลไปที่ใดในเวิร์กโฟลว์และแสดงจุดเสี่ยง