Tags:
Node Thumbnail

Adobe รายงานผลประกอบการของไตรมาสที่ 4 ตามปีการเงินบริษัท 2023 สิ้นสุดวันที่ 1 ธันวาคม รายได้เติบโตทำสถิติใหม่อีกไตรมาสที่ 5,048 ล้านดอลลาร์ เพิ่มขึ้น 12% จากช่วงเดียวกันในปีก่อน มีกำไรสุทธิตามบัญชี GAAP 1,483 ล้านดอลลาร์

Shantanu Narayen ซีอีโอ Adobe ให้ความเห็นจากการปรับราคา subscription บางผลิตภัณฑ์ ที่อาจทำให้ลูกค้ามองหาช่องทางที่ราคาถูกลง โดยยืนยันในภาพรวมธุรกิจยังเติบโตได้ และนักวิเคราะห์มองผลกระทบของการปรับราคามากเกินไป

เขายังพูดถึงดีลซื้อกิจการ Figma ซึ่งยังอยู่ในขั้นตอนการอนุมัติจากหน่วยงานกำกับดูแลทั้งในยุโรป สหราชอาณาจักร และสหรัฐอเมริกา ซึ่งถึงตอนนี้ยังไม่มีกำหนดเวลาชัดเจน แต่เชื่อว่าน่าจะมีข้อสรุปได้เร็ว ๆ นี้

Tags:
Node Thumbnail

กูเกิลเปิดให้นักพัฒนาใช้งานโมเดลปัญญาประดิษฐ์ Gemini Pro รุ่นกลางที่ใช้งานใน Bard ตั้งแต่สัปดาห์ที่แล้ว โดยนักพัฒนาสามารถใช้งานได้ฟรีทุกคนในช่วงทดสอบ จำกัดเพียงแค่ห้ามคิวรีเกิน 60 ครั้งต่อนาทีเท่านั้น

โมเดลที่ปล่อยให้ใช้งาน มีทั้ง Gemini Pro ตัวปกติรองรับเฉพาะข้อความ รองรับ context ขนาด 32K และ Gemini Pro Vision ใส่ภาพประกอบได้ด้วย ความพิเศษของ Gemini Pro ที่ปล่อยให้ใช้งานผ่าน API คือมันรองรับภาษาอื่นๆ นอกจากภาษาอังกฤษ รวมทั้งหมด 38 ภาษา

SDK ที่ปล่อยออกมานั้นเปิดให้นักพัฒนาสามารถใช้งานแบบ Generate Content ที่สร้างข้อความต่อจากข้อความที่ผู้ใช้ใส่ลงไป หรือแบบ Chat ที่เป็นการพูดคุยต่อๆ กัน โดยยังไม่มี API แบบ Agent แบบเดียวกับ Assistant API ของ OpenAI

Tags:
Node Thumbnail

กูเกิลประกาศอัพเดต Google Maps ในส่วนความเป็นส่วนตัวในการใช้งาน เริ่มที่ฟีเจอร์บันทึกประวัติพิกัดที่เดินทางไป (Location History) ซึ่งถูกปิดไว้เป็นค่าเริ่มต้น แต่หากใครเลือกเปิดไว้เพื่อให้ดูประวัติไทม์ไลน์ได้อย่างสะดวก อย่างน้อยก็อาจเคยใช้เทียบไทม์ไลน์ช่วงโควิด การเปลี่ยนแปลงคือข้อมูลพิกัดนี้ จะย้ายมาเก็บที่ระดับอุปกรณ์แทน จากเดิมเก็บไว้ในคลาวด์ของกูเกิล ผู้ใช้งานสามารถสำรองข้อมูลนี้ไว้บนคลาวด์ก็ได้ถ้าต้องการ

Tags:
Node Thumbnail

LINE NEXT บริษัทในเครือ LINE ที่โฟกัสการพัฒนาระบบนิเวศ NFT ประกาศรับเงินลงทุน 140 ล้านดอลลาร์ จาก Crescendo Equity Partners บริษัทการลงทุนของ Peter Thiel ผู้ร่วมก่อตั้ง PayPal และ Palantir

LINE กล่าวว่าการลงทุนนี้เป็นจำนวนเงินมากที่สุดในอุตสาหกรรมบล็อกเชน Web3 ภูมิภาคเอเชีย ซึ่งเงินลงทุนนี้ LINE NEXT จะใช้เปิดตัว DOSI แพลตฟอร์ม NFT ในเดือนมกราคม 2024 หลังจากทดสอบเบต้าแล้วในหลายประเทศ รวมทั้งเชื่อมต่อกับ LINE NFT ในญี่ปุ่น นอกจากนี้จะนำเงินลงทุนมาขยายบริการใหม่ ๆ บน Web3

LINE NEXT จะสร้างบริการต่าง ๆ บนบล็อกเชนพับลิก Finschia รวมถึงเข้าร่วม Finschia Foundation ในฐานะสมาชิกด้วย

ที่มา: LINE

Tags:
Node Thumbnail

เมื่อปี 2017 พนักงานของกูเกิลจำนวน 8 คน ร่วมกันเขียนเปเปอร์ชื่อ Attention Is All You Need เสนออัลกอริทึม Transformer ที่กลายเป็นรากฐานของโมเดล AI ขนาดใหญ่ในปัจจุบัน

ปัจจุบันพนักงานทั้ง 8 คนไม่มีใครอยู่กับกูเกิลแล้ว แต่ละคนแยกย้ายกันไปเปิดบริษัทของตัวเอง บริษัทที่ดังที่สุดน่าจะเป็น Character.ai ที่ก่อตั้งโดย Noam Shazeer ที่มีชื่ออยู่ลำดับสองในเปเปอร์ และเป็นหนึ่งในทีมพัฒนา TensorFlow

ล่าสุด Ashish Vaswani ผู้เขียนเปเปอร์ที่มีชื่ออยู่อันดับแรก และ Niki Parmar ชื่ออันดับสาม เปิดตัวบริษัทใหม่ชื่อ Essential AI ซึ่งมีนักลงทุนชื่อดัง (รวมถึงกูเกิลเองด้วย) ร่วมลงทุนซีรีส์ A อย่างล้นหลาม 56.5 ล้านดอลลาร์

Tags:
Node Thumbnail

หลังจากเลื่อนวันวางจำหน่ายมา 3 ครั้ง The Day Before ได้วางจำหน่ายจริงในรูปแบบ Early Access ในพีซีผ่าน Steam เมื่อวันที่ 7 ธันวาคม 2023 ที่ผ่านมาแล้ว ผลตอบรับของเกมนี้เรียกได้ว่าหายนะ เนื่องจากมีบั๊คจำนวนมาก และฟีเจอร์หลายอย่างที่อยู่ในตัวอย่างกลับไม่มีในเกมจริงแต่อย่างใด

หลังจากวางขายใน Steam ได้เพียง 4 วัน Fntastic Studio ผู้พัฒนาเกมก็ออกมาประกาศผ่าน X ว่า The Day Before ล้มเหลวทางด้านรายได้ และทีมงานขาดเงินทุนที่จะพัฒนาเกมต่อ ทำให้ไม่สามารถออกแพตช์ใหม่เพื่อเปิดเผยศักยภาพของเกมอย่างเต็มที่ได้

Tags:
Node Thumbnail

หลังจาก iOS 17.2 สำหรับผู้ใช้งานทั่วไปออกมาเมื่อวานนี้ แอปเปิลก็ออกอัพเดตซอฟต์แวร์รุ่นทดสอบสำหรับนักพัฒนา iOS 17.3 เบต้า ต่อทันที ซึ่งในเวอร์ชันแรกนี้มีฟีเจอร์ใหม่ด้านความปลอดภัยที่น่าสนใจ คือระบบป้องกันอุปกรณ์ที่ถูกขโมยสำหรับ iPhone (Stolen Device Protection)

Tags:
Node Thumbnail

ไมโครซอฟท์ปล่อยโมเดลภาษาขนาดเล็ก (small language model หรือ SLM) ชื่อ Phi-2 ขนาด 2.7 พันล้านพารามิเตอร์ ให้ลูกค้าใช้งานบน Azure AI Studio

Phi-2 เป็นผลงานพัฒนาของทีม Machine Learning Foundations ภายใต้ Microsoft Research ตัวมันเองเป็นโมเดลแบบ Transformer เทรนบนข้อมูลขนาด 1.4T token บนเครื่อง NVIDIA A100 GPU จำนวน 96 ตัว ใช้เวลาเทรน 14 วัน ถือเป็นโมเดลที่สร้างโดยคนของไมโครซอฟท์เอง ไม่ต้องพึ่งพาฝั่ง OpenAI

ไมโครซอฟท์เปิดตัว Phi-2 ครั้งแรกในงาน Ignite เมื่อเดือนที่แล้ว จุดเด่นของมันคือเป็นโมเดลขนาด 2.7B ที่มีประสิทธิภาพใกล้เคียงหรือเหนือกว่าโมเดลขนาดที่ใหญ่กว่ามัน 25 เท่า

Tags:
Topics: 
Node Thumbnail

Netflix เปิดเผยข้อมูลสถิติการรับชมคอนเทนต์บนแพลตฟอร์มเพิ่มเติม จากก่อนหน้านี้ Netflix มีการรายงาน Top 10 เป็นรายสัปดาห์ และสถิติคอนเทนต์ยอดนิยมตลอดกาล มาตั้งแต่ปลายปี 2021

รายงานการรับชมคอนเทนต์ทั้งหมดบนแพลตฟอร์มมีชื่อว่า "What We Watched: A Netflix Engagement Report" โดยจะเผยแพร่ปีละ 2 ครั้ง เป็นรายงานตัวเลขการรับชมในระยะเวลา 6 เดือน แสดงข้อมูลชั่วโมงที่รับชมของทุกคอนเทนต์ ทั้งออริจินัลและซื้อลิขสิทธิ์ รวมทั้งระบุว่าคอนเทนต์นั้นฉายเฉพาะบางพื้นที่หรือฉายทั่วโลก เงื่อนไขเพิ่มเติมคือชั่วโมงรับชมต้องมากกว่า 50,000 ชั่วโมงขึ้นไป และตัวเลขจะรายงานโดยปัดเป็นหลักแสน

Tags:
Node Thumbnail

Bloomberg อ้างแหล่งข่าวใกล้ชิด ระบุว่า X/Twitter มีรายได้จากโฆษณาราว 2.5 พันล้านดอลลาร์ในช่วงสามไตรมาสแรกของปี 2023

ตัวเลขเฉลี่ยรายได้จากโฆษณาต่อไตรมาสของ X อยู่ที่ราว 600 ล้านดอลลาร์ (ลดลงจากปี 2022 ที่ X ทำรายได้จากโฆษณาได้ไตรมาสละ 1,000 ล้านดอลลาร์) หากในไตรมาสสุดท้ายของปียังรักษาตัวเลขระดับนี้ได้ เท่ากับว่ารายได้ทั้งปีจะอยู่ราว 3.4 พันล้านดอลลาร์

ปกติแล้ว X มีรายได้จากโฆษณาคิดเป็น 70-75% ของรายได้ทั้งหมด ส่วนที่เหลือคือรายได้จาก subscription (Twitter Blue หรือ X Premium) และการขายข้อมูลจาก API (ในปี 2021 ขายข้อมูลได้ 572 ล้านดอลลาร์ต่อปี)

Tags:
Topics: 
Node Thumbnail

TCL ผู้ผลิตหน้าจอสัญญาติจีนเปิดตัวจอมอนิเตอร์สำหรับเล่นเกมรุ่นต้นแบบในงาน DTC2023 ประเทศจีน จอมอนิเตอร์ตัวนี้จะมีลักษณะเหมือนโดม กล่าวคือหน้าจอมีความโค้งด้านบนและด้านล่างของจอ (ต่างจากจอโค้งที่โค้งจากมุมซ้าย และขวา) โดย TCL บอกว่ามอนิเตอร์รุ่นนี้จะนำประสบการณ์ 3 มิติแบบใหม่มาสู่การเล่นเกม ส่วนสเปคอื่น ๆ ของมอนิเตอร์ประกอบไปด้วย หน้าจอแบบ OLED, ขนาด 31 นิ้ว, ความละเอียด 4K และอัตราการรีเฟรช 120Hz

Tags:
Node Thumbnail

ถึงแม้เป็นคู่แข่งกันโดยตรงในวงการสตรีมมิ่ง แต่เมื่อรายการไม่ได้ซ้อนทับกัน ดีลธุรกิจก็เกิดขึ้นได้เสมอ ล่าสุด Netflix เซ็นสัญญากับ Disney ซื้อไลเซนส์รายการในเครือ Disney รวม 14 รายการไปฉายบน Netflix ตามกรอบเวลา 18 เดือน

รายการสำคัญในดีลรอบนี้คือซีรีส์ Grey’s Anatomy ของสถานีทีวี ABC ในเครือ Disney ที่กำลังจะออกซีซัน 20 (Netflix ได้ 19 ซีซันก่อนหน้าไปฉาย) นอกจากนี้ยังมีซีรีส์เรื่องอื่น เช่น Lost, This Is Us, Prison Break, Archer, How I Met Your Mother, White Collar, Home Improvement, The Resident, ESPN 30 for 30, My Wife and Kids, Reba, The Bernie Mac Show, Wonder Years รวมถึงซีรีส์ใหม่ The Hughleys ที่จะเริ่มฉายในปีหน้า

Tags:
Node Thumbnail

ทีมวิจัยจาก Indiana University Bloomington รายงานถึงความสำเร็จในการสร้างหน่วยประมวลผลปัญญาประดิษฐ์ที่ใช้เซลล์สมองจริงๆ มาทดแทนชิปเซมิคอนดักเตอร์ เรียกว่า Bainoware

ทีมวิจัยเลี้ยงกลุ่มเซลล์สมอง (brain organoid) แล้วไปวางบนแผงขั้วไฟฟ้า แล้วต่อขั้วไฟฟ้า จากนั้นแปลงข้อมูลอินพุตให้กลายเป็นการกระตุ้นไฟฟ้าเข้าไปยังเซลล์สมอง แล้วอ่านค่าจากการตอบสนองของเซลล์

Tags:
Node Thumbnail

ถ้ายังจำกันได้ ปีที่แล้ว 2022 สหรัฐอเมริกาผ่านกฎหมาย CHIPS Act ที่มีเป้าหมายส่งเสริมการผลิตชิปบนแผ่นดินอเมริกา เนื้อหาของกฎหมายฉบับนี้คือรัฐบาลส่งเสริมการลงทุนผลิตชิปให้แก่บริษัทเอกชน ทั้งในรูปแบบเครดิตภาษี และการจ่ายเงินให้โดยตรง

ล่าสุด รัฐบาลสหรัฐประกาศอนุมัติเงินอุดหนุนก้อนแรกภายใต้ CHIPS Act แล้ว โดยให้เงิน BAE Systems บริษัทผู้ผลิตอาวุธสัญชาติอังกฤษ (British Aerospace เดิม) เพื่อปรับปรุงศูนย์ Microelectronics Center (MEC) ในรัฐนิวแฮมป์เชียร์ เป็นมูลค่า 35 ล้านดอลลาร์

Tags:
Node Thumbnail

แอปเปิลประกาศรายชื่อแอปและเกมยอดนิยม ที่มีจำนวนดาวน์โหลดสูงสุดในปีที่ผ่านมาบน App Store โดยแบ่งการจัดอันดับแยกตามประเทศและภูมิภาคต่าง ๆ กว่า 35 แห่ง

ก่อนหน้านี้แอปเปิลเพิ่งประกาศรายชื่อแอปและเกมโดดเด่นในปีที่ผ่านมา App Store Award 2023

รายชื่อแอปและเกมยอดนิยมทั้งหมดของ App Store ประเทศไทยในปีที่ผ่านมาเป็นดังนี้

Tags:
Node Thumbnail

VMware ซึ่งปัจจุบันมี Broadcom เป็นเจ้าของ ประกาศเปลี่ยนรูปแบบการขายไลเซนส์มาเป็นแบบ Subscription ทั้งหมด โดยมีผลตั้งแต่ 11 ธันวาคมเป็นต้นไป จะไม่มีการขายไลเซนส์ของผลิตภัณฑ์ VMware แบบขายขาด (perpetual license) รวมทั้งไม่มีการขายแผนสนับสนุน (support and subscription - SnS) ให้ผลิตภัณฑ์ VMware แบบไลเซนส์ขายขาดอีกต่อไปเช่นกัน ทั้งหมดจะมีเฉพาะแบบ Subscription เท่านั้น

Tags:
Topics: 
Node Thumbnail

ศาลสหรัฐฯ สั่งจำคุก Miklos Daniel Brody หลังเขาสารภาพว่าลบข้อมูลของธนาคาร First Republic Bank (FRB) จากความโกรธแค้นที่ถูกไล่ออกเพราะทำผิดนโยบายบริษัท

Brody ทำงานใน FRB ในตำแหน่ง Cloud Engineer ทำให้มีสิทธิ์เข้าถึงข้อมูลจำนวนมาก แต่ถูกไล่ออกเนื่องจากใช้ไดร์ฟ USB ส่วนตัวที่บรรจุภาพโป๊อยู่ในคอมพิวเตอร์ของธนาคารเมื่อปี 2020 เมื่อถูกไล่ออกแล้ว เขาล็อกอินเข้าเซิร์ฟเวอร์ รันสคริปต์ลบข้อมูลในเซิร์ฟเวอร์, ลบ git log ของสคริปต์ที่ใช้รัน, ลบโค้ดของธนาคารบน GitHub, ปลอมล็อกอินเป็น Cloud Engineer คนอื่นแล้วแก้ไขคอนฟิกระบบ สุดท้ายเขาไปแจ้งความว่าโน้ตบุ๊กหาย จึงไม่สามารถคืนเครื่องให้ธนาคารได้

Tags:
Node Thumbnail

BlackBerry ประกาศแต่งตั้ง John Giamatteo ประธานส่วนธุรกิจ Cybersecurity ขึ้นเป็นซีอีโอคนใหม่ของบริษัท ตามแผนการปรับโครงสร้างธุรกิจที่ประกาศก่อนหน้านี้

อย่างไรก็ตาม BlackBerry บอกว่าตามแผนเดิมที่บริษัทจะแยกธุรกิจ IoT ไอพีโอเข้าตลาดหุ้น ตอนนี้แผนดังกล่าวยกเลิกแล้ว

BlackBerry ปัจจุบันไม่มีธุรกิจโทรศัพท์มือถือแล้ว โดยมีธุรกิจหลักคือบริการ Cybersecurity และธุรกิจ IoT ซึ่งได้มาจากการซื้อกิจการ QNX ที่เป็นระบบปฏิบัติการในลูกค้ากลุ่มรถยนต์ และหุ่นยนต์โรงงานอุตสาหกรรม

Tags:
Topics: 
Node Thumbnail

หลังจากประสบปัญหาในการจัดงานช่วงหลายปีที่ผ่านมา The Entertainment Software Association หรือ ESA ผู้จัดงานนิทรรศการเกม E3 ได้ตัดสินใจยุติการจัดงาน E3 ในอนาคตแล้ว

ESA กล่าวว่าหลังจากผ่านมามากกว่า 2 ทศวรรษของการจัดงานนิทรรศการ E3 ที่นำเสนออุตสาหกรรมวิดีโอเกมในอเมริกาและทั่วโลก ตอนนี้ก็ถึงเวลายุติการจัดงาน E3 แล้ว ส่วน ESA ยังคงบทบาทในการสนับสนุนสมาชิกทั้งองค์กรและคนทำงาน เพื่อร่วมพัฒนาวงการกันต่อไป

Tags:
Node Thumbnail

Reuters อ้างแหล่งข่าวที่เกี่ยวข้อง รายงานผลสืบเนื่องจากที่คณะกรรมการยุโรป (European Commission) ประเมินว่าบริการ Apple Pay เข้าข่ายผูกขาดระบบจ่ายเงินบน iOS เพราะเป็นแอปเดียวที่เข้าถึง NFC ได้ เมื่อปีที่แล้ว ซึ่งตอนนั้นก็ยังไม่มีการระบุว่าแอปเปิลมีความผิด อย่างไรก็ตามดูเหมือนแอปเปิลก็เตรียมรับมือล่วงหน้าเลย

รายงานบอกว่าแอปเปิลได้เริ่มพูดคุยกับผู้ให้บริการระบบจ่ายเงินในกลุ่มประเทศ EU ถึงวิธีการเข้าถึง NFC และระบบแตะเพื่อจ่าย (Tap-and-go) ในอุปกรณ์ iOS แล้ว ซึ่งคาดว่าคณะกรรมการยุโรปน่าจะออกคำตัดสินว่าแอปเปิลมีความผิดหรือไม่ในเดือนหน้า

Tags:
Node Thumbnail

Sam Altman ซีอีโอ OpenAI ปรากฏตัวต่อสาธารณะครั้งแรกหลังจากเกิดเรื่องราวภายใน ที่เขาถูกบอร์ดไล่ออก และกลับมาเป็นซีอีโออีกครั้ง โดยเข้าร่วมงานสัมมนาที่จัดโดยองค์กร Operation HOPE ซึ่งเป็นการพูดคุยถึงอนาคตของ AI

Sam ยืนยันว่า AI จะทำให้โลกก้าวหน้าขึ้นไปอีก โดยเฉพาะการพัฒนาด้านสุขภาพและการศึกษา ที่ผ่านมาคนมักนึกถึง AI ในหน้าตาแบบภาพยนตร์ Terminator แต่ภารกิจของ OpenAI คือก้าวข้ามสิ่งเหล่านั้น และแสดงให้โลกเห็นถึงโอกาสใหม่ ๆ จาก AI

Tags:
Topics: 
Node Thumbnail

โครงการเคอร์เนลลินุกซ์ออกเวอร์ชั่น 6.6.6 หลังการออกเวอร์ชั่น 6.6.5 เพียงไม่กี่วันเพื่อแก้ปัญหาบั๊กไดร์เวอร์ Wi-Fi

ตัวเลข 6.6.6 เป็นตัวเลขที่หลายชาติตะวันตกมองว่าเป็นสัญลักษณ์ของซาตานจากการอ้างอิงในไบเบิล อย่างไรก็ดีเคอร์เนลลินุกซ์ที่ผ่านมามักมีการแก้บั๊กเล็กๆ น้อยๆ นับสิบเวอร์ชั่นย่อย เช่นเคอร์เนล 6.1 รุ่น LTS ก่อนหน้านี้นั้นมีรุ่นย่อยแก้บั๊กไปจนถึง 6.1.67 การที่เลขเวอร์ชั่นมาถึง 6.6.6 ก็ไม่ใช่เรื่องแปลกแต่อย่างใด

ที่มา - Phoronix

Tags:
Node Thumbnail

Oracle รายงานผลประกอบการประจำไตรมาสที่ 2 ตามปีการเงินบริษัท 2024 สิ้นสุดเดือนพฤศจิกายน รายได้ 12,941 ล้านดอลลาร์ เพิ่มขึ้น 5% เมื่อเทียบกับไตรมาสเดียวกันในปีก่อน กำไรสุทธิอยู่ที่ 2,503 ล้านดอลลาร์ เพิ่มขึ้น 44%

รายได้จากบริการคลาวด์และสนับสนุนไลเซนส์ เพิ่มขึ้น 12% เป็น 9,639 ล้านดอลลาร์, รายได้จากไลเซนส์คลาวด์และไลเซนส์ออนพรีมิส 1,178 ล้านดอลลาร์ ลดลง 18%, รายได้จากฮาร์ดแวร์ลดลงเป็น 756 ล้านดอลลาร์ และรายได้ด้วย Services อยู่ที่ 1,368 ล้านดอลลาร์

Tags:
Node Thumbnail

คณะลูกขุนในคดีที่ Epic Games ฟ้องกูเกิลในข้อหาผูกขาดแอปสโตร์ ออกคำตัดสินแบบเป็นเอกฉันท์ว่ากูเกิลมีพฤติกรรมผูกขาดบน Android และทำให้ Epic ได้รับผลกระทบทางธุรกิจ

Wilson White ตัวแทนของกูเกิลออกแถลงการณ์ ว่าจะอุทธรณ์คำตัดสินในคดีนี้ โดยยืนยันว่า Android และ Google Play เป็นแพลตฟอร์มเปิดและให้ทางเลือกมากกว่า และบอกว่าข้อมูลจากการไต่สวนแสดงให้เห็นว่ากูเกิลอยู่ในการแข่งขัน ทั้งกับ App Store ของแอปเปิล และสโตร์อื่นบน Android

Tags:
Topics: 
Node Thumbnail

Mistral AI บริษัทปัญญาประดิษฐ์จากฝรั่งเศสเปิดตัวโมเดลรุ่นใหม่ในชื่อ Mixtral 8x7B เป็นโมเดลที่อาศัยสถาปัตยกรรม mixture-of-experts (MoE) ผสมเอาท์พุตระหว่างโมเดลย่อยๆ ภายใน

ขนาดโมเดลรวม 46.7 พันล้านพารามิเตอร์ แต่ระหว่างรันจริง โมเดลจะเรียกใช้โมเดลที่เหมาะสมเพียง 2 ตัวจาก 8 ตัว จากนั้นจะเลือกเอาท์พุตแต่ละโทเค็นจากสอง 2 ตัวนั้นมาใช้งาน ทำให้เวลารันจริงจะใช้พลังประมวลผลเครื่องเท่ากับโมเดลขนาด 12.9 พันล้านพารามิเตอร์เท่านั้น

แนวทาง MoE ทำให้ Mixtral มีคะแนนทดสอบชุดทดสอบต่างๆ ใกล้เคียง GPT-3.5 แม้ขนาดโมเดลและพลังประมวลผลที่ใช้รันจะน้อยกว่ามาก คะแนนทดสอบหลายชุดดีกว่า LLaMA 2 มากแม้จะเทียบกับโมเดลขนาด 70B ก็ตาม

Pages