Tags:
Node Thumbnail

Geoffrey Hinton และ John Hopfield เป็นนักวิทยาศาสตร์ที่ได้รางวัลโนเบลสาขาฟิสิกส์ประจำปี 2024 จากผลงานวิจัยด้าน machine learning

John Hopfield ปัจจุบันอายุ 91 ปีแล้ว เขาจบปริญญาเอกสาขาฟิสิกส์จาก Cornell University และเป็นผู้บุกเบิกงานวิจัยด้าน neural network และคิดค้น Hopfield network เครือข่ายนิวรอนแบบชั้นเดียว ที่นิวรอนแต่ละตัวเชื่อมกับนิวรอนตัวอื่น

Geoffrey Hinton ปัจจุบันอายุ 76 ปี เขาเป็นที่รู้จักในนาม Godfather of AI โดยเฉพาะเรื่อง deep learning นอกจากงานวิชาการแล้ว เขาทำงานอยู่กับกูเกิลระหว่างปี 2013-2023 และเพิ่งลาออกเมื่อปี 2023 เพื่อให้พูดเรื่องอันตรายจาก AI ได้อย่างเต็มที่ ตัวอย่างลูกศิษย์ที่มีชื่อเสียงของเขาได้แก่ Yann LeCun (Meta/Facebook) และ Ilya Sutskever (OpenAI/Safe Superintelligence)

ที่มา - Noble Prize, BBC

No Description

Get latest news from Blognone

Comments

By: Yess24Hrs on 8 October 2024 - 21:14 #1324369
Yess24Hrs's picture

เยี่ยม เหมาะสมอยู่น่ะ

By: Jonathan_Job
WriteriPhoneUbuntuWindows
on 8 October 2024 - 23:33 #1324381
Jonathan_Job's picture

อืมมม สงสัยว่าทำไมจัดให้ Machine Learning ไปอยู่ในสาขา Physics

หรือว่าเป็นเพราะสาขาของ Nobel มีแค่ Physics, Chemistry, Physiology or Medicine, Literature, Peace, Economic Sciences ?

By: Jirawat
Android
on 9 October 2024 - 01:44 #1324387 Reply to:1324381
Jirawat's picture

นั่นสินะผมว่ามันมีสาขาคอมพิวเตอร์ไหมนะ แต่ก้ยินดีด้วย(ถ้า ai ก่อสงครามเดึ๋ยวค่อยว่ากันใหม่)

By: mk
FounderAndroid
on 9 October 2024 - 07:44 #1324391 Reply to:1324381
mk's picture

ใช่ครับ

By: tontpong
Contributor
on 11 October 2024 - 07:24 #1324560 Reply to:1324381

น่าจะเรียงเป็น Hopfield แล้ว Hinton ปะนะ ?

neural network (nn) แรกเริ่มอิงตาม anatomy ของระบบประสาทในสมอง (biology/physiology) .. ก็เห็นเป็น node , มี link เชื่อม , และอนุมานว่าข้อมูลจากแต่ละ link จะมีความสำคัญ (weight) ไม่เท่ากัน

ยังไม่มีเรื่องความจำ (memory) , ก็จาก anatomy มันมองไม่เห็น มัน static นิ่งๆ .. ซึ่งถ้าข้อมูลวิ่งทางเดียว (feedforward) มันก็พอใช้งานได้ , แต่ถ้าข้อมูลมีวิ่งวนกลับ เกิดเป็น network ที่มี feedback/cycle/recurrent อันนี้จะยุ่งละ (อิงแบบตรงไปตรงมาจากโครงสร้างเดิมก็คือ ตอนวนกลับมานี่ weight มันน่าจะต้องเปลี่ยน , แต่ว่าจะเปลี่ยนยังไงละ 😶)

ในทางจิตวิทยา คือความจำก่อให้เกิดการเรียนรู้แหละ , แต่มันถอด mechanism มาเป็น computational model ยาก .. ทว่า Hopfield ดูไปศึกษามา , ก็รับจบด้วยการประยุกต์เอา statistical mechanics (น่าจะเป็นในส่วนของ magnetism model) จากโลกของ physics มาปรับใช้จนเกิดเป็น computational associative memory ได้ ทำให้ network มีความ dynamics และช่วยคลี่คลายการใช้ recurrent nn (rnn) ให้เป็นไปได้ง่ายขึ้น

https://www.sciencealert.com/nobel-prize-in-physics-how-hopfield-and-hintons-ai-changed-our-world

https://en.wikipedia.org/wiki/Hopfield_network

By: tontpong
Contributor
on 11 October 2024 - 08:33 #1324567 Reply to:1324560

Hinton ก็ต่อยอดจาก Hopfield ด้วยการเอา Boltzmann distribution จาก statistical mechanics มาใช้ , ได้เป็น Boltzmann machines

แล้วอันนี้ก็กลายเป็นจุดเริ่มความนิยมของ machine learning แบบ energy-based model (ebm) .. ซึ่งประยุกต์เอาองค์ความรู้ทางด้าน physics มาใช้ , และนิยมใช้กันกับ gen ai ที่สามารถ generate/expand pattern ใหม่ออกมา (ของ Hopfield , ส่วนมากยังอิงกับการ detect/recognise pattern)

https://en.m.wikipedia.org/wiki/Boltzmann_machine

https://en.m.wikipedia.org/wiki/Energy-based_model

By: tontpong
Contributor
on 11 October 2024 - 21:24 #1324628 Reply to:1324567

ลองแหย่ chatgpt แบบแทบไม่ hint ไม่มี context
, แทบจะมีแค่ชื่อให้ match แต่ก็ยังตรงเข้าเรื่องได้เลยแหะ .. แต่ก็ไล่ทักถามเพิ่ม อีกพักนึงเลย , ถึงจะโผล่คำว่า backpropagation

https://chatgpt.com/share/6709315f-035c-800b-ae56-7c8598528e75

By: btoy
ContributorAndroidWindows
on 9 October 2024 - 09:22 #1324401
btoy's picture

เยี่ยมครับ


..: เรื่อยไป