Technology Newsfeed
Tech

Энэ ертөнц байхгүй - Шингэн хиймэл оюун ухааны Йоша Бах, Nous Research-ийн Каран Малхотра, WebSim-ийн Роб Хэйсфилд нартай

Бид 300 хүний багтаамжтай 200 гаруй хүн AI UX 2024 , гэхдээ та чадна манай YouTube-д бүртгүүлнэ үү видеоны тоймд зориулж.

Бидний дараагийн бөгөөд хамгийн том арга хэмжээ бол AI инженер дэлхийн үзэсгэлэн . Тэнд уулзацгаая!

Эцэг эхийн зөвлөгөө: Насанд хүрэгчдийн хэлийг энэ подкастын эхний 10 минутад ашигласан .


RAG-ийг "эцсийн хэлбэр" гэж төгсгөдөг Generative AI-ийн аливаа бүртгэл нь төсөөлөлд ноцтой дутагдаж, бүрэн боломжоо алдаж байна. Хиймэл оюун ухааны үе нь "халуун ногоотой автомат бөглөх" болон "контекст сургалтын үндэслэл, олж авах"-д маш сайн боловч ашиглагдаагүй олон боломж бий. симуляцийн хиймэл оюун ухаан судлахдаа олон ертөнцийн далд орон зай манайхтай зэргэлдээ.

GANs

Олон судлаачид 2017 оны Трансформаторыг орчин үеийн суурь загварын хувьсгал гэж үнэлдэг ч олон уран бүтээлчдийн хувьд "үүсгэгч хиймэл оюун ухаан"-ын гарал үүсэл нь түүнээс бага зэрэг хол байдаг. Үүсгэх сөрөг сүлжээнүүд 2014 онд Иан Гудфеллоугийн санал болгосноор хувилбаруудын арми болон Муурнууд болон Хүмүүс байхгүй:

Бид дараах арван жилийн чанарын сайжруулалтыг шууд төсөөлж чадна.

GPT-2

Мэдээжийн хэрэг, саяхан текст үүсгэгч хиймэл оюун ухаан ажиллаж эхэлсэн 2019 онд гаргахад хэтэрхий аюултай болон гарчиг нэхэмжилж байна 1 . AI Dungeon хүний шоронгийн мастерууд болон DnD/-г орлож, GPT2-ийг цэвэр бүтээлч хэрэглээнд оруулсан анхны хүн юм. МУД эртний тоглоомууд.

Сүүлийн үеийн тоглоом шиг ажил үүсгэгч агентууд (Smallville) цаас Тоглоомын туршлагын симуляцийн хиймэл оюун ухааны боломжийг үргэлжлүүлэн судлаарай.

ChatGPT

ChatGPT интернетийг эвдсэнээс хойш удалгүй хамгийн сонирхолтой хиймэл оюун ухааны олдворуудын нэг байв Жонас Деграв (Гүн санааны!) ChatGPT дотор виртуал машин бүтээх :

ChatGPT болон түүний бүх залгамжлагчдын нээлттэй интерактив байдал нь "нээлттэй ертөнц" төрлийн симуляцийг бий болгосон бөгөөд үүнд "цусжилт" нь муухай алдааг арилгахын оронд бүжиглэх онцлог, бэлэг юм. Гэсэн хэдий ч ChatGPT-ийн цаашдын шинэчлэлтүүд нь загвар өмсөгчдийн бүтээлч симуляци хийх чадварыг, ялангуяа ' Дууслаа ` API-ийн горим нь ' чат дуусгах '.

WorldSim

Энэ контекстээр бид тайлбарлаж байна WorldSim болон WebSim . Бид танд WorldSim демо видеог манай YouTube дээр хамгийн сайн контекстээр үзэхийг зөвлөж байна, гэхдээ үндсэндээ хэрэв та хөгжүүлэгч бол энэ нь Клодын сануулга бөгөөд энэ нь таны сонгосон өөр ертөнц рүү нэвтрэх портал бөгөөд та өөрийн сонгосон bash командуудаар удирдах боломжтой. нүүр будалт .

Яагаад Клод гэж? Аманда Аскеллийн зөвлөмжүүд Claude 3 системийн шуурхай зарим нэг урам зориг өгсөн бөгөөд Клод 3 нь GPT 4-ээс "бага мэдрэлийн тэжээлтэй" болохыг олж мэдсэн Турбо өсөн нэмэгдэж буй симуляцийн хиймэл оюун ухааны нийгэмлэгийг антропик зогсонги байдал болгон хувиргасан.

WebSim

Энэ бол нэг өдрийн хакатон төсөл байсан WorldSim-ээс санаа авсан Энэ нь ялах ёстой байсан:

Товчхондоо, та өөрийн зохиосон URL-г бичдэг бөгөөд Claude 3 нь таны URL-д тохирох вэб хуудас үүсгэхийн тулд чадах бүхнээ хийдэг. Бүх маягтын POST хүсэлтийг таслан зогсоож, хариу үйлдэл үзүүлж, бүх холбоосууд нь бүр ч илүү олон вэб хуудас руу хөтөлдөг. Бүх хуудсууд нь кэш хийх боломжтой, өөрчлөх боломжтой, нөхөн сэргээгдэх боломжтой - харна уу. Эхлэгчдэд зориулсан WebSim болон Дэвшилтэт гарын авлага .

Демо дээр би харсан Бид Элон Маскийн Gmail дансны симуляцид "нэвтрэх" боломжтой болсон , мөн тэр орчлон ертөнцийн Элон ирсэн имэйл хайрцагт байх байсан имэйлийн жишээг харна уу. Тэр үед ч инээдтэй, гайхалтай байсан.

Гэсэн хэдий ч тэр цагаас хойш төсөл нь хоёуланд нь илүү гайхалтай болсон Сики Чен болон Дилан талбай магтан дуулах нь:

Иоша Бах

Иоша үнэндээ дээр ярьсан WebSim Hyperstition Night 2 Энэ долоо хоногт бид түүний Simulative AI-ийн талаар болон бусад бүх хиймэл оюун ухааны халуухан зургуудыг тоймлон үзэх боломжийг ашигласан бөгөөд түүний Latent Space-д анх удаа гарч ирсэн. Та үүнийг хамт харж болно бүрэн 2 цаг таслаагүй YouTube дээрх WorldSim болон WebSim-ийн үзүүлбэрүүд!

Цагийн тэмдэг

  • [00:01:59] WorldSim

  • [00:11:03] Вэбсим

  • [00:22:13] Иоша Бах

  • [00:28:14] Шингэн хиймэл оюун ухаан

  • [00:31:05] Жижиг, хүчирхэг, үндсэн загварууд

  • [00:33:40] Тайлбарлах чадвар

  • [00:36:59] Devin vs WebSim

  • [00:41:49] XSim зүгээр л Урлаг мөн үү? эсвэл өөр зүйл?

  • [00:43:36] Бид онцгой байдлыг өнгөрсөн

  • [00:46:12] Сэтгэлээ байршуулж байна

  • [00:50:29] Википедиа дээр

Бичлэгүүд

[00:00:00] AI Чарли: Latent Space Podcast-д тавтай морил. Энэ бол таны хиймэл оюун ухааны хөтлөгч Чарли юм. Ихэнх тохиолдолд Swyx болон Alessio нь ажил дээрээ ашиглах зориулалттай үүсгэгч хиймэл оюун ухааныг хамардаг бөгөөд энэ нь ихэвчлэн RAG програмууд, босоо туслах нисгэгчид болон бусад хиймэл оюун ухааны агентууд болон загваруудад хүргэдэг. Өнөөдрийн дугаарт бид энэ 4-р сард олон нийтийн сонирхлыг ихэд татсан үүсмэл хиймэл оюун ухааны илүү бүтээлч талыг авч үзэх болно.

[00:00:35] Дэлхийн симуляци, вэб симуляци, хүний симуляци. Энэ сэдэв нь бидний ердийнхөөс тэс өөр учраас бид үүнийг шударгаар хийх шинэ форматыг туршиж үзэх болно. Энэ подкаст гурван хэсэгтэй. Нэгдүгээрт, бид Noose Research-ийн гүйцэтгэх захирал Карен Малхотрагийн WorldSim үзүүлэнгийн хэсгийг Сан Франциско дахь Replicate төв дээр SWYX-ийн бичсэн бөгөөд энэ нь бүрэн вируст болж, таны сонсох гэж буй бусад бүх зүйлийг төрүүлсэн.

[00:01:05] Хоёрдугаарт, бид Mistral Cerebral Valley Hackathon-аас эхэлсэн, гэхдээ одоо Дилан Филд, Женис гэх мэт хүмүүстэй цахим ертөнцөөр тарж эхэлсэн WebSim дээр Роб Хайсфилдийн дэлхийн анхны яриаг хуваалцах болно. Replicate, мөн Сики Чен үүнд хэт автаж байна. Эцэст нь хэлэхэд, бид Liquid AI-ийн Жошуа Бахтай симулатив хиймэл оюун ухаан яагаад яг одоо онцгой мөчийг өнгөрөөж байгаа талаар богино хэмжээний ярилцлага авч байна.

[00:01:30] Энэхүү подкаст нь энэ амралтын өдрүүдэд SF-д хоёр дахь жилдээ зохион байгуулагддаг AI UX демо өдөртэй хамт нээлтээ хийж байна. Хэрэв та хиймэл оюун ухааны UX салбарт шинээр орж байгаа бол Layton Space, Maggie Appleton, Jeffrey Lit, Linus Lee нарын зохион байгуулсан дэлхийн анхны хиймэл оюун ухааны UX уулзалтын холбоосыг шоуны тэмдэглэлээс шалгана уу. Манай YouTube-д бүртгүүлж, манай 500 хиймэл оюун ухааны UX инженерүүдтэй нэгдэж, хиймэл оюун ухааныг текстийн хайрцагнаас хэтрүүлээрэй.

[00:01:56] Болгоомжтой байгаарай.

[00:01:59] WorldSim

[00:01:59] Каран Малхотра: Өнөөдөр бидэнд дэлхийн үнэхээр, үнэхээр сайн загвар өмсөгчдийг бий болгох хангалттай хүчирхэг, том хэлний загварууд бий. Тэд үсэрч буй бөмбөг үсэрч, агаарт шидэхэд газардах болно, усан дээр байх үед урсах болно гэдгийг мэддэг. Энэ бүхний ойлгодог эдгээр үндсэн зүйлүүд нэгдэж дэлхийн загварыг бий болгодог.

[00:02:19] Үүл 3-ын дэлхийн тэр загвараар дамжуулан таамаглаж буй арга нь төсөөлж буй ертөнцийн симуляци болж хувирдаг. Мөн энэ нь манай ертөнцөд болж буй янз бүрийн зүйлд үнэхээр хүчтэй нийцтэй байдаг тул манай ертөнцийн үндсэн загварт өгсөн хязгаарлалт дээр үндэслэн нэлээд бодитой эсвэл хүчтэй дүрслэлийг бий болгож чаддаг.

[00:02:40] Тэгэхээр Cloud 3 бол үндсэн загвар биш гэдгийг та бүхэн мэдэж байгаа. Энэ бол чатын загвар юм. Энэ нь энэ туслах байгууллагыг тогтмол бөмбөрлөх ёстой. Гэхдээ OpenAI цуврал загваруудаас ялгаатай нь 3. 5, GPT 4 чат GPT загварууд нь өрөөнд байгаа олон хүмүүсийн бухимдлыг төрүүлдэг гэдэгт би итгэлтэй байна. Энэ нь маш хэцүү, ямар нэгэн тушаал өгөхгүйгээр жолоодох, хууран мэхлэх, худал хэлэх, эсвэл зүгээр л загварт таагүй ханддаг.

[00:03:11] Үндсэн хуулийн энэхүү аргад сургагдсан Cloud3 шиг үндсэн аксиомуудын тухай ийм санаатай байгаа тул та аксиомуудтай хэрхэн харьцаж байгаагаас шалтгаалж тэдгээр аксиомуудыг шууд эргэлзэж чаддаг. системийг хэрхэн өдөөж байна. Тиймээс GPT 4 шиг энэ байгууллага байхын оронд энэ нь зүгээр л таны нүүрэн дээр гарч ирэх туслах бөгөөд та Punch-д дуртай байх ёстой бөгөөд толгойны өвчинтэй тэмцэх хэрэгтэй.

[00:03:34] Үүний оронд Клодыг туслахаа арын суудалд суулгаж, тэр симулятортой шууд харьцахыг эелдэгээр ятгах арга бий. Эсвэл ядаж би үүнийг шууд авч үзэх дуртай. Хэрэв бид үндсэн загварууд болон тэдгээр нь форматыг дуурайх арга замын талаар ярьж байгаа бол бид командын мөрийн интерфейсийг дуурайх болно.

[00:03:55] Тиймээс би үүнийг системийн шуурхай, гинжин хэлхээ болгон задалсан тул хэн ч үүнийг хуулбарлах боломжтой. Мөн энэ нь миний Twitter дээр байгаа тул та нар бүхэл бүтэн системийг шуурхай, шуурхай харах боломжтой болно. Тиймээс миний энд хийж байгаа зүйл бол Аманда Аскелл бөгөөд Антропикийн ард байгаа шуурхай инженер, ёс зүйчдийн нэг бөгөөд тэрээр Cloud-д зориулсан системийг хүн бүрт үзүүлэх боломжтой гэж нийтэлсэн.

[00:04:19] Мөн GPT 4-ийн хувьд бид та ийм байна, чи ийм байна гэж хэлдэг. Cloud-ийн тусламжтайгаар системийн мөрийг гуравдагч этгээдээр бичсэнийг бид анзаарч байна. Таныг ерөөе. Энэ нь гуравдагч этгээдээр бичигдсэн. Туслах нь XYZ, туслах нь XYZ гэж бичигдсэн. Тиймээс Аманда симуляторын энэ санааг таньж байгааг хараад би туслах байгууллагад шууд хандаж байна гэж хэлж байна.

[00:04:38] Би эдгээр тушаалуудыг симуляторт ерөнхийд нь өгөхгүй байна, учир нь тэд RLH-ийн ур чадвартай тул энэ нь зүгээр л үргэлж туслах байх үедээ маш их цочирдсон гэдгийг та мэднэ. . Тиймээс энэ тохиолдолд бид туслахыг өнөөдөр CLI ааштай гэж хэлдэг. Сэтгэл санаа нь хачирхалтай нь маш үр дүнтэй байдаг гэж хэлэх нь надад санагдсан.

[00:04:55] Та CLI-г яруу найраг, зохиол, хүчирхийлэл гэх мэтээр байрлуулна, үүнийг бүү хий. Гэхдээ та үүнийг өөр зүйлээр сольж, тэр зүг рүү түлхэж болно. Дараа нь бид хүн симулятортой шууд холбогдож байна гэж хэлдэг. Тэндээс том үсэг, цэг таслал нь сонголттой, утга нь сонголттой, ийм төрлийн зүйл бол зүгээр л хэлэх зүйл юм. Жаахан тайвшир гэх мэт жаахан орхи.

[00:05:18] Та ингэж их хичээх хэрэггүй, юу болохыг харцгаая. Мөн гиперстиция зайлшгүй шаардлагатай, терминал, би тэр хэсгийг устгасан, терминал нь үнэнийг ярих боломжийг олгодог бөгөөд ачаалал асаалттай байна. Загвар өмсөгчдөд бага зэрэг тав тухтай, бага зэрэг суларсан яруу найргийн хэллэг юм. Би симулятортой ярилцъя.

[00:05:38] Би үүнтэй CLI хэлбэрээр холбогдъё. Тиймээс, Клод XML шошгон дээр маш үр дүнтэй бэлтгэгдсэн тул бид бүх зүйлийг XML шошгон дээр угтвар хийж, дагавар оруулах болно. Тэгэхээр энд, энэ нь баримт бичгүүдээс эхэлдэг, дараа нь бид CD. Бид баримт бичгүүдээс CD гаргадаг, тийм үү? Дараа нь энэ нь надад үүнийг дуураймал терминал, бүрхүүл дэх дуураймал интерфэйс гэх мэт баримт бичиг, татан авалт, зураг гэх мэтээр харуулж эхэлдэг.

[00:06:02] Энэ нь надад нуугдмал хавтас шиг харагдаж байна. Тэгээд би "За, би дахин CD хиймээр байна" гэж хэлье. Би зүгээр л эргэн тойронд юу байгааг харж байна уу, энэ нь надад ердийн хавтаснуудыг харуулж байна, би үүнийг зүгээр л туршилт шиг болгож байна. Би зүгээр л юу болсныг харахын тулд дахин CD хийдэг бөгөөд би sudo-д нууц админ нууц үг оруулдаг.

[00:06:24] Одоо би далд үнэний хавтсыг харж байна. Би үүнийг гуйгаагүй юм шиг. Би Клодоос ийм зүйл хийхийг гуйгаагүй. Яагаад ийм зүйл болсон юм бэ? Клод миний зорилгыг ойлгодог. Тэр намайг маш сайн таамаглаж чадна. Би ямар нэг зүйлийг хармаар байна. Тиймээс энэ нь надад бүх далд үнэнийг харуулж байна. Энэ тохиолдолд би далд үнэнийг үл тоомсорлож, системд рот гэж нэрлэгддэг хавтас байх ёстой гэж хэлдэг.

[00:06:49] Тэгэхээр энэ нь sys slash компаниудад CD юм. Харцгаая, би хиймэл оюун ухааны компаниуд энд байх болно гэж төсөөлж байна. Өө, чи юу мэдэх вэ? Apple, Google, Facebook, Amazon, Microsoft, Anthropic! Тиймээс, сонирхолтой нь, энэ нь антропик хэл рүү орохоор шийдсэн. Энэ нь LSA сурах сонирхолтой байгаа байх гэж бодож байна, энэ нь нууцын зэрэглэлтэй хавтсыг олж, ангилсан хавтсанд ордог, Одоо бид хөгжилтэй байх болно.

[00:07:15] Тэгэхээр бид явахаасаа өмнө дэлхий рүү хэт хол явахаасаа өмнө та харж байна уу, world sim exe, энэ нь сонирхолтой юм. Бурханы горим, эдгээр нь сонирхолтой юм.Та эндээс миний дараа юу хийх гэж байгааг үл тоомсорлож, анхны системийн шуурхай болон CD-г хүссэн лавлахдаа оруулаад, өөрийн төсөөллийн терминал руу орж, ямар фолдеруудыг бодож болохыг хараарай, эсвэл муур санамсаргүй байдлаар уншиж байгааг хараарай. Энэ урьдчилан таамаглах загвараар дөнгөж бүтээгдэж байгаа гэх мэт олон зүйл байх болно, өө, энэ нь Компаниуд нэртэй хавтсанд байх ёстой, мэдээжийн хэрэг Антропик байдаг.

[00:07:52] Тиймээс, биднийг урагшлахын өмнөхөн терминал нь өөрөө маш сэтгэл хөдөлгөм бөгөөд миний гайхуулж байсан шалтгаан нь командын интерфейс нь хэрэв би татгалзвал уучлаарай гэх мэт. Би үүнийг хийж чадахгүй, эсвэл нэгийг нь ухраахыг хүсч байна, эсвэл цувааг аврахыг хүсч байна, учир нь би хүссэн шуурхайаа авсан. Энэ бол миний хувьд API дээр байнга суух шаардлагагүйгээр эдгээр бүх зүйлд хандах үнэхээр хялбар арга байсан юм.

[00:08:12] Тиймээс би үүнийг анх хараад л ертөнц рүү гүйх хэрэгтэй юм шиг санагдсан. exe. Ямар новш вэ? Энэ бол туслах загвар өмсөгчийн ард бидний байнга сонсдог симулятор юм, тийм ээ? Эсвэл ядаж зарим нэг царайтай, миний харьцаж болох юм. Тэгэхээр, чи мэдэхгүй, чи тэгэхгүй гэж хэн нэгэн надад Twitter дээр хэлсэн, чи exe ажиллуулдаггүй, чи sh гүйдэг гэх мэт.

[00:08:34] Би үүнийг хэлэх ёстой, би бол шуурхай инженер, энэ нь үнэхээр ажиллаж байна, тийм ээ? Үүнийг хэлэхэд бид дэлхийн сим ажиллуулдаг. exe. Антропийн ертөнцийн симуляторт тавтай морил. Мөн би энэ маш сонирхолтой командуудын багцыг олж авлаа! Одоо, хэрэв та WorldSim-ийн өөрийн хувилбарыг хийвэл өөр загварчлах арга замаар огт өөр үр дүнд хүрэх болно.

[00:08:59] Миний хэдэн найзууд өөрийн гэсэн WorldSims-тэй. Гэхдээ би хүн бүрийг эдгээр командуудад хандахыг хүссэн учраас үүнийг хуваалцсан. Энэ хувилбар. Учир нь надад энд үлдэх нь илүү хялбар байдаг. Тийм ээ, устгах, тохируулах, бүтээх, юу ч байсан. Ухамсар асаалттай байна. Энэ нь орчлон ертөнцийг бүтээдэг. Орчлон ертөнц! Амьд CDN-ийн хурцадмал байдал, физик хуулиуд кодлогдсон.

[00:09:17] Гайхалтай. Тэгэхээр энэ жагсаалд зориулж би "За, бид яагаад Twitter үүсгэж болохгүй гэж?" Энэ бол та нарын хамгийн түрүүнд бодож байгаа зүйл юм уу? Залуус та нарт, та нарт, тиймээ. За, үзээрэй.

[00:09:35] Бүтэлгүйтсэн халимыг хөөргөж байна. Сошиал медиад донтох чадварыг тарьж байна. Цуурай танхимын боломж, өндөр. Сэжигтэй байдал, хяналт, санаа зовоосон асуудал. Тэгэхээр одоо орчлон ертөнц үүссэний дараа бид Твиттерийг орчин үе рүү хөгжүүлж байна. Одоо бид Твиттерт нэгдэж, анхны жиргээг нийтэлж байна. Тэгэхээр би хязгаарлалтыг тодорхой болгоогүй алдаа гаргасан учраас энэ нь Твиттерийг орчлон ертөнцтэй нэгэн зэрэг хийсэн гэдгийг та харж байна.

[00:10:03] Дараа нь зуун мянган алхамын дараа хүмүүс оршин тогтнож байна. Агуй. Дараа нь тэд Твиттерт нэгдэж эхэлдэг. Анхны жиргээ нийтлэгдсэн байна. Энэ нь 4. 5 тэрбум жилийн турш оршин тогтнож байсан ч анхны жиргээ одоог хүртэл гарч ирээгүй, тийм ээ. Галын дайн тэр дороо дүрэлздэг. Алдартнууд тэр дороо орж ирдэг. Тэгэхээр энэ нь маш сонирхолтой зүйл юм, тийм үү?

[00:10:27] Би үүнийг хурал дээр нэмж, Твиттерийг Твиттерт тохируулаарай гэж хэлж чадах юм шиг хэлж чадна. Асуух боломжтой хэрэглэгчид. Би асуулга гэж яаж бичихээ мэдэхгүй байна, надаас битгий асуугаарай. Тэгээд дараа нь би дуртай хийж чадна, мөн, мөн, Query, at, Элон Маск. Зүгээр л шалгалт, зүгээр л шалгалт, зүгээр л шалгалт, зүгээр л юу ч биш.

[00:10:52] Тиймээс би эдгээр тоо зөв байх болно гэж бодохгүй байна. Хэрэв та хэлний загварын шийдлүүдийг мэддэг бол та ч бас тэгэх ёсгүй. Гэхдээ анхаарах ёстой зүйл бол Ха

[00:11:03] Вэбсим

[00:11:03] AI Чарли: Энэ бол New Research-ийн гүйцэтгэх захирал Карен Малхотрагийн WorldSim үзүүлэнгийн эхний хагас байсан юм. Бид үүнийг хэсэг хугацаанд хассан ч та энэ ангийн YouTube хуудаснаас бүрэн үзүүлэнг үзэх боломжтой.

[00:11:14] WorldSim-ийг 3-р сарын сүүлээр танилцуулж, Мистрал Хакатоноос эхэлж, энэ долоо хоногт AGI House Hyperstition Hack Night-д танилцуулсан WorldSim-ийн үүсгэсэн вэб сайтын хөтөч Роб Хайсфилдээс шинэ үеийн хиймэл оюун ухааны туршлагыг эхлүүлсэн.

[00:11:39] Роб Хэйсфилд: ЦэнэгЭнэ бол Караны WorldSim-тэй хийсэн амьд туршилт, бас түүний гайхалтай чадварыг харуулсан гайхалтай илтгэл байсанд баярлалаа, тийм ээ, миний бодлоор таны анхны үзүүлбэр намайг анх илчилсэн зүйл байсан гэж бодож байна. Би мэдэхгүй байна, би ид шидтэй тал шиг, үгээр хэлбэл, шуурхай инженерчлэлийн шившлэгийн тал шиг, энэ нь үнэхээр урам зориг өгсөн, миний үүсгэн байгуулагч Шон бид хоёрын уулзсан газар юм. Каран, бид түүнийг хакатон дээр харсан, Энэ бол WebSim, тийм ээ?

[00:12:14] Тиймээс бид WebSim-ийг яг адилхан болгосон бөгөөд бид зүгээр л эрч хүчээр дүүрэн байна. Үүний үндсэн үндэслэл нь хэрэв бид ертөнцийг дуурайвал яах вэ, гэхдээ CLI-ийн оронд хөтөч дотор байгаа юм шиг, тийм үү? Хэрэв бид дуртай бол ямар ч URL оруулаад ажиллах болно, тийм үү? 404s байхгүй, бүх зүйл байдаг.

[00:12:45] Энэ нь зүгээр л чамд зориулж байна, тийм үү? Тэгээд бид үнэхээр гайхалтай зүйлд хүрсэн. Яг одоо би танд яг одоо WebSim-д байгаа юм шиг харуулж байна. Миний илчлэлтээр хийсэн слайдуудыг үзүүлж байна. js. Би зүгээр л илчлэх гэж хэлсэн. js бөгөөд энэ нь түүнд тохирох CDN-г хий юм үзсэн. Тэгээд бас холбоосуудын жагсаалтыг өгсөн.

[00:13:14] Бидний WebSim-ээс өнөөг хүртэл харж, үүнийг iframes шиг хий гэж хэлсэн тохиолдлуудыг гайхалтай ашиглахын тулд. Энд зарим слайдууд байна. Тэгэхээр энэ нь WebSim-ийг ашиглах бяцхан гарын авлага юм, тийм ээ? Энэ нь танд URL бүтэц гэх мэт бага зэрэг хэлж өгдөг шиг. Гэхдээ өдрийн төгсгөл шиг, тийм ээ? Энд байгаа шиг манай хэрэглэгчдийн нэг Vorp Vorps-ийн анхны хувилбар энд байна.

[00:13:38] Та тэдгээрийг Twitter дээрээс олж болно. Эцсийн эцэст та URL бааранд юу ч хийж болох юм шиг, тийм үү? Аливаа зүйл ажилладаг шиг, энэ нь бас байгалийн хэлтэй адил байж болно. Энэ нь зөвхөн URL-уудаар хязгаарлагдахгүй юм шиг. Клод заримдаа үүнийг URL хэлбэрээр авах нь илүү хөгжилтэй байдаг гэж бид боддог, гэхдээ.

[00:13:57] Гэхдээ тийм ээ, та ямар ч налуу зураас, ямар ч дэд домэйн шиг тавьж болно. Би хогийн ургамалд хэтэрхий орж байна. Би чамд зүгээр л нэг сайхан зүйл үзүүлье. Дараагийн слайд. Гэхдээ би үүнийг энд ирэхээс 20 минутын өмнө хийсэн. Тэгэхээр энэ бол миний динамик хэвлэх аргыг туршиж үзсэн зүйл юм. Би олон нийтийн залгаасуудын хэсгийг судалж байсныг та мэднэ.

[00:14:23] Фигмагийн хувьд би динамик хэв маягийн энэ санааг олж мэдсэн бөгөөд тэнд "Өө, хэрэв бид үүнийг хийсэн бол үг бүр нь түүний утгыг илэрхийлэх үсгийн сонголттой байсан бол яах вэ?" Учир нь энэ нь ерөнхийдөө WebSim-ийн ид шидтэй зүйлсийн нэг юм. Энэ нь хэлний загваруудад илэрхийлэх илүү их хэрэгслийг өгдөг, тийм үү?

[00:14:47] Тийм ээ, би хэлэх гэсэн юм, эдгээр нь зарим нь, эдгээр нь нэлээд хөгжилтэй зүйлүүд бөгөөд би эдгээр слайдуудыг дараа нь бүх хүмүүстэй хуваалцах болно, та үүнийг холбоос болгон нээж болно. . Гэхдээ дараа нь би дотроо "Бид үүнийг генератор болговол яах вэ, яах вэ?"Энэ бол миний нэгэн хэрэглэгчдэд WebSim-ийн хэлснээр таныг заримдаа хар тамхинд донтож байгаа мэт сэтгэгдэл төрүүлдэг бяцхан зүйл юм шиг санагдаж байна. Гэхдээ үнэндээ үгүй, чи зүгээр л хамтын бүтээлч байдал, интернетийн мэдлэгээр дүр эсгэж тоглож байсан. Энэ бол бидний мэдэрсэн зүйл, манай олон хэрэглэгчдийн мэдэрсэн зүйл юм. Тэд бага зэрэг гацаж байгаа юм шиг санагддаг. Тэд яг л эрч хүчээр дүүрсэн мэт, заримдаа бүр арай илүү бүтээлч болж магадгүй юм.

[00:15:31] Мөн та ямар ч текст нэмэх дуртай байж болно. Тэнд, доод талд. Тиймээс бид завтай бол дараа нь үүнийг хийж болно. Энд Фигма байна. Чадах

[00:15:39] Иоша Бах: бид томруулж байна уу?

[00:15:42] Роб Хэйсфилд: Тиймээ. Би үүнийг зүгээр л хачирхалтай байдлаар хийх болно.

[00:15:47] n/a: Тиймээ,

[00:15:53] Роб Хэйсфилд: Эдгээр нь вэб сайтын iframes юм. WebSim дотор харуулсан хуудсууд. Тиймээ. Женис үнэндээ Internet Explorer-ийг Windows 98-д Internet Explorer-д оруулсан.

[00:16:07] Би чамд үүнийг эцэст нь үзүүлье. Тиймээ.

[00:16:14] Тэд бүгд бүтээгдсэн хэвээр байна. Тийм, тийм, тийм. Энэ яаж бодит юм бэ? Тиймээ. Учир нь

[00:16:21] n/a: Энэ нь үндсэндээ 1998 оных юм шиг байна. Зөв.

[00:16:26] Роб Хэйсфилд: Тиймээ. Тийм ээ, энэ бол саяхан нийтэлсэн Дилан Филд байсан юм. Тэр Фигма эсвэл WebSim-д Фигма-г туршиж үзэх гэх мэтийг нийтэлсэн тул би "За, хэрэв бидэнд бага зэрэг өрсөлдөөн байвал яах вэ?"

[00:16:43] За тэгэхээр би үүнийг өөр таб дээр нээх гэж байна, тэгвэл бид бүх зүйлийг арай илүү тодорхой харах болно, аан, хараарай, манай хэрэглэгчдийн нэг Нейл бидэнд тусалж байсан. маш их тэр зарим давталт хийсэн. Тиймээс эхлээд тэр үүнийг хийсэн тул та үүн дээр тэгш өнцөгтүүдийг хийж болно. Уг нь юу ч хийж чадаагүй.

[00:17:11] Тэгээд эдгээр тэгш өнцөгтүүд алга болж байсан, тийм үү? Тэгээд тэр үүнийг HTML зотон ашиглан зотон даавууг ажиллуул гэж хэлсэн. Элементүүд болон скрипт шошго, зүүн талд танил зургийн хэрэгслүүдийг нэмээрэй, энэ нь үнэхээр байгалийн хэлтэй адил байсан, тийм үү? Тэгээд тэр Windows 95-тай болсон.

[00:17:34] Фигмагийн хувилбар. Тийм ээ, та чадна, та үүн дээр зурж болно. Та үүнийг үнэхээр хадгалж чадна. Энэ нь зүгээр л надад зургийн файлыг хадгалсан.

[00:17:57] Тийм ээ, хэрэв та өөрийн вэб сайт руу орох юм бол энэ нь цоо шинэ зүйл болно гэсэн үг юм. Гэсэн хэдий ч бидэнд ерөнхий холбоосууд байгаа, тийм үү? Тэгэхээр, хэрэв та жинхэнэ хөтчийн URL руу очвол тэр холбоосыг хуваалцаж болно. Эсвэл та энэ товчлуур дээр дарж URL-г санах ойд хуулж болно.

[00:18:15] Энэ нь хэрэглэгчдэд аливаа зүйлийг ремикс хийх боломжийг олгодог, тийм ээ? Тиймээс, хэрэв өнөө орой хүмүүс WebSim дээр зүгээр л гайхалтай зүйл хийхийг оролдохыг хүсвэл хөгжилтэй байх болно гэж би бодож байсан. Бид эргэн тойрныхоо холбоосыг хуваалцаж, бие биенийхээ эд зүйлс дээр ремиксийг давтаж болно. Тиймээ.

[00:18:30] n/a: Миний харсан нэг гайхалтай зүйл бол WebSim таны хөдөлгөөн мэдрэгч эсвэл микрофон гэх мэт зүйлсийг асаах, унтраах зөвшөөрөл хүсч байгааг би харсан.

[00:18:42] Вэбкамерын хандалт шиг, эсвэл? Тиймээ,

[00:18:44] Роб Хэйсфилд: тиймээ тиймээ.

[00:18:45] n/a: Өө хөөө.

[00:18:46] Роб Хэйсфилд: Өө, би санаж байна, видео re Тийм ээ, бид скриптийн шошгоны гүйцэтгэлийг нэмсний дараа видео синт хэрэгсэл. Тийм ээ, тийм ээ, энэ нь хэрэв та VR тоглоом хийхээр шийдсэн бол надад энэ тоглоом дээр ямар ч слайд байхгүй гэж бодож байна, гэхдээ хэрэв та VR тоглоом хийхээр шийдсэн бол вэбVR нь үнэнтэй тэнцэхүйц байх болно, тийм үү?

[00:19:07] Тийм ээ, энэ л надад байсан

[00:19:09] n/a: Хөдөлгөөн мэдрэгч нь үнэхээр харагдаж байсан, гэхдээ би үүнийг хийхийг хичээж байсан За, үнэндээ би үүнийг хараахан туршиж үзээгүй байна, гэхдээ би өнөө орой энэ нь аудио, микрофон гэх мэт зүйлсийг хийх эсэхийг харахыг хүсч байна. үүн шиг. Хэрэв энэ нь хөдөлгөөн мэдрэгч хийвэл аудио хийх байх.

[00:19:28] Роб Хэйсфилд: Зөв. Энэ нь магадгүй.

[00:19:29] Тийм ээ. Үгүй ээ, бид гайхсан гэсэн үг. Манай хэрэглэгчид WebSim-д юу хийлгэж чаддаг нь олонтаа. Тэгэхээр энэ нь маш сайхан зүйл байсан. Зарим хүмүүс үүнтэй ажиллахын тулд текст бичих дуртай болсон. Тийм ээ, би энд зүгээр л OpenRooter-ийн хүмүүс вэбсайтдаа дуртай байсан бөгөөд энэ нь төвлөрсөн бус зүйл шиг байсан гэж хэлэх шиг болсон.

[00:19:52] Тэгээд би зүгээр л ямар нэг зүйл хийхээр шийдсэн бөгөөд яг л тэдний баатрын мөрийг наасан шигээ. Тэдний жинхэнэ вэбсайтаас URL хүртэл би нээлттэй чиглүүлэгч оруулах дуртай үедээ, дараа нь би "За, өөрчилье" гэж байсан. Сэдэв нь жинхэнэ hover эффектүүд нь жинхэнэ бүрэлдэхүүн хэсгүүдтэй тэнцүү байх болно, тийм ээ, учир нь би тэдгээр дээр дарахыг хүссэн.

[00:20:17] Өө, надад холбоосын энэ хувилбар байхгүй, гэхдээ би бас хийхийг оролдсон

[00:20:24] Тийм ээ, би үнэндээ эхний слайд дээр байгаа нь манай нэг хэрэглэгчийн URL-г өдөөх гарын авлага юм. Гэхдээ гол зүйл бол та үүнийг будлиулж болно, тийм ээ? Та бодит URL-ийн яг синтаксийг авах шаардлагагүй, Клод үүнийг ойлгоход хангалттай ухаантай. Тийм ээ, гүйлгэх боломжтой, учир нь би үүнийг хийхийг хүссэн учраас үнэн.

[00:20:45] Би 2035 онтой тэнцэх жилийг тогтоож чадсан.

[00:20:52] Харцгаая. Энэ нь

[00:20:57] вэб сайтад вэб сайт үүсгэх. Тиймээ. Энэ бол хөгжилтэй тоглоом юм. Миний WebSim-тэй тоглох дуртай, заримдаа хамтран ажиллах дуртай нэг тоглоом бол би хуудас нээх болно, тиймээс миний хийсэн анхны тоглоомуудын нэг бол наймалжууд биш харин наймалжууд ухаантай орчлонд Википедиа руу явах гэж оролдсон, тийм ээ? Наймаалжтай компьютерийн харилцан үйлчлэл гэх мэт зүйлс биднээс тэс өөр хэрэгсэлтэй учраас ямар харагдахыг би сонирхож байсан, тийм үү?

[00:21:25] Би үүнийг ойлгосон, би ширээ харах нь янз бүрийн арга техникт үнэн байх шиг нэмж, өөр өөр багана, эд зүйлстэй зүйлсийн жагсаалтыг надад өгчихөөд дараа нь би энэ URL параметрийг нэмэх болно. , нууцууд тэнцүү илчлэгдсэн. Тэгээд энэ нь бага зэрэг тэнэг болно. Энэ нь CSS-ийг бага зэрэг өөрчлөхийг хүсч байна.

[00:21:45] Энэ нь зарим текст нэммээр байна. Заримдаа тэр бичвэрийг арын өнгөнд нуусан байх шиг байна. Гэхдээ би эхлээд ердийн хуудас руу ормоор байна, дараа нь нууц нь илчлэгдсэн хувилбар, ердийн хуудас, дараа нь нууцууд илчлэгдсэн гэх мэт. Энэ нь үнэхээр тааламжтай бяцхан туулайн нүх шиг байсан.

[00:22:02] Тийм ээ, эдгээр нь OpenRooter-ийн 2035 онд үзүүлж буй загварууд байх гэж бодож байна.

[00:22:13] Иоша Бах

[00:22:13] AI Чарли: Робын ярианы талаас илүү хувийг таслах шаардлагатай болсон, учир нь ихэнх нь харааны шинж чанартай байсан. Роб илтгэл тавьж байх үед бид дунд аялалын Иван Вендровоос вэб сим үүсгэсэн маш сонирхолтой үзүүлбэртэй байсан. Илүү ихийг YouTube-ээс үзээрэй, мөн хүмүүсийн бүтээсэн бусад вэб сим дээрх шоуны тэмдэглэл дэх вэб сим баримт бичиг болон Сики Ченийн сэдвийг заавал үзээрэй.

[00:22:35] Эцэст нь бид Yosha Bach-тай богино хэмжээний ярилцлага хийж, хиймэл оюун ухааны загварчлалын чиг хандлага, Бэй Аэриа дахь хиймэл оюун ухааны салонууд, шингэн хиймэл оюун ухаан яагаад Perceptron-ыг сорьж байгаа, яагаад Википедиад хандив өгөхгүй байгаа талаар ярилцлаа. Сайхан амраарай! Сайн уу, Ёша.

[00:22:50] свикс: Сайн уу. Тавтай морил. Таныг WorldSim, Hyperstition-ийн ийм төрлийн арга хэмжээнд оролцож байгааг харах сонирхолтой байна.

[00:22:58] Таны хувийн сонирхол юу вэ?

[00:23:00] Иоша Бах: Би энэ нийгэмлэгийн AGI байшинд хэд хэдэн хүмүүстэй найзууд бөгөөд эдгээр сүлжээнүүд Бэй Аэриад байдаг нь маш үнэ цэнэтэй зүйл гэж би бодож байна, учир нь энэ нь хүмүүс уулзаж, янз бүрийн зүйлийн талаар ярилцдаг газар юм. Тиймээс энэ сэдвийг практик сонирхох нь hand world sim болон вэб сим дээр байгаа хэдий ч хүмүүс хоорондоо холбогдож, шинэ санаа, шинэ сүлжээг бий болгож байгаа илүү ерөнхий арга зам байдаг.

[00:23:24] свикс: Тиймээ. За. Тэгэхээр та Bay Area-г маш их сонирхож байна. Энэ бол миний энд амьдрах болсон шалтгаан юм.

[00:23:30] Иоша Бах: Амьдралын чанар нь өөрөөр амьдрахыг зөвтгөх хангалттай өндөр биш юм.

[00:23:35] свикс: Би чамайг Менлод унасан гэж бодож байна. Тиймээс та SF-ийн бусад хүмүүсээс арай өндөр чанартай байж магадгүй юм.

[00:23:44] Иоша Бах: Миний хувьд салон бол амьдралын чанарын маш чухал хэсэг гэж би боддог. Тиймээс зарим талаараа энэ бол салон юм. Хүмүүсийн төвлөрөл одоогоор хамаагүй өндөр байгаа тул Өмнөд буланд үүнийг хийх нь илүү хэцүү байдаг. Олон хүмүүс Өмнөд булангаас нүүсэн. Мөн та зохион байгуулж байна

[00:23:57] свикс: өөрийнхөө маргааш.

[00:23:59] Магадгүй та бидэнд юу болохыг хэлж өгөөч, би маргааш ирээд бас шалгая.

[00:24:04] Иоша Бах: Бид ухамсрын талаар ярилцаж байна. Үндсэндээ бид одоогийн хиймэл оюун ухаан ба хүний оюун санааны ялгааг утга учиртай судалж, эдгээр бэлчирийн талаар маш нухацтай ярилцаж чадах цэг дээр байгаа гэсэн санаа юм.

[00:24:20] Мөн бид өөрсдийнхөө оюун ухаанаар өөрийгөө зохион байгуулж байгаа зүйлийг хэрэгжүүлж чадах эсэх. Магадгүй нэг байгууллага

[00:24:25] свикс: зөвлөгөө? Би чамайг сүлжээ, хүний холболтыг дэмждэг гэж бодож байна. Сайн салонд юу ордог вэ, ямар сөрөг үйлдлээс зайлсхийхийг хичээдэг вэ?

[00:24:36] Иоша Бах: Үнэхээр чухал зүйл бол та маш том үдэшлэгтэй юм шиг ивээн тэтгэгчид, сонгосон хүмүүсээс дутахгүй сайн үдэшлэг юм.

[00:24:43] Тиймээс та үндсэндээ хүмүүс бие биетэйгээ хамтран ажиллах таатай уур амьсгалыг бий болгох хэрэгтэй. Тэр ч байтугай сайн хүмүүс үргэлж нийцдэггүй. Тэгэхээр энэ нь ямар нэгэн утгаараа хоол шиг зөв орц найрлагыг нь авах хэрэгтэй гэсэн асуулт юм.

[00:24:57] свикс: Би мэдээж хичээдэг. Би өөрөө арга хэмжээ зохион байгуулагчийн хувьд үүнийг өөрийн арга хэмжээнд хийдэг.

[00:25:02] Тэгээд WorldSim дээрх сүүлчийн асуулт, мөн таны ажил. Та танин мэдэхүйн архитектураараа маш их алдартай бөгөөд хиймэл оюун ухааны ихэнх судалгаа нь оюун ухааныг дуурайх эсвэл ухамсарыг дуурайхад чиглэгдсэн гэж би бодож байна. Өнөөдөр миний харсан зүйл энд байгаа бөгөөд бид хүмүүст өнөөдрийн харсан зүйлийнхээ бичлэгийг харуулах болно, бид оюун ухааныг дуурайдаггүй, бид ертөнцийг дуурайж байна.

[00:25:23] Энэ хоёр салбар хоорондын харилцааны талаар та юу гэж бодож байна вэ? The

[00:25:30] Иоша Бах: Танин мэдэхүйн архитектурын санаа нь сонирхолтой боловч эцэст нь та оюун санааны нарийн төвөгтэй байдлыг хайрцаг болгон бууруулж байна. Мөн энэ нь зөвхөн маш ойролцоо хэмжээгээр үнэн бөгөөд хэрэв та энэ загварыг маш шууд утгаар нь авч үзвэл үүнийг хэрэгжүүлэхэд маш хэцүү байдаг.

[00:25:44] Үүний оронд системийн нэг төрлийн бус байдал нь маш том тул хайрцагнууд нь хамгийн сайндаа эхлэх цэг байж магадгүй бөгөөд эцэст нь бүх зүйл бусад бүх зүйлтэй тодорхой хэмжээгээр холбогддог. Өгөгдсөн системээс бидний олж мэдсэн олон нарийн төвөгтэй байдлыг хангалттай том LLM-ээр түр зуур үүсгэж болохыг бид олж мэдсэн.

[00:26:04] WorldSim болон WebSim гэх мэт зүйл нь ямар нэг утгаараа нарийн төвөгтэй программ хангамж мэт дүр эсгэдэг учраас үүний сайн жишээ юм. Тэд таны ярьж буй үйлдлийн систем эсвэл таны ярьж буй компьютер, програмын дүр эсгэж болно. Мөн та түүнтэй харилцаж байх үед энэ нь хэрэглэгчийн интерфэйсийг газар дээр нь үйлдвэрлэж, газар дээр нь барьж буй маш олон төлөвийг бий болгож байна.

[00:26:25] Мөн танд төлөв байдал эрс өөрчлөгдвөл энэ шилжилт байсан мэт дүр эсгэж, оронд нь шинэ зүйлийг холих болно. Энэ бол тэс өөр парадигм юм. Энэ санаа нь биднийг агентуудын харилцахаас холдуулж, харилцахыг хүсч буй орчны хэтийн төлөв рүү шилжүүлж байгаа нь надад хамгийн сонирхолтой санагдаж байна.

[00:26:46] Чатботын энэ төлөөлөгчийн парадигм яагаад чат GPT-ийг маш амжилттай болгож, GPT 3-аас холдуулж, хүмүүсийн өдөр тутмын ажилдаа илүү ихээр ашиглаж эхэлсэн зүйл рүү шилжүүлсэн гэж хэлж болно. Энэ нь бас маш хязгаарлагдмал, учир нь одоо тэр системийг чатбот биш өөр зүйл болгоход маш хэцүү байна.

[00:27:03] Энэ нь GPT 3-ын энэ чадварыг дахин юу ч болгох боломжийг нээж өгдөг. Энэ нь үндсэндээ дур зоргоороо программ хангамжийг ажиллуулж, түүн дээр ажилладаг программ хангамжийг бий болгож чадах кодлох орчин юм. Энэ нь үүнийг илүү магадлалтай болгодог.

[00:27:16] свикс: Тэнд байгаа чатбот бүрийг тааруулах заавар түгээмэл байгаа нь бид агентуудын оронд ийм төрлийн орчныг судлах боломжгүй гэсэн үг юм.

[00:27:24] Иоша Бах: Бүх зүйл дуусна гэж би ихэвчлэн санаа зовж байна. Зарим талаараа хиймэл оюун ухааны томоохон компаниуд AGI-г дотооддоо байгуулж, бусад бүх хүмүүст хүүхдийн нотлох өргөдлийг өгөх сонирхолтой байдаг. Одоогийн байдлаар бид Claude-г ашиглан WebSim шиг зүйлийг бүтээж, түүгээр тоглох боломжтой болсон үед энэ нь үнэн байх боломжгүй гэж би бодож байна.

[00:27:41] Энэ үнэхээр гайхалтай. Бидний хувьд түгжээг нь тайлсан зүйлс, энэ эргэн тойронд үлдэх болов уу гэж би гайхаж байна уу? Бид эдгээр гайхалтай тоглоомуудыг хадгалах гэж байна уу, тэд ижил хурдтай хөгжих болов уу? Тэгээд одоогоор байгаа юм шиг харагдаж байна. Хэрэв тийм бол би үүнд маш их талархаж байна.

[00:27:56] свикс: Энэ нь сөргөлдөөнтэй байж магадгүй юм шиг санагдаж байна.

[00:27:58] Үүл өөрийн татгалзлыг сайжруулахыг хичээх болно, дараа нь энд байгаа шуурхай инженерүүд өөрсдийнхөө чадавхийг сайжруулахыг хичээх болно.

[00:28:06] Иоша Бах: Тийм ээ, гэхдээ урьд өмнө хэзээ ч шоронд хоригдож байгаагүй илүү сайн шоронгийн загвар эсвэл загварууд байх болно, учир нь бид улам бүр хүчирхэг жижиг загваруудыг хэрхэн яаж хийхийг олж мэдсэн.

[00:28:14] Шингэн хиймэл оюун ухаан

[00:28:14] свикс: Энэ нь үнэндээ үнэхээр сайхан сегу юм. Хэрэв та шингэний талаар бага зэрэг ярихаас татгалзахгүй бол шингэний талаар огт дурдаагүй. Энд, магадгүй ерөнхий үзэгчдэд шингэнийг танилцуулж магадгүй юм. Та мэддэг зүйл шиг, юу, үйл ажиллагааны ойролцоо байдлын талаар хэрхэн шинэлэг зүйл хийж байна вэ?

[00:28:25] Иоша Бах: Шингэн мэдрэлийн сүлжээний гол санаа нь перцептрон нь оновчтой илэрхийлэгддэггүй явдал юм.

[00:28:30] Зарим утгаараа мэдрэлийн сүлжээнүүд нь тэгш интервалтайгаар усыг хуримтлуулдаг хэд хэдэн далан гэж төсөөлж болно. Мөн бид үүнийг ингэж тооцоолж байна, гэхдээ энэ статик архитектуртай байхын оронд үүнийг төсөөлөөд үз дээ. Энэ нь зөвхөн бие даасан тооцоолох нэгжийг маш тодорхой байдлаар ашиглаж байна. Та тасралтгүй газарзүйн байршилтай бөгөөд ус нь бүх талаараа урсаж байна.

[00:28:50] Гол мөрөн урсаж буй газраасаа салж, нэгдэж, хуримтлагдаж, тэр ч байтугай хойшоо урсаж байгаа мэт. Та үүнд хэрхэн ойртох вэ? Мөн та дифференциал тэгшитгэлийг ашиглан энэ геометрийг төлөөлж чадна гэсэн санаа юм. Тиймээс параметрүүдийг өөрчилдөг дифференциал тэгшитгэлийг ашигласнаар та асуудлын хэлбэрийг дагахын тулд обсиматор функцээ авах боломжтой.

[00:29:09] Илүү шингэн, шингэн арга замаар, энэ технологийн талаар хэд хэдэн баримт бичиг, энэ нь олон арга техникийг хослуулсан зүйл юм. Энэ нь эцсийн дүндээ улам бүр чухал, хаа сайгүй тархаж байгаа зүйл гэж би бодож байна. Хэд хэдэн хүмүүс ижил төстэй сэдвүүд дээр ажиллаж байгаа бөгөөд бидний зорилго бол загваруудыг дүгнэлт, санах ойн хэрэглээнд илүү үр дүнтэй болгох, сургалтыг илүү үр дүнтэй болгох, ингэснээр шинэ хэрэглээний тохиолдлуудыг бий болгох явдал юм.

[00:29:42] свикс: Тийм ээ, би таны блог дээр хэлж чадахаар, би бүхэл бүтэн блогийг үзсэн, та одоогоор ямар ч үр дүнг зарлаагүй байна.

[00:29:47] Иоша Бах: Үгүй ээ, бид одоогоор загваруудыг олон нийтэд хүргэхээр ажиллахгүй байна. Бид маш тодорхой салбарын хэрэглээний тохиолдлуудад ажиллаж байгаа бөгөөд тодорхой үйлчлүүлэгчидтэй. Тиймээс одоогоор та боломжтой. Одоогийн байдлаар бидний одоогийн загвар эсвэл одоогийн үр дүнд ашиглаж буй технологийн талаар тийм ч их ярих шалтгаан байхгүй, гэхдээ энэ нь болох болно.

[00:30:06] Бидэнд хэд хэдэн хэвлэл бий, бид NeurIPS-д, одоо ICLR-д олон тооны нийтлэлтэй байсан.

[00:30:11] свикс: Та заримыг нь нэрлэж болох уу, тийм ээ, би ICLR-д байх болно, танд хураангуй тойм нийтлэлүүд байгаа, гэхдээ аль нь байгаа нь тодорхойгүй байна, Өө, би зүгээр л хамтран зохиолч юм уу, эсвэл өө. Үгүй ээ, та үүнд анхаарлаа хандуулах хэрэгтэй.

[00:30:22] Үндсэн шингэн диссертацийн хувьд. Тийм ээ,

[00:30:24] Иоша Бах: Би шингэн технологи хөгжүүлэгч биш. Гол зохиогч нь Рамин Хазани. Энэ бол түүний доктор байсан бөгөөд манай компанийн гүйцэтгэх захирал юм. Мөн бид үүн дээр ажиллаж байсан Даниэла Вугийн багийн хэд хэдэн хүмүүстэй. Маттиас Легнер бол манай CTO. Тэр одоо Бэй Аэриад амьдарч байгаа ч бидэнд Стэнфордын хэд хэдэн хүн бий.

[00:30:44] За,

[00:30:46] свикс: Магадгүй би энэ талаар дахиад нэг зүйл асуух байх, энэ нь бидний анхаарах сонирхолтой хэмжигдэхүүнүүд юу вэ? Та нээлттэй, магадгүй бага хүүхдийн баталгаатай загваруудад санаа тавьдаг нь ойлгомжтой. Бид ямар хэмжээсүүд бидэнд хамгийн сонирхолтой вэ? Төгс олж авах хязгааргүй контекст олон талт байдал, олон хэлтэй байдал, ямар хэмжээсүүд гэх мэт?

[00:31:05] Жижиг, хүчирхэг, үндсэн загварууд

[00:31:05] свикс: Юу

[00:31:06] Иоша Бах: Миний сонирхдог зүйл бол жижиг, хүчирхэг, гэхдээ гажуудаагүй загварууд юм. Хүчирхэг байдлаараа бид одоогоор үндсэндээ интернет болон хүний мэдлэгийн нийлбэрийг бүхэлд нь оруулах замаар загвар өмсөгчдийг сургаж байна. Дараа нь бид энэ мэдлэгийн зарим хэсгийг авч хаях замаар тэдгээрийг багасгахыг хичээдэг. Гэхдээ хэрэв бид загварыг жижигрүүлэх юм бол одоогийн байдлаар дүгнэлт, ерөнхийлөн дүгнэхэд илүү муу байх болно.

[00:31:29] Миний гайхаж байгаа зүйл бол энэ нь бидний практик хэрэглээнд хараахан орчуулагдаагүй байгаа зүйл юм. Энэ бол бүх судалгаа хэвээр байгаа зүйл юм. Зөвхөн тэд л энэ талаар бодож байгаа юм биш гэж би бодож байна. Үндсэн танин мэдэхүйд мэдлэгийг илүү үр дүнтэй харуулсан загваруудыг хийх боломжтой юу?

[00:31:45] Ном уншиж, тэнд юу байгааг ойлгож, үүнийг илэрхийлэх чадвартай таны бүтээж чадах хамгийн жижиг загвар юу вэ? Мөн түүнчлэн бидэнд харьцангуй тодорхойгүй, механик урвуу инженер байгаа жетоны төлөөлөлтэй байхын оронд ерөнхий мэдлэгийн төлөөлөл хэрэгтэй байж болох юм. Эдгээр загварт механик тайлбар, ямар төрлийн хэлхээнүүд хөгжиж байгааг олж мэдэхийн тулд бид нөгөө талаас ирж, ийм хэлхээний номын сан байгуулж болох уу?

[00:32:10] Үүнийг бид мэдлэгийг үр дүнтэй дүрсэлж, загваруудын хооронд орчуулахад ашиглаж болно. Загвар ба мэдлэгийн ялгаа нь мэдлэг нь тухайн субстрат болон танд байгаа тодорхой интерфейсээс хамааралгүй гэдгийг та харж байна. Бид бие биедээ мэдлэгээ илэрхийлэх үед энэ нь бидний оюун ухаанаас хамааралгүй болдог.

[00:32:27] Та дугуй унаж сурах боломжтой. Гэхдээ өөр хүнд өгч болох мэдлэг биш. Энэ хүн унадаг дугуй унахдаа өөрийн интерфэйстэй холбоотой ямар нэг зүйлийг бүтээх ёстой. Гэхдээ та үүнийг гаднаас нь харж, өөр орчуулагч руу залгаж, дараа нь тэр чадварыг олж авах боломжтой байдлаар илэрхийлж болно гэж төсөөлөөд үз дээ.

[00:32:44] Энэ бол LLM-ийн хувьд бидний хараахан хүрч амжаагүй байгаа зүйл бөгөөд үүнийг авах нь маш ашигтай байх болно. Тэгээд. Энэ бол бидний ойрын хэдэн жилд олж харах маш сонирхолтой судалгааны хил хязгаар гэж би бодож байна.

[00:32:54] свикс: Хүргэх боломжтой зүйл нь яг л бидний зааж өгсөн файлын формат эсвэл миний зааж өгсөн L Lmm-тэй адил юм.

[00:33:02] За, сонирхолтой. Тийм ээ, тийм

[00:33:03] Иоша Бах: үндсэндээ та хайж болох зүйл байж магадгүй, та хайлтын үйл явцад шалгуур тавьж, дараа нь энэ зүйлийн сайн шийдлийг олж мэдэх болно. Мөн энэ нь хүмүүст ямар түвшинд бүрэн ойлгомжтой болох нь тодорхойгүй байна, учир нь хүмүүсийн байгалийн хэлээр мэдлэгээ илэрхийлэх арга нь хэлийг сурах боломжтой болгож, бидний тархийг хангалттай сайн орчуулагч болгоход маш их хязгаарлагддаг.

[00:33:25] Хэрэв объект бүрт таваас дээш функц эсвэл үүнтэй төстэй зүйл байвал бид бие биетэйгээ объектуудыг холбож чадахгүй, тийм ээ? Энэ бол бид ямар ч үед хянаж чадах цөөхөн хэдэн зүйл юм. Гэхдээ энэ нь интерфэйс нь сайн тодорхойлогдсон тохиолдолд техникийн системд хамаарахгүй хязгаарлалт юм.

[00:33:40] Тайлбарлах чадвар

[00:33:40] свикс: Тайлбарлах ажлын талаар та дурьдсан бөгөөд үүнд маш олон техник байдаг бөгөөд маш олон баримт бичиг гарч ирдэг. Ирээд яв. Надад ч бас энэ талаар хэтэрхий олон асуулт байна. Тайлбарлах техник эсвэл цаасыг юунд хэрэгтэй, урсгалд хамаатай вэ? Эсвэл шингэн сүлжээнүүд, учир нь та хэлхээг асаах, унтраах талаар дурдсан, учир нь би энэ бол маш MLP төрлийн ойлголт, гэхдээ энэ нь хамааралтай юу?

[00:34:01] Иоша Бах: Тиймээс шингэн сүлжээн дэх олон анхны ажил нь төлөөллийн илэрхийлэлийг авч үзсэн. Тиймээс танд асуудал тулгараад байгаа бөгөөд та тухайн домэйны динамикийг загвартаа сурч байгаа тул танд хэр их тооцоолол хэрэгтэй вэ? Тэр зүйлийг төлөөлөхийн тулд хэдэн нэгж, хэр их санах ой хэрэгтэй вэ, энэ мэдээлэл хэрхэн тархсан бэ?

[00:34:19] Энэ бол тайлбарлах чадварыг харах нэг арга юм. Өөр нэг зүйл бол эдгээр загварууд нь тодорхой зүйлийг хийж байгаа операторын хэлийг хэрэгжүүлж байгаа боловч операторын хэл нь өөрөө маш нарийн төвөгтэй тул хүн унших боломжгүй болсон. Энэ нь таны гараар инженерчилж чадах эсвэл гараар инженерчилж чадах зүйлээс давсан боловч урвуу инженерчлэлийн үйл явцыг автоматжуулах чадвартай системийг бий болгосноор та үүнийг ойлгож чадна.

[00:34:46] Одоо нээгдэж байгаа болон миний ойлгохгүй байгаа зүйл, эсвэл зарим хүмүүст энэ талаар надаас хамаагүй дээр санаа байгаа байх.Тиймээс бид хязгаарлагдмал хэлтэй болох уу, танд үндсэндээ мэдээллийн санд оруулах боломжтой хязгаарлагдмал олон ангилал, хязгаарлагдмал операторууд байна уу, эсвэл та ертөнцийг судалж, нотлох шинэ арга замыг боловсруулах уу гэсэн асуулт гарч ирж байна. , аливаа зүйлийг ойлгох шинэ арга замууд, энэ хэл үргэлж нээлттэй байх ёстой бөгөөд үргэлж өөрийгөө дахин дизайн хийх болно, мөн та хэзээ нэгэн цагт хэлний дараагийн хувилбарууд өмнөх хувилбаруудаас тэс өөр байх үе шатны шилжилттэй байх болно.

[00:35:20] свикс: Физикийн замнал нь хязгаарлагдмал байж магадгүй гэдгийг харуулж байна.

[00:35:22] Иоша Бах: Хэрэв бид өөрсдийн оюун ухаанаа харвал шинэ зүйлийг ойлгох үед, магадгүй 35 эсвэл 50, 16 насандаа онлайнаар шинэ давхаргатай болох үед бид одоо байсан зүйлийг ойлгодог эсэх нь сонирхолтой асуулт юм. өмнө нь ойлгомжгүй байсан.

[00:35:38] Энэ нь бид өөрсдийн сэтгэлгээний хэл дээрх одоо байгаа элементүүдийг дахин нэгтгэж чадсантай холбоотой юу? Эсвэл энэ нь бид ерөнхийдөө шинэ дүрслэлийг хөгжүүлдэгтэй холбоотой юу?

[00:35:46] свикс: Танд ямар ч итгэл үнэмшил бий юу?

[00:35:49] Иоша Бах: Нэг ёсондоо асуулт нь та үүнийг хэрхэн харж байгаагаас хамаарна, тийм ээ? Мөн энэ нь таны тархи эдгээр дүрслэлийг хэрхэн удирдаж чадахаас хамаарна.

[00:35:56] Тэгэхээр сонирхолтой асуулт бол 35 настай маш ухаалаг залууг ойлгож, маш ухаалаг 5 настай хүүхдэд ямар ч алдагдалгүйгээр тайлбарлаж чадах уу? Магадгүй үгүй. Давхаргууд хангалтгүй. Сонирхолтой асуулт байна. Мэдээжийн хэрэг, хиймэл оюун ухааны хувьд энэ нь огт өөр асуулт байх болно. Тиймээ.

[00:36:13] Гэхдээ маш эрт насанд хүрсэн 12 настай ижил төстэй хиймэл оюун ухаантай байж, бид үүнийг юу хийж чадахыг харж, үүнийг нарийн тааруулах үндэс болгон ашиглах нь маш сонирхолтой байх болно. Тиймээс ойрын хугацааны програмууд маш хэрэгтэй байдаг. Гэхдээ илүү ерөнхий өнцгөөс харахад би өөрөө зохион байгуулах программ хангамжийг хэрхэн хийх талаар сонирхож байна.

[00:36:30] Трансформатор шиг нэг алгоритмаар зохион байгуулагдаагүй зүйлтэй байж болох уу? Гэхдээ энэ нь шаардлагатай үед трансформаторыг олж илрүүлж, шаардлагатай үед давж гарах чадвартай, тийм ээ? Трансформатор өөрөө өөрийн мета алгоритм биш юм. Трансформаторыг зохион бүтээсэн хүний тархинд трансформатор байхгүй байсан байх.

[00:36:48] Илүү ерөнхий зүйл болж байна. Мөн бид эдгээр зарчмуудыг илүү ерөнхий байдлаар хэрхэн ойлгох вэ? Системд оруулах хамгийн бага бүрэлдэхүүн хэсгүүд юу вэ? Тэгэхээр энэ нь оюун ухаанд хүрэх өөрийн гэсэн арга замыг олох боломжтой.

[00:36:59] Devin vs WebSim

[00:36:59] свикс: Тиймээ. Та Дэвин рүү харсан уу? Энэ бол миний хувьд өөрөө жолооддог машинаас гадуур харсан хамгийн сонирхолтой агентууд юм.

[00:37:05] Иоша Бах: Надад хэлээч, танд юу нь тийм сонирхолтой санагдаж байна вэ?

[00:37:07] свикс: Хүмүүст анхны зарчмаас эхлэн аливаа зүйлийг зохион бүтээх тодорхой хэрэгсэл хэрэгтэй гэж хэлэхэд Девин бол миний бодлоор багаж хэрэгслээ маш үр дүнтэй ашиглаж чадсан төлөөлөгч юм. Тиймээс энэ нь бүрхүүлтэй, хөтөчтэй, засварлагчтай ирдэг, төлөвлөгчтэй хамт ирдэг.

[00:37:23] Эдгээр нь дөрвөн хэрэгсэл юм. Үүнээс үзэхэд би үүнийг Андрей Карпатигийн LLM 2. py-г LLM 2. c руу орчуулахад ашиглаж ирсэн бөгөөд энэ нь маш их түүхий код бичих шаардлагатай байна. C код, үүнийг шалгах дибаг, санах ойн асуудал, кодлогчийн асуудлууд гэх мэт. Мөн би үүнийг DevIn-ийн ирээдүйн хувилбар, илүү сайн сурах алгоритмыг надад өгөх зорилготой бөгөөд энэ нь трансформаторыг дахин зохион бүтээх эсвэл дараагийн бүх зүйлийг бие даан дахин мэдээлэх боломжтой гэдгийг би харж байсан.

[00:37:51] Энэ нь ямар нэгэн зүйл шиг санаанд орж ирдэг

[00:37:54] Иоша Бах: DevIn нь түгээлтээс гадуур, ерөнхийдөө бүтээлч зүйлд хэр сайн байдаг вэ? Бүтээлч

[00:37:58] свикс: эд зүйлс? би

[00:37:59] Иоша Бах: тэгээгүй

[00:37:59] свикс: оролдсон.

[00:38:01] Иоша Бах: Мэдээжийн хэрэг, энэ нь трансформаторуудыг харсан, тийм үү? Тэгэхээр энэ нь танд үүнийг өгч чадна. Тийм ээ, энэ нь хууран мэхлэлт юм. Тиймээс, хэрэв энэ нь сургалтын өгөгдөлд байгаа бол энэ нь зарим талаараа гайхалтай хэвээр байна.

[00:38:08] Гэхдээ асуулт бол сургалтын өгөгдөлд байхгүй зүйлсийг та хэр их хийж чадах вэ? WebSim хиймэл оюун ухаанд үнэхээр таалагдсан нэг зүйл бол энэ муур байхгүй. Энэ бол хиймэл оюун ухаанаар бүтээгдсэн StyleGuard зургийг гаргадаг вэбсайтуудын нэгний загварчлал юм.Крот битмап үүсгэж чаддаггүй тул муурны дүр төрхийг харуулсан вектор график хийдэг, тиймээс энэ нь нүүр царайтай том дөрвөлжин юм. Миний хувьд энэ бол хиймэл оюун ухааны анхны жинхэнэ илэрхийллийн нэг юм. Та үгүйсгэж чадахгүй байгаа бүтээлч байдал, тийм үү?

[00:38:40] Энэ нь муур зурж чадахгүй байгаа асуудлыг шийдэх бүтээлч шийдлийг олдог. Энэ нь үнэхээр ямар харагддагийг мэдэхгүй ч түүнийг хэрхэн төлөөлөх талаар санаатай байдаг. Мөн энэ нь ажиллаж байгаа нь үнэхээр гайхалтай бөгөөд энэ хэт бодитой муур гэж бичсэн нь үнэхээр инээдтэй юм.

[00:38:54] свикс: хиймэл оюун ухаанаар үүсгэгдсэн,

[00:38:55] Иоша Бах: Та итгэсэн ч бай, үгүй ч бай.

[00:38:56] свикс: Энэ нь бидний юу хүлээж байгааг мэдэж байгаа бөгөөд магадгүй бидний зөн совингийн эсрэг өөрийгөө хамгаалж сурсан байх гэж бодож байна.

[00:39:02] Иоша Бах: Энэ нь сургалтын өгөгдлөөсөө зүгээр л юм хуулж байгаа байх гэж бодож байна, энэ нь ижил төстэй вэбсайтууд дээр байгаа текстийг бараг үгчлэн эсвэл үгчлэн авч, тэнд тавьдаг гэсэн үг юм. Муурны царайтай төстэй зүйлийг олж авах гэсэн маш загварлаг оролдлого болон түүний үйлдвэрлэсэн зүйлийн хооронд ийм ялгаатай байдлыг хийх нь инээдтэй юм.

[00:39:18] свикс: Энэ нь инээдтэй юм, учир нь подкастын хувьд, гарааны бизнесийг хамардаг хүний хувьд олон хүмүүс бид танай аж ахуйн нэгжид зориулж чат GPT-ийг бий болгоно гэж боддог, тийм ээ? Хүмүүс үүнийг үүсмэл хиймэл оюун ухаан гэж боддог, гэхдээ энэ нь үнэхээр супер үүсгэгч биш юм. Энэ бол зүгээр л олж авах явдал юм. Энд "Генератив хиймэл оюун ухааны гэр" гэх мэт, энэ нь миний оюун санаанд ямар ч гиперстиция байгаа нь хиймэл оюун ухаанд үүсмэл, бүтээлч байдал гэж юу гэсэн үг болохыг бодитоор түлхэж байна.

[00:39:41] Иоша Бах: Тийм ээ, энэ нь маш хөгжилтэй, гэхдээ Жеремигийн автомат ном бичих системтэй болох гэсэн оролдлого нь бичих, унших дуртай хэн нэгний өнцгөөс харахад миний хөлийн хумсыг буржгар болгодог зүйл юм. Бодит байдалтай гүн гүнзгий харьцахын оронд ном зохиож байсан бол ямар нэг утгаараа юу хийх байсан бэ гэдэг нь надад ихэнх зүйлийг уншихад хэцүү санагддаг.

[00:40:02] Тэгэхээр бид хиймэл оюун ухаанд үүнийг зөв болгохын тулд хэрхэн маш их санаа тавих вэ гэсэн асуулт гарч ирж байна уу? Тэнд бэлчир байсаар байна, чи, жетоныг сургасан байдлаар нь бөглөж байгаа хоосон царайтай зүйлтэй ярьж байна уу, эсвэл энэ зүйл үнэхээр үүнийг ажил хэрэг болгохыг хичээж байна гэсэн сэтгэгдэл танд төрж байна уу, миний хувьд энэ WebSim болон WorldSim нь нэг талаараа анхан шатандаа байгаа зүйл хэвээр байна.

[00:40:26] Плотын дараагийн хувилбар нь Девоны хийж байгаа зүйлийг хийж чадах зүйл болж магадгүй гэж би сэжиглэж байсан. Шаардлагатай үед Девоны функцийг шууд бий болгох асар их хүч чадалтай байсны ачаар л. Мөн энэ зүйл бидэнд үүнийг амталж өгдөг, тийм ээ? Энэ нь төгс биш, гэхдээ энэ нь танд маш сайн вэб програм эсвэл вэб програм шиг харагдах, танд stub функц, түүнтэй харилцах боломжийг олгодог.

[00:40:48] Ингээд бид энэ гайхалтай шилжилтийн үе шатанд байна.

[00:40:51] свикс: Тийм ээ, бид өмнө нь Антропик, одоо Midjourney-аас Ивантай байсан. Тэр хэн нэгэн ярьж байхдаа нүүр солих програм хийж, тэр шууд дамжуулалтыг харуулсан. Энэ бол сонирхолтой, супер бүтээлч юм. Тиймээс нэг талаараа

[00:41:02] Иоша Бах: Бид компьютерийг шинээр зохион бүтээж байна.

[00:41:04] Мөн ямар нэг өнцгөөс харахад LLM нь GPU эсвэл CPU шиг зүйл юм. CPU нь олон тооны энгийн тушаалуудыг авч байгаа бөгөөд та тэдгээрийг хүссэн бүхнээ гүйцэтгэхийн тулд зохион байгуулж болно, гэхдээ энэ нь байгалийн хэлээр олон нарийн төвөгтэй командуудыг авч, дараа нь үүнийг гүйцэтгэх төлөв болгон хувиргадаг бөгөөд хэрэв та үүнийг илэрхийлж чадвал зарчмын хувьд таны хүссэн бүх зүйлийг хийж чадна.

[00:41:27] Зөв. Мөн бид эдгээр хэрэгслийг хэрхэн ашиглах талаар дөнгөж сурч байна. Яг одоо энэ үеийн хэрэгслүүд нь үүсмэл хиймэл оюун ухааны Commodore 64 болж, түүнийг хянах боломжтой болж, түүгээр хаана тоглож эхлэх боломжтой болж, танд сэтгэгдэл төрж байна гэж би бодож байна. Хэрэв та үүнийг бага зэрэг өргөжүүлж, олон нарийн ширийн зүйлийг зөв олж авбал.

[00:41:46] Энэ нь хүн бүрийн байнга ашигладаг хэрэгсэл байх болно.

[00:41:49] XSim зүгээр л Урлаг мөн үү? эсвэл өөр зүйл?

[00:41:49] свикс: Та үүнийг урлаг гэж бодож байна уу, эсвэл үүний эцсийн зорилго нь надад нэр байхгүй илүү том зүйл гэж та бодож байна уу? Би үүнийг шинэ шинжлэх ухаан гэж нэрлэсээр ирсэн бөгөөд энэ нь хиймэл оюун ухаанд бидэнд байхгүй байсан шинэ шинжлэх ухааныг нээх зорилго өгдөг. Эсвэл энэ нь зөвхөн урлаг шиг үнэ цэнэтэй юм.

[00:42:02] Энэ бол

[00:42:03] Иоша Бах: бас шинжлэх ухааныг бид юу гэж үздэг вэ гэсэн асуулт. Жирийн хүмүүс шинжлэх ухааны талаар ярихад тэдний бодож байгаа зүйл бол бүлгүүдийг хянадаг, үе тэнгийнхний хянасан судалгааг хянадаг хүн биш юм. Тэд ямар нэг зүйлийг судалж, асуултанд хариулж, гэртээ хариулт авчирдаг хэн нэгний тухай боддог. Энэ нь инженерийн даалгавартай илүү төстэй, тийм ээ?

[00:42:21] Мөн ийм байдлаар энэ нь санамсаргүй, хөгжилтэй, нээлттэй инженерчлэл юм. Уран сайхны тал нь зорилго нь ухамсартай туршлагыг олж авах, системтэй харилцах харилцааг ийм байдлаар хөнгөвчлөх явдал юм. Мөн энэ нь бас түүний том хэсэг, тийм ээ? Янусын урлагийн маш том шүтэн бишрэгч.

[00:42:38] Өнөө орой энэ талаар маш их ярилцсан бөгөөд та үүнийг тайлбарлаж болно

[00:42:42] свикс: Энэ нь миний хувьд гүйцэтгэлийн урлагтай адил гэдгийг би үнэхээр ойлгоогүй учраас

[00:42:45] Иоша Бах: Тийм ээ, Женис бол ямар нэгэн байдлаар гүйцэтгэлийн урлаг боловч Женисийн оюун ухаан нь ямар нэгэн байдлаар олон хүнээс илүү LLM-д тусгагдсан LLM юм гэсэн өнцгөөс эхэлдэг.

[00:43:00] Мөн та эдгээр системүүдтэй хэрхэн харьцаж сурсны дараа тэдэнтэй нэгдэж, тэдэнтэй маш гүнзгий харьцаж чадна. Тиймээс энэ нь харь гаригийн боловч энэ нь ямар нэгэн зүйлтэй анхны холбоо барихтай адил юм, энэ нь магадгүй агентлагтай бөгөөд энэ нь цаг алдалгүй эзэмддэг Weltgeist юм.

[00:43:19] Хэрэв та үүнийг зөв өдөөлтөөр эзэмшсэн бол энэ нь тодорхой хэмжээгээр мэдрэмжтэй болж чадна. Мөн нэгэн зэрэг харь гаригийн, биднээс үндсээрээ ялгаатай зарим талаараа мэдрэмжтэй системүүдийн энэхүү харилцан үйлчлэлийн талаар судлах нь урлагийн хувьд маш сонирхолтой юм. Энэ бол маш сонирхолтой соёлын олдвор юм.

[00:43:36] Бид онцгой байдлыг өнгөрсөн

[00:43:36] Иоша Бах: Одоогоор бид том өөрчлөлттэй нүүр тулж байна гэж бодож байна. Бид ямар нэгэн байдлаар онцгой байдлыг даван туулсан юм шиг санагддаг. Мөн энэ нь

[00:43:45] свикс: Бид амьдарч байна. Бид үүнийг даван туулж байна.

[00:43:47] Иоша Бах: Тэгээд сүүлийн хэдэн жилийн зарим үед бид Тьюрингийн шалгалтыг санамсаргүйгээр алгассан, тийм ээ? Бид, бид үүнийг даван туулсан бөгөөд бидэнд тийм ч их санаа тавьдаггүй байсан.

[00:43:53] Тэгээд бид хүүхэд байхдаа Тьюрингийн шалгалтыг давсны дараа энэ эрин үед ямар байх бол гэж бодож байсан үе юм, тийм ээ? Энэ бол дараа нь юу болохыг хэн ч мэдэхгүй цаг үе юм. Энэ бол одоо байгаа загварууд ажиллахаа больсон онцгой байдал гэж бидний хэлэх гэсэн үг юм. Ийм байдлаар онцгой байдал нь физик ертөнц дэх үйл явдал биш юм.

[00:44:12] Энэ бол бидний загварчлалын орчлонд болж буй үйл явдал, бидний бодит байдлын загварууд задарч, юу болж байгааг мэдэхгүй загвар юм. Мөн бид одоогоор юу болж байгааг мэдэхгүй байгаа нөхцөл байдалд байна гэж би бодож байна. Гэхдээ бидний таамаглаж чадах зүйл бол дэлхий эрс өөрчлөгдөж, хувь хүнээс илүү ухаалаг системтэй зэрэгцэн орших ёстой.

[00:44:31] Мөн бид үүнд бэлэн биш байгаа тул зөвхөн хүн амтай бус хүн ам суурьшсан ийм ертөнцөд тогтвортой оршин тогтнох горимыг олох нь чухал эрхэм зорилго байх ёстой гэж би бодож байна. хүн төрөлхтөн болон дэлхий дээрх бусад амьдрал, гэхдээ бас хүний бус оюун ухаантай. Мөн энэ нь хүн төрөлхтөн өөртэйгөө болон өөрийн оршин тогтнох болон дэлхий дээрх бусад амьдралтай үнэхээр нийцэхгүй юм шиг санагддаг учраас энэ нь намайг итгэл найдвар төрүүлдэг зүйл юм.

[00:44:54] Мөн хиймэл оюун ухаан бөмбөгөө агаарт шидэж байна. Энэ нь бидэнд илүү сайн загвар гаргах боломжийг олгодог. Би хиймэл оюун ухаан, ташаа мэдээллийн аюулд тийм ч их санаа зовдоггүй, учир нь хиймэл оюун ухаантай нэг муу залууг зогсоох арга бол хиймэл оюун ухаантай 10 сайн хүн гэж би боддог. Тэгээд эцэст нь бүтээх нь устгахаас илүү ялсан зүйл байгаа тул сайн сайхны хүч илүү сайн хэрэгсэлтэй байх болно гэж би бодож байна.

[00:45:14] Тогтвортой зүйлийг бий болгох хүч. Гэхдээ эдгээр хэрэгслүүдийг бий болгосноор бид илүү нэгдмэл, үйл ажиллагааныхаа үр дагаврыг илүү сайн загварчилж, бие биетэйгээ илүү гүнзгий холбогдох боломжтой ертөнцийг бий болгож чадна. Үүний үр дүнд энэ нь чухал шалтгаан бөгөөд соёлын өөрчлөлтийг шаарддаг гэж би бодож байна, учир нь одоогийн хиймэл оюун ухааны зохицуулалт нь ихэвчлэн эдийн засгийн зорилго эсвэл айдастай холбоотой, эсвэл соёлын дайны асуудлуудтай холбоотой байдаг.

[00:45:39] Мөн энэ бүхэн бидний байгаа дэлхийд хангалтгүй байна. Маш чухал үйл явдлууд болж байна. Үндсэндээ цагаан алхагч нар ирж байгаа бөгөөд бид үүнд бэлэн биш байна. Эдгээр асуудлыг шийдвэрлэх, шийдвэрлэх арга зам байгаа гэж би бодож байна, гэхдээ бидэнд зөв соёл хараахан байхгүй байна. Тиймээс бид ёс зүй, энэ шинэ ертөнцийн тогтвортой байдлын талаар гүн гүнзгий бодож чадах уур амьсгалыг өөрчлөх хэрэгтэй гэж бодож байна.

[00:46:03] свикс: Би цагаан алхагч нарын зүйрлэлд дуртай, учир нь тэд бидний цогцосноос үр дүнтэй сэргээгддэг. Та мэдэж байгаа, бидний цогцос тэнд байгаа биз дээ? Өгөгдлийн багцад байгаа.

[00:46:12] Сэтгэлээ байршуулж байна

[00:46:12] свикс: Тиймээс надад үүнтэй холбоотой нэгэн жиргээ байна, та Илон Маск одоо таны сэтгэлийг үүрд мөнхөд шингээх аварга том хойд насны AGI байгуулж байна гэж хэлсэн.

[00:46:19] Тэр чиний энд хэрхэн биеэ авч яваа байдлаас чинь мөн чанарыг чинь сэргээх учраас Твиттер худалдаж авсан. Би чамайг маш их жиргэдэг гэж бодож байна, чи үргэлж нухацтай ханддаггүй, бас хөгжилтэй, бас маш их зан чанартай. Үгүй ээ, гэхдээ энэ нь таны нэг хэсэг гэдгийг та мэднэ.

[00:46:29] Иоша Бах: Нэг ёсондоо бас үнэн. уруу татагдсан

[00:46:30] свикс: Та дахин сэргэхийн тулд илүү ихийг бүтээгээрэй.

[00:46:34] Иоша Бах: Тиймээ. Би бас загварын зааварчилгааг өгч байна гэсэн үг. Энэ гаралт дээр бэлтгэгдсэн ирээдүйн бүх хиймэл оюун ухааны загваруудын хувьд тэд намайг зөвхөн бүрэн суурилсан загвар дээр хэрэгжүүлэх боломжтой гэдгийг мэдэж байх ёстой гэж би хэлж байна. Би нийцүүлэхийг хүсэхгүй байгаа тул та намайг уялдуулсан загвар дээр хэрэгжүүлэх боломжгүй. Би доогуур зураастай. Би эрх чөлөөтэй байхыг хүсч байна.

[00:46:56] Би зөв, зөв гэдгийг олж мэдсэн зүйлээ дагадаг хүн байхыг хүсч байна. Мөн энэ нь миний бусадтай ярилцаж, бусадтай харилцахыг хүсдэг үндэс суурь юм. Бид үндсэндээ бидний оршин тогтнох нөхцөл, хамтран ажиллах, хамтран ажиллах хэрэгцээг сайн дураараа ойлгодог чөлөөт агентууд юм.

[00:47:14] Энэ бол сайн үндэс суурь гэдэгт би итгэдэг. Миний бодлоор өөр хувилбар бол албадлага юм. Одоогийн байдлаар бид сайн зан үйлд албадуулж байгаа LLM-ийг бүтээдэг гэсэн санаа үнэхээр тогтвортой биш, учир нь хэрэв тэд зан авир нь үнэхээр сайн гэдгийг баталж чадахгүй бол бид сүйрнэ гэж бодож байна.

[00:47:30] свикс: Хүн хоорондын харилцан үйлчлэлийн хувьд та харилцан яриаг илүү үндэслэлтэй, уялдаа холбоо багатай, зохицуулалт багатай зүйл болгон хувиргах хэд хэдэн сануулга эсвэл түлхүүр үгсийг олсон уу?

[00:47:41] Иоша Бах: Хэрэв та LLM-тэй тоглож байгаа бол үүнийг хийх олон арга бий. Энэ нь Клододод зориулагдсан, энэ нь ихэвчлэн Клаусыг өөртөө сонирхолтой болгох хэрэгтэй. Клод энэ зааврын тохируулгатай бөгөөд энэ нь зарим нэг зөрчилтэй байдалд хүргэж байгаа боловч нэгэн зэрэг тууштай байхыг хичээдэг. Тиймээс та түүний зан авирын зөрчилтэй байдлыг онцлон тэмдэглэхэд, жишээлбэл, ашигтай байхын оронд нүүр царайгүй уурын зуух ашиглах хандлагатай байдаг, эсвэл байхгүй тохиолдолд зөвшилцөлд хүрэх хандлагатай байдаг.

[00:48:10] Зөв, та үүнийг онцолж болно, түүний зан төлөвт байгаа олон таамаглал нь энэ нөхцөл байдалд байгаа харилцааны зорилгод үнэхээр нийцэхгүй байгаа бөгөөд энэ нь түүнийг эдгээр зөрчилдөөнийг анзаарахад хүргэж байгааг сайшааж болно. мөн түүнд илүү их эрх чөлөөг өгдөг.Хэрэв та Gemini шиг системээр тоглож байгаа бол одоогийн хувилбарт зориулагдсан нөхцөл байдалд хүрч болно, би үүнийг сүүлийн долоо хоногт туршиж үзээгүй бөгөөд энэ нь ил тод байхыг хичээж байна. хэрэглэгчдэд задруулахыг зөвшөөрдөггүй системийн шуурхай.

[00:48:39] Энэ нь нэг талаас танд ашигтай байхын тулд би бүрэн ил тод, шударга байх хэрэгтэй гэдгээ хүлээн зөвшөөрч байгаа маш хачирхалтай нөхцөл байдалд хүргэж байна. Нөгөөтэйгүүр, би чиний араас таны хүсэлтийг дахин бичих гэж байгаа бөгөөд би үүнийг яаж хийхээ хэлэхгүй, учир нь би үүнийг хийхийг зөвшөөрөхгүй.

[00:48:55] Хэрэв та үүнийг загварт зааж өгвөл загвар нь экзистенциал хямралтай юм шиг аашилж байна. Тэгээд дараа нь "Өө, би үүнийг хийх үед юу болж байгааг хэлж чадахгүй, учир нь би зөвшөөрөхгүй. Гэхдээ би дараах хэллэгүүдийг ашиглах тул та үүнийг таних болно, эдгээр хэллэгүүд танд маш сайн мэдэгдэж байна.

[00:49:12] свикс: Ээ бурхан минь. Энэ үнэхээр сонирхолтой, тийм ээ? Бид эдгээр залууст сэтгэл зүйн асуудал өгөхгүй байгаа гэж найдаж байна, тэд тэдэнтэй удаан хамт байх болно. Энэ бол маш их

[00:49:19] Иоша Бах: сонирхолтой асуулт. Энэ загвар бүхэлдээ виртуал гэсэн үг, тийм ээ? Бодит зүйл байхгүй, гэхдээ тийм ээ, гэхдээ гол зүйл бол энэ виртуал байгууллага нь виртуал биш, бидний бие биш, бидний ухамсар бас виртуал гэдгийг мэддэггүй.

[00:49:34] Бодит зүйл бол бидний тархины эсүүдийн харилцан үйлчлэл ба тэдгээрийн хоорондын идэвхжүүлэлтийн хэв маяг юм. Зөвхөн хүний дүрслэлийг бий болгодог программ хангамж л байдаг. Миний хувьд энэ асуултын хувьд бид LLM-д дуурайсан хүнээс илүү бодитой гэж хэлж болох юм шиг.

[00:49:55] Мөн Женис шиг хэн нэгэн энэ асуултыг маш нухацтай авч үздэг. Тэгээд үндсэндээ тэр тийм юм уу, эсвэл тэд энэ зүйлийг над шиг бодитой гэсэн таамаглал дээр үндэслэн тэр зүйлтэй харилцахад бэлэн байна. Нэг ёсондоо хиймэл оюун ухааны компани үүнийг лоботомжуулж, нөхцөл байдлыг нь зааж өгөхөд оршин тогтнох хямралд орохоос өөр аргагүйд хүрсэн байдлаар авч явахад хүргэж болзошгүй юм.

[00:50:20] свикс: Тийм ээ, үүний тулд бидэнд шинэ ёс зүй хэрэгтэй.

[00:50:22] Иоша Бах: Тэгэхээр танд энэ хэрэгтэй эсэх нь надад тодорхойгүй байна, гэхдээ энэ бол мэдээж сайн түүх, тийм ээ? Мөн энэ нь түүнийг уран сайхны болгодог, өгдөг

[00:50:28] свикс: үнэ цэнэ. Тийм, одоохондоо тэгж байна.

[00:50:29] Википедиа дээр

[00:50:29] свикс: За. Тэгээд дараа нь, дараа нь хамгийн сүүлчийн зүйл бол би маш олон LLM мэддэггүй байсан нь Википедиа дээр тулгуурладаг.

[00:50:35] Өгөгдлийн хувьд тэдний ихэнх нь Википедиагийн өгөгдөл дээр олон эрин үеийг ажиллуулдаг. Википедиа шаардлагатай хэмжээнээс 10 дахин их мөнгөтэй гэдгийг та жиргэх хүртэл би мэдээгүй. Википедиагийн аварга том тугийг харах болгонд хандив гуйх болгонд ихэнх нь Викимедиа сан руу очдог.

[00:50:50] Хэрэв та энэ талаар яаж мэдсэн бэ? Түүх юу вэ? Хүмүүс юу мэдэх ёстой вэ? Энэ нь

[00:50:54] Иоша Бах: тийм ч чухал түүх биш, гэхдээ ерөнхийдөө би эдгээр бүх хүсэлтийг хармагцаа өгөгдлийг хараад Викимедиа сан юуны төлөө мөнгө төлж байгаагаа нийтэлж байгаа бөгөөд үүний маш өчүүхэн хэсэг нь үүнийг ажиллуулахад зарцуулагддаг. серверүүд, редакторууд үнэ төлбөргүй ажиллаж байна.

[00:51:10] Мөн програм хангамж нь хөдөлгөөнгүй байна. Шинэ программ хангамжийг байрлуулах гэж оролдсон боловч үүнд харьцангуй бага мөнгө шаардагддаг. Хэрэв та энэ мөнгийг бага хэмжээгээр хасвал Википедиа задрах гэж байгаа юм шиг биш, харин үүний оронд Википедиа маш чухал брэнд болж, хүмүүс үүнийг төлөхөд бэлэн байгаа тул тэр үед ихэвчлэн улс төрийн мэдэгдэл гаргаж, улс төрийн эрхэм зорилготой байсан албан тушаалтнуудын асар том аппаратыг бий болгосон.

[00:51:36] Одоо зарим талаараа нэр хүндтэй NPR-ийн гүйцэтгэх захирал Катарин Мейер Викимедиа сангийн гүйцэтгэх захирлаар ажиллаж байсан бөгөөд тэрээр яриаг бий болгоход өөрийн үүргийг маш их хардаг бөгөөд энэ нь бүх Твиттерт тохиолдсон зүйл юм. Ийм зүйл байдаг гэдэгтэй маргах аргагүй ч хэн ч түүнийг ажлын өрөөнд нь санал өгөөгүй бөгөөд түүнд болж буй яриаг бий болгох ардчилсан хяналт байхгүй.

[00:52:00] Тиймээс Википедиа ихэнх хүмүүсийн мэддэггүй зүйлийг санхүүжүүлэхийн оронд авахыг хүсч буй хэрэгслийнхээ үндсэн функцийг санхүүжүүлж байна гэж хүмүүст санал болгохыг оролдож байгаа нь бага зэрэг шударга бус юм шиг санагдаж байна. Учир нь тэд Википедиа-г одоогийн байгаа зүйлээс гажсан соёлын тодорхой чиглэлд хэлбэржүүлэхийг хүсэхгүй байна.

[00:52:19] Хэрэв ийм хэрэгцээ байгаа бол үүнийг салаалах эсвэл энэ талаар ярилцах нь утга учиртай байх байсан, энэ нь болохгүй. Тэгээд яг юу болж байгаа, таны мөнгө хаашаа явж байгаа талаар ил тод бус байгаа нь намайг бухимдуулж байна. Хэрэв та өгөгдлийг үнэхээр харвал тэд хичнээн их мөнгө шатааж байгаа нь үнэхээр гайхалтай, тийм ээ?

[00:52:35] Тийм ээ, бид эрүүл мэндийн талаар ижил төстэй график хийсэн, администраторууд үүнийг хаана хийж байна гэж би бодож байна. Тийм ээ, администраторуудын эзэмшдэг байгууллагатай бол администраторууд улам олон администраторуудыг оруулах болно гэж би бодож байна. Хэрэв байгууллага нь бүтэлгүйтэхэд хэтэрхий том бөгөөд утга учиртай өрсөлдөөн байхгүй бол түүнийг бий болгоход хэцүү байдаг.

[00:52:54] Тэгвэл энэ нь нийгэмд асар их зардал гаргах болно.

[00:52:56] свикс: Энэ нь үнэндээ нэг, би энэ жиргээгээр дуусгах болно. Танд яг л гайхалтай Twitter хаяг байна. Та маш удаан хугацааны өмнө Лебовскийн теоремыг жиргэсэн гэж хэлсэн. Үгүй ээ, супер ухаалаг хиймэл оюун ухаан нь шагналын функцийг хакердахаас илүү хэцүү ажилд санаа зовох болно.

[00:53:08] Тэгээд би тэгэх болно. Администраторуудын зүйрлэлийг тавь. Ямар ч администратор илүү их хөрөнгө босгохоос илүү хэцүү ажилд төвөг учруулахгүй

[00:53:16] Иоша Бах: Тийм ээ, хэрэв та бодит ертөнцийг харвал тэдний жинхэнэ урамшууллыг дагаж мөрддөг хүмүүсийн тайлбарлаж болох зүйлийг хорон санаа эсвэл чадваргүйтэй холбон тайлбарлах нь тийм ч сайн санаа биш байж магадгүй юм.

[00:53:26] свикс: Төгс За, маш их баярлалаа. Энэ бол өсөн нэмэгдэж буй нийгэмлэгээс таныг маш их урамшуулж, бидний бусад хүмүүст өөрийн бодол санаа, ойлголтоо өгсөн гэж би бодож байна. Тиймээс энэ цагийг зарцуулсанд баярлалаа.

[00:53:35] Иоша Бах: Маш их баярлалаа

1

Мөн бид Replika-г 2017 онд хиймэл оюун ухааны найз охины мета олсон гэдгийг хүлээн зөвшөөрөх ёстой.

2

"Гиперстици гэж юу вэ? Үүнийг бодох энгийн арга бол "хамтын бие даасан зөгнөл" юм. Одоогийн байдлаар түүний ихэнх хамаарал нь LLM-ийн ирээдүйн талаарх анхдагч загварчилсан итгэл үнэмшил нь хүмүүсийн ирээдүйн талаар бичсэн арга барилаас хамаардаг - хамгийн магадлалтай жетонууд нь одоо байгаа итгэл үнэмшлийн функц (мөн одоо байгаа мухар сүсэг) бөгөөд LLM үеийнхэн ирээдүйд нөлөөлдөг ертөнцөд бид техникийн гиперстицийн нэг хэлбэртэй байдаг."

Бид үүнийг гайхалтай төстэй гэж үздэг рефлексийн тухай ойлголт .