Midjourney и другие нейросети обработки изображений - страница 74

[Dmitry Fedoseev]

Valeriy Yastremskiy #:

Видел, не все там так просто как пишут))))

Дайте ссылки, или как искать?

[Valeriy Yastremskiy]

Dmitry Fedoseev #:

Дайте ссылки, или как искать?

ну типа того

[Dmitry Fedoseev]

Valeriy Yastremskiy #:

ну типа того

Понятно! Абсолютный фэйк для полных лошков. МРТ ну никак не подходит для исследования психической активности, оно даже для исследования физиологии не подходит. 

МРТ используется для исследования тканей. Самое сложное из физиологи, на что способна МРТ - исследование кровоснабжения. 

[Реter Konow]

Dmitry Fedoseev #:

Понятно! Абсолютный фэйк для полных лошков. МРТ ну никак не подходит для исследования психической активности, оно даже для исследования физиологии не подходит. 

МРТ используется для исследования тканей. Самое сложное из физиологи, на что способна МРТ - исследование кровоснабжения. 

+

[Vitaliy Kuznetsov]

- А что это так бумкнуло?

- Чей-то *укан

Исследования по МРТ в изображения опубликованы в журнале Nature. Это не желтая пресса, если что.

Ссылка

Да и ссылка выше с хабра тоже ссылается на инфу с Nature по ссылке2

Отрицание

Гнев

Депрессия

Торг

Внимательное изучение научных статей по теме

Принятие

[Реter Konow]

Vitaliy Kuznetsov #:

- А что это так бумкнуло?

- Чей-то *укан

Исследования по МРТ в изображения опубликованы в журнале Nature. Это не желтая пресса, если что.

Ссылка

Да и ссылка выше с хабра тоже ссылается на инфу с Nature по ссылке2

Отрицание

Гнев

Депрессия

Торг

Внимательное изучение научных статей по теме

Принятие

Почитайте внимательно материалы первой  вашей ссылке. Речь идет только о попытках восстановления РЕЧИ из данных МРТ, с использованием генеративной модели. Ни о каком видео речи нет. То есть, человек может смотреть видео и проговаривать слова про себя, а модель пытается воспризвести его речь по данным энцефалограммы. Читайте внимательно.

"...Currently, however, non-invasive language decoders can only identify stimuli from among a small set of words or phrases. Here we introduce a non-invasive decoder, that reconstruct continious language from cortical semantic representations recorded using functional Magnetic Resonance Imaging (fMRI). ..."

По сути, новой технологии нет. Они пытаются применить генеративную модель в расшифровке мозговой активности. Возможно, эта модель справляется лучше чем предыдущие, но значительного прорыва пока нет. 

Но главное препятствие в индивидуальности мозговой активности человека. Модель обученная считывать речь одного человека не подойдет другому.

[Реter Konow]

Новизна заключается только в том, что неинвазивный декодер (МРТ) теперь обьединили с генеративной моделью и улучшили перевод энцефалограммы в речь, но ТОЛЬКО относительно предыдущих результатов неинвазивного декодинга.

[Реter Konow]

Прикол в том, что этот "прорыв" по сути не имеет ничего общего с исследованием мозга. Если подкинуть несколько слов такой LLM как ChatGPT, он быстрое выстроит подходящее предложение по смыслу. То есть, они просто расширили применение диффузионной и языковой модели без фактического прорыва в нейрофизиологии. Надо отдать им должное, это умное решение.

[Dmitry Fedoseev]

Vitaliy Kuznetsov #:

- А что это так бумкнуло?

- Чей-то *укан

Исследования по МРТ в изображения опубликованы в журнале Nature. Это не желтая пресса, если что.

Ссылка

Да и ссылка выше с хабра тоже ссылается на инфу с Nature по ссылке2

Отрицание

Гнев

Депрессия

Торг

Внимательное изучение научных статей по теме

Принятие

А где там про восстановление изображения? Там даже в названии про семантическую

реконструкцию. Даже не про сами слова, а про их смысл. Что-то типа наблюдения за

соседом из дома напротив, когда он телек смотрит. По мимике и прочим ужимкам можно

предположить, что он смотрит - комедию, или ужасник. Принцип примерно тот же - 

выводы на основе анализа кровотока. Перспектива метода не очень

далекая. Еще если учесть размеры самого аппарата для фМРТ...

В статье в самом начале интересный моментик:

For naturally spoken English (over two words per second),
this means that each brain image can be affected by over
20 words. Decoding continuous language thus requires
solving an ill-posed inverse problem, as there are many
more words to decode than brain images. Our decoder
accomplishes this by generating candidate word sequences,
scoring the likelihood that each candidate evoked the
recorded brain responses and then selecting the best candidate.

Получается, что декодируется одно из 20 слов. Или как?

[Dmitry Fedoseev]

Реter Konow #:
дель пытается воспризвести его речь по данным энцефалограммы. Читайте внимате

Не по энцефалограмме, по фМРТ - по кровоснабжению. Что-то типа по соматической реакции на речь.