| |
Решатель ARC-задач Франсуа Шолле | |
| |
create
|
Решатель ARC-задач Франсуа Шолле |
mserg: И что тут любопытного? Посмотреть на bruteforce?
Ну покажите, как задачу, которую выложил Андрей в стартовом топике (где input картинками, как я давал о1) можно решить брутфорсом, я посмеюсь )))
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Лучше напишите этим дуракам: Mike Knoop, Melanie Mitchell, Chollet, Thomas Dietterich. Пусть ответят за базар:
Цитата: The o3 model also failed to solve more than 100 visual puzzle tasks, even when OpenAI applied a very large amount of computing power toward the unofficial score, said Mike Knoop, an ARC Challenge organiser at software company Zapier, in a social media post on X.
In a social media post on Bluesky, Melanie Mitchell at the Santa Fe Institute in New Mexico said the following about o3’s progress on the ARC benchmark: “I think solving these tasks by brute-force compute defeats the original purpose”.
“While the new model is very impressive and represents a big milestone on the way towards AGI, I don’t believe this is AGI – there’s still a fair number of very easy [ARC Challenge] tasks that o3 can’t solve,” said Chollet in another X post.
However, Chollet described how we might know when human-level intelligence has been demonstrated by some form of AGI. “You’ll know AGI is here when the exercise of creating tasks that are easy for regular humans but hard for AI becomes simply impossible,” he said in the blog post.
Thomas Dietterich at Oregon State University suggests another way to recognise AGI. “Those architectures claim to include all of the functional components required for human cognition,” he says. “By this measure, the commercial AI systems are missing episodic memory, planning, logical reasoning and, most importantly, meta-cognition.”
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
mserg: Лучше напишите этим дуракам: Mike Knoop, Melanie Mitchell, Chollet, Thomas Dietterich. Пусть ответят за базар
Понятно. Вы за свой базар тоже ответить не можете))) Почему-то я так и подумал...
Получается классика жанра: мопед не Ваш, Вы просто разместили объяву 😃😃
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Про "грубую силу" - мопед, действительно, не мой.
На https://arcprize.org/2024-results есть готовые решатели на базе "грубой силы". См. например, решатель от "the ARChitects"
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
10:40 30.12.2024 |
|
10:46 30.12.2024 |
|
№11239 |
mserg: есть готовые решатели
Успехов Вам на этом пути. Мне же достаточно того, что верия о1 смогла решить задачу, которую не могла решить 4-ая, я вижу в этом и развитие, и перспективу. И я доверяю OpenAI, когда он пишет, что о3 показывает 87.5% решенных задач, при человеческом результате в 91.5%. Более того, как архитектор весьма солидной компании, вообще не вижу, что у нас будут реальные задачи, похожие на ARC ))), но уровень интеллекта, демонстрируемый o1 и о3 заставляет меня планировать использование этих технологий в своей работе. Вы персонально можете продолжать пользоваться брутфорсом как аналогом AGI, я персонально не против.
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
11:10 01.01.2025 |
|
12:03 01.01.2025 |
|
№11241 |
Статья по вашей же ссылке называется "OpenAI’s o3 shows remarkable progress on ARC-AGI, sparking debate on AI reasoning".
Там есть раздел, который прямо называется "Not AGI". Там видим следующее:
“Passing ARC-AGI does not equate to achieving AGI, and, as a matter of fact, I don’t think o3 is AGI yet,” he writes. “o3 still fails on some very easy tasks, indicating fundamental differences with human intelligence.”
Т.е. со слов самого Шолле o3 по факту не работает. Тут дело не в вере или не не в вере конторе openai. Научный подход требует, чтобы проверка проводилась на независимом множестве задач. А признаком независимости в данном случае является такая "логика" задачи, которая, с одной стороны, не встречалась в публичных примерах. А с другой - легко решается человеком. В тестовых непубличных примерах, насколько я понимаю, находятся задачи с разной степенью схожести с публичными задачами. И вот на "несхожих" простых задачах, по видимому, o3 не работает - в этом Шолле и видит проблему. У авторов других цитат, приведенных ранее, появляются одни и те же сомнения, возникших по различным признакам и выраженные в разной формах.
P.S. На счет грубой силы, еще раз, - мопед не мой. Все вопросы к Melanie Mitchell.
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
16:13 01.01.2025 |
|
18:18 01.01.2025 |
|
№11242 |
mserg: Научный подход требует
Попробуйте перечитать и понять мой предыдущий пост. Мне, если честно, насрать сто куч на AGI, ARC и любые другие попытки отрицать реальность 😃😃
У меня есть опыт рассказов о грядущей реальности разным людям. Большинство людей безобразно тупы. Достаточно почитать этот форум, например - "форум создателей ИИ"))) Сам я стал уезжать из РФ в 2000, а вышел из рублёвых активов в начале февраля 2014 по 35 за доллар))) Это пример моего горизонта планирования.
Вам важно AGI и ARC в "научном подходе" как Вы их понимаете понимаете - эти Ваши персональные заёбы. Вам важны слова - занимайтесь словами. Здесь, кроме меня, все занимаются ТОЛЬКО СЛОВАМИ. Мне важны дела и результаты. Мне важно решать мои задачи и оставаться конкурентным в нашем жестоком мире. У меня это получается, последние несколько месяцев в союзе с OpenAI/chatGPT4o/o1. Я планирую развивать использование LLM дальше. И мне фиолетово, что по этому поводу думает Шолле. Если он будет хорош, мы просто возьмем его на работу)))
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Тогда вам нет смысла писать в теме "Решатель ARC-задач Франсуа Шолле".
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
23:50 01.01.2025 |
|
12:00 02.01.2025 |
|
№11244 |
mserg: Тогда вам нет смысла писать в теме "Решатель ARC-задач Франсуа Шолле".
Давайте, я сам буду решать есть мне смысл куда-то писать или нет. Вы вот устроили тут истерику на две страницы по поводу того, что о3 это не AGI. Ведь AGI это те и только те системы, которые умеют решать 100% ARC по научному методу. А те системы, которые не AGI не имеют права использоваться для решения интеллектуальных задач. Ведь это золотыми буквами на небесном своде написано. Я люблю изучать поведение людишек)))
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
Egg:mserg: Тогда вам нет смысла писать в теме "Решатель ARC-задач Франсуа Шолле".
Давайте, я сам буду решать есть мне смысл куда-то писать или нет. Вы вот устроили тут истерику на две страницы по поводу того, что о3 это не AGI. Ведь AGI это те и только те системы, которые умеют решать 100% ARC по научному методу. А те системы, которые не AGI не имеют права использоваться для решения интеллектуальных задач. Ведь это золотыми буквами на небесном своде написано. Я люблю изучать поведение людишек)))
Вам в который раз ...вежливо указали, что очередная версия чатбота (о3) это всегда не AGI.
А вот это тянет на новенькое определение от Egg:
"AGI это те и только те системы, которые умеют решать 100% ARC по научному методу".
)
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
10:31 02.01.2025 |
|
15:22 02.01.2025 |
|
№11246 |
Цап: А вот это тянет на новенькое определение от Egg:
"AGI это те и только те системы, которые умеют решать 100% ARC по научному методу".
Это была ирония)) В подражании "аргументам" Сергея)
Цап:
Вам в который раз ...вежливо указали, что очередная версия чатбота (о3) это всегда не AGI.
Цапушка, поймите, болезный, людишки вообще не знают, что такое AGI ))))))) Вы в том числе... Людишки просто испытывают страх))) Поэтому всё отрицают) Раньше людишки требовали распознавания, потом умения играть в го, тесты Тьюринга, теперь требуют AGI. При этом сами не демонстрируют ни способностей к AGI, ни даже просто умения связно рассуждать)) Достаточно почитать этот форум "создателей ИИ")))
Для людей, которые определяют будущее, вопрос уже не стоит в плоскости: обладают ли LLM AGI или нет, вопрос заключается в том, насколько люди интеллектуальны, чтобы работать в LLM-средах)) Те, кто недостаточно интеллектуальны, будут сидеть на пособиях. Всё как всегда, впрочем)) Потому как зарплату гуманитария, кроме как пособием, назвать нельзя)
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
Егушка, это не "людишки" тупые, это вы до сих пор не научились писать промпты для общения с ними.
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
09:55 03.01.2025 |
|
10:36 03.01.2025 |
|
№11248 |
Цап: Егушка, это не "людишки" тупые, это вы до сих пор не научились писать промпты для общения с ними.
Думаете, все события мира, сделанные другими людьми, включая Вашу никчемную жизнь, написал именно я в своих неумелых промтах? )))) Вы мне сильно льстите))
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
00:39 04.01.2025 |
|
00:40 04.01.2025 |
|
№11249 |
Egg:mserg: Тогда вам нет смысла писать в теме "Решатель ARC-задач Франсуа Шолле".
Давайте, я сам буду решать есть мне смысл куда-то писать или нет. Вы вот устроили тут истерику на две страницы по поводу того, что о3 это не AGI. Ведь AGI это те и только те системы, которые умеют решать 100% ARC по научному методу. А те системы, которые не AGI не имеют права использоваться для решения интеллектуальных задач. Ведь это золотыми буквами на небесном своде написано. Я люблю изучать поведение людишек)))
Я просто привел мнения из статьи из вашей же ссылки и из других источников. Они выглядят более обоснованно чем ваш "я твой Шолле труба шатал". Т.к. часто ваши сообщения не соответствуют теме - имеет смысл создать другую тему, а здесь часть сообщений удалить.
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
01:40 04.01.2025 |
|
02:16 04.01.2025 |
|
№11250 |
Egg:mserg: Тогда вам нет смысла писать в теме "Решатель ARC-задач Франсуа Шолле".
Давайте, я сам буду решать есть мне смысл куда-то писать или нет.
Смысл - это основание которое может принимать те или иные значения (выражения). Исходя из текущего выражения и знания смысла мира человек может предпринять те или иные (писать или не писать) действия обеспечивающие переход текущего состояния в целевое состояние.
Т.е. речь идёт о полезности тех или иных действий, а не о пропаже смысла, но тогда зачем
употреблять название понятия (Смысл) суть которого Вами еще пока не осознается?
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
12:42 04.01.2025 |
|
15:53 04.01.2025 |
|
№11251 |
mserg: имеет смысл
Ваше мнение очень ценно для меня. О смысле с Владом поговорите, его переполняют слова по этому поводу)))
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Спасибо за предложение, но я все же попробую что-нибудь сказать по теме "Решатель ARC-задач Франсуа Шолле".
Итак, ранее я говорил о том, задача сводится к поиску в функциональном пространстве. В большинстве задач Шолле требуется найти вычислимую функцию, отображающую исходные изображения в целевые. Для этого нужно задать сигнатуру - набор функций, их которых будет составляться эта вычислимая функция.
Сигнатура, исходя из данный задачи, должна включать собственно функции (в виде отображения множеств), функция работы с матрицами, рекуррентные и рекурсивные функции, функциональные уравнения, а также работы с графами. Учитывая, что человеческое зрение легко распознает аффинные преобразования, они будут на "особом положении".
Из функций наилучшей считается та, которая корректно отображает обучающие примеры, не "падает" при вычислении тестового изображения, наиболее простая (содержит минимум закорючек)
Стартовать проверку идеи можно с простого переборного алгоритма, который позволяет находить некоторое количество решений.
Так на картинке ниже 6150a2bd задача содержит сверху 3 исходных изображения размером 3x3 и 3 снизу целевых также размером 3x3. Цифры черным цветом относят изображения к обучающим примерам, а синим - к тестовым.
Очевидно что задача тривиальная - это аффинное преобразование. Для матричных преобразований можно предполагать использовать функции работы с массивами из библиотеки numpy python. В данном случае это функция rot90. А точнее, rot90(a, 2). Здесь a - исходное изображение, количество закорючек 3 (имя функции и 2 параметра). Хотя, как уже говорилось вместо трех закорючек, аффинные преобразования разумно учитывать особо.
Здесь переборный алгоритм легко находит решение.
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Рекурсивные функции
На приведенной задаче ниже используется рекурсивная функция:
Рекурсивная функция предполагает использование итераций, на каждой из которых используется предыдущее значение аргумента. В данном случае рекурсивная функция должна делать замены
01 на 01
00 10
И
00 на 02
20 20
На каждой итерации будут добавляться единицы и двойки пока изображение не перестанет изменяться.
В данном случае задача отображения матриц превращается в поиске преобразующей функции по окрестностям каждого элемента матрицы (ситуацию с краями опустим для простоты).
|
| |
write
|
Решатель ARC-задач Франсуа Шолле |
Декомпозиция
Декомпозиция позволяет разбирать изображения на части и сводить задачу к нескольким подзадачам. Так задача ниже может быть легко решена при использовании декомпозиции.
Вместо поиска отображения (или параллельно с оным) можно решать задачу, наиболее кратко описывающие изображения. Так цифры исходные изображения представляют собой множество из двух цифр, одна из которых 0, то изображения могут быть представлены в виде произведения числа (цвета) на булеву матрицу. Функция для вычисления цвета - максимум в матрице; функция вычисления булевой матрицы - преобразование каждого элемента в двоичное значение. Произведение числа на булеву матрицу записывается "меньшим числом бит" нежели исходная матрица. Вместо одного аргумента (исходной матрицы) получаем три: исходная матрицы, ее цвет, и булева матрица. Исходная матрица выглядит лишней в тройке аргументов, однако возможность декомпозиции не редко является подлянкой от Шолле и не упрощает отображение. В этом случае добавление декомпозированных аргументов несколько снижает производительность решателя, но не критично.
Целевые матрицы имеют высоту 1 и содержат только одну цифру (назовем ее тоже цветом). Т.к. высота матрица фиксирована, задача разбивается на две подзадачи: нужно определить длину матрицу и цвет. Решение первой подзадачи (перебором) приводит к формуле, являющейся суммой булевой матрицы из декомпозиции исходной матрицы. Цвет целевой матрицы оказывается равным цвету из декомпозиции исходной матрицы.
Таким образом, задача решилась с относительно небольшим числом шагов перебора.
|
| |
create
|
Решатель ARC-задач Франсуа Шолле |
mserg: Таким образом, задача решилась с относительно небольшим числом шагов перебора
Тут всё очень просто, на самом деле, все реально интеллектуальные задачи являются либо обратными, либо задачами реконструкции (как ARC). Эти задачи перебором не решаются. Если что-то Вам удалось перебором решить, значит - задача "тупая" и не интеллектуальная)))
|
|
|