Справка - Поиск - Участники - Войти - Регистрация
Полная версия: Вычислительная мощность человеческого мозга
Частный клуб Алекса Экслера > Наука и техника
Страницы: 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36, 37, 38, 39, 40, 41, 42, 43
Rendom
12 июня 2013, 05:25

cruizer написал: А существуют ли такие системы, которые сюжеты для таких статей сами умеют придумывать, делая некоторый data mining.

Для этого системе надо каким-то образом "влиться" в социум, которому она пишет.
Голубая Собака
12 июня 2013, 18:29

Crux написал: Нету их больше. Выпали из редакционных концепций по всей Украине где-то в конце 90-х и подозреваю, не только в ней.

В общем, как в слогане к фильму "Пункт назначения".
Кто следующий?


Martin написал: Да, компьютерная лингвистика - перспективная специальность.

И по всему похоже, стоит на нее уже начинать переучиваться biggrin.gif
Голубая Собака
12 июня 2013, 18:31

cruizer написал:
А существуют ли такие системы, которые сюжеты для таких статей сами умеют придумывать, делая некоторый data mining. Даешь к примеру базу данных с кучей данных по курсу акций, финансовым показателям компаний, мировыми новостями и т.д, а система сама находит интересные взаимосвязи.

Что-то мне подсказывает, что тогда это уже будет полноценный ИИ.
Который сам и тему статьи придумает, и данные перелопатит, и статью напишет.
Ему о нашем мире многое тогда знать придется.
cruizer
13 июня 2013, 01:16

Голубая Собака написала:
Что-то мне подсказывает, что тогда это уже будет полноценный ИИ.
Который сам и тему статьи придумает, и данные перелопатит, и статью напишет.
Ему о нашем мире многое тогда знать придется.

Я имел в виду менее продвинутую систему. Грубо говоря, она могла бы искать закономерности и большом объёме данных разного типа. Сопоставлять временную шкалу и события, возможно по заданным шаблонам.
Crux
13 июня 2013, 12:18

cruizer написал:
она могла бы искать закономерности и большом объёме данных разного типа.

Это Grok. См. мое сообщение выше со ссылкой на бывшую фирму Numenta.
Голубая Собака
13 июня 2013, 16:10

cruizer написал:
Я имел в виду менее продвинутую систему. Грубо говоря, она могла бы искать закономерности и большом объёме данных разного типа. Сопоставлять временную шкалу и события, возможно по заданным шаблонам.

Не знаю. Может есть что-то такое.
Опять, чтобы система могла по шаблонам что-то найти, надо, чтобы кто-то эти шаблоны в нее положил. Т.е. это тогда должен быть какой-то на всю голову продвинутый пользователь, который заподозрит закономерности в таких разрозненных фактах, как вытеснение очерков из журнализма в Украине, победа Обамы на выборах и события на площади Таксим... Чтобы мог это отдать машине и сказать "Вот тут копай глубже".

(всё имхо, разумеется)
Crux
13 июня 2013, 16:18
Возможно, нейронная сеть сама сможет вывести новые закономерности из баз данных разных тематик. Вопрос в том, поймете ли вы эти машинные открытия и найдете ли им применение?
Голубая Собака
13 июня 2013, 18:25

Crux написал: Возможно, нейронная сеть сама сможет вывести новые закономерности из баз данных разных тематик.

А она может, да?
Crux
14 июня 2013, 12:08

Голубая Собака написала:
А она может, да?

Ну, Grok по идее, может. Но он не сможет вам объяснить, как он это сделал. Вы скармливаете ему данные, а на их основе он дает предсказание, какие цифры продолжат ряд данных в будущем. В процессе совершения предсказания, Grok построит сотни моделей ситуации, большая часть из которых будут впоследствии отброшены как негодные: "In fact, Grok builds hundreds of candidate models that try many different combinations of your data, ways to look at this data, and ways to tune each Grok model". "Once Grok determines the best model for each stream predictions (or anomalies) are available immediately. But Grok doesn't stop there, Grok continues to learn automatically with every new data point".
Голубая Собака
14 июня 2013, 19:55

Crux написал:
Ну, Grok по идее, может. Но он не сможет вам объяснить, как он это сделал. Вы скармливаете ему данные, а на их основе он дает предсказание, какие цифры продолжат ряд данных в будущем.

Это все-таки немного не то. Если вернуться, к чему мы начали - к написанию хорошей статьи с аналитикой на основе всяких-разных данных, одних прогнозов будет мало. Надо еще откуда-то взять те самые данные, чтобы в них искать закономерности. И хотя бы заподозрить те самые закономерности в разрозненных и не связанных друг с дружкой данных. А это уже посильнее Фауста Гете biggrin.gif

(была бы такая машинка - может, мы бы тут все уже при коммунизме жили).
cruizer
15 июня 2013, 03:42

Crux написал:
Ну, Grok по идее, может. Но он не сможет вам объяснить, как он это сделал. Вы скармливаете ему данные, а на их основе он дает предсказание, какие цифры продолжат ряд данных в будущем. В процессе совершения предсказания, Grok построит сотни моделей ситуации, большая часть из которых будут впоследствии отброшены как негодные: "In fact, Grok builds hundreds of candidate models that try many different combinations of your data, ways to look at this data, and ways to tune each Grok model". "Once Grok determines the best model for each stream predictions (or anomalies) are available immediately. But Grok doesn't stop there, Grok continues to learn automatically with every new data point".

Вроде как Grok используется в системах управления, где есть поток каких-либо параметров. Например, в помещении есть куча датчиков температуры и обогревателей или кондиционеров. Взаимосвять между ними мы не знаем - измерять и тестировать все нам лень, да и параметры помещения часто меняются (большой склад, например). Тогда ставим Grok и он будет сам учиться управлять температурой в помещении. Правильно я понял?
cruizer
15 июня 2013, 03:58

Голубая Собака написала:
Это все-таки немного не то. Если вернуться, к чему мы начали - к написанию хорошей статьи с аналитикой на основе всяких-разных данных, одних прогнозов будет мало. Надо еще откуда-то взять те самые данные, чтобы в них искать закономерности. И хотя бы заподозрить те самые закономерности в разрозненных и не связанных друг с дружкой данных. А это уже посильнее Фауста Гете  biggrin.gif

Заподозрить как раз можно - самое простое это проверять все известные закономерности между всеми имеющимися параметрами, и искать где есть корреляция. Но такая система найдет кучу бесполезных закономерностей между вещами, которые никак друг с другом не связаны. Например - за последний месяц курс рубля к иене бьет максимум, а лето в Камбодже аномально холодное. Корреляция есть, смысла нет. И таких "находок" будет подавляющее большинство. Проблема в том, как это отсеять и искать лишь то что может представлять интерес. Здесь, возможно, нужен семантический анализ, чтобы система из анализа текущих новостей понимала что понятия "курс рубля к иене" и "температура в Камбодже" никак не связаны между собой и рыть там бесполезно, а "Обама", "Wikileaks", "Ахмадинежад" - это очень даже интересно.
Голубая Собака
16 июня 2013, 01:06

cruizer написал:
Заподозрить как раз можно - самое простое это проверять все известные закономерности между всеми имеющимися параметрами...

Вопрос всё тот же: кто (или что) задает параметры?
Программа сама будет отслеживать закономерности и связи? Тогда это высший пилотаж (а как только обнаружится, что такая программа существует, нас (как человечество вообще) ждет много нового и интересного biggrin.gif )
Или программист будет параметры закладывать? Или экономист какой...
В таком случае всё дело - в этом программисте-экономисте. У естественных интеллектов иногда случаются инсайты и прочие короткие замыкания, когда опа! и выясняется, что дожди-то в Камбодже - это не баран начхал, это очень даже имеет значение, и курс йены понятно почему скаканул!!!
Короче, если и отлавливать этого безвестного сумрачного гения - то среди тех, кто задает параметры (для любых подобных систем, будь то Grok или что-нибудь еще). А там - машина это или человек - вскрытие, как говорится, покажет 3d.gif

cruizer написал: Здесь, возможно, нужен семантический анализ, чтобы система из анализа текущих новостей понимала что понятия "курс рубля к иене" и "температура в Камбодже" никак не связаны между собой и рыть там бесполезно, а "Обама", "Wikileaks", "Ахмадинежад" - это очень даже интересно.

Имхо-имхо... это уже не семантический анализ...
Это очень хорошее знание нас-хороших. Причем гораздо более полное знание, чем есть у нас самих.
nezachem
17 июня 2013, 07:45

cruizer написал:
Заподозрить как раз можно - самое простое это проверять все известные закономерности между всеми имеющимися параметрами

Комбинаторный взрыв, не?
Crux
17 июня 2013, 14:24

cruizer написал:
Тогда ставим Grok и он будет сам учиться управлять температурой в помещении. Правильно я понял?

- Да. Только вот, ему можно параллельно скармливать данные разных источников. Датчики температуры - хорошо. А еще данные с камеры слежения, сколько раз в процессе рабочего дня уборщица тетя Дуся открывает и закрывает форточку в цеху. Ведь тоже влияет на температуру :-) Но сами источники потоков данных - они определяются пока что человеком.
cruizer
18 июня 2013, 00:56

nezachem написал:
Комбинаторный взрыв, не?

Есть численные методы, которые могут быстро искать корреляции на больших объемах данных. Там какие-то матрицы строятся, что-то перемножается или вращается. Деталей уже не помню, но методы такие точно есть smile.gif
cruizer
18 июня 2013, 01:11

Crux написал:
- Да. Только вот, ему можно параллельно скармливать данные разных источников. Датчики температуры - хорошо. А еще данные с камеры слежения, сколько раз в процессе рабочего дня уборщица тетя Дуся открывает и закрывает форточку в цеху. Ведь тоже влияет на температуру :-) Но сами источники потоков данных - они определяются пока что человеком.

Ага, понятно. Самое интересное - насколько этот Grok умен.


Crux написал:
Ну, Grok по идее, может. Но он не сможет вам объяснить, как он это сделал.

Кстати, когда-то давно общался с людьми, которые на основе пирамидальных сетей делали крутейшие вещи. Их система может не только принимать решения, но и объяснить, почему такое решение принято. Она авиационные двигатели тестирует - например, по вибрациям и шуму предсказывет когда двигатель выйдет из строя и тому подобное. И самое интересное, это реально работает smile.gif
cruizer
18 июня 2013, 01:28

Голубая Собака написала:
Вопрос всё тот же: кто (или что) задает параметры?
Программа сама будет отслеживать закономерности и связи? Тогда это высший пилотаж (а как только обнаружится, что такая программа существует, нас (как человечество вообще) ждет много нового и интересного biggrin.gif )
Или программист будет параметры закладывать? Или экономист какой...
В таком случае всё дело - в этом программисте-экономисте. У естественных интеллектов иногда случаются инсайты и прочие короткие замыкания, когда опа! и выясняется, что дожди-то в Камбодже - это не баран начхал, это очень даже имеет значение, и курс йены понятно почему скаканул!!!
Короче, если и отлавливать этого безвестного сумрачного гения - то среди тех, кто задает параметры (для любых подобных систем, будь то Grok или что-нибудь еще). А там - машина это или человек - вскрытие, как говорится, покажет  3d.gif

Вопрос очень интересный подняли вы. Параметров мы можем заложить много и найти взяимосвязи между ними, но вот причины и следствия компьютер пока не умеет искать. Нужно формальную модель мира описывать, что может являеться причиной и что нет, а это уже гораздо сложнее и я даже не слышал о таких работах. Вот мы определили, что изменение погоды в Камбодже и курса иены связаны во времени, а дальше что? Надо определить, следует ли одно из другого, не случайное ли это совпадение, нет ли третьей общей причины. Большую работу надо провести, чтобы проверить действительно ли найдена закономерность.


Голубая Собака написала: Имхо-имхо... это уже не семантический анализ...
Это очень хорошее знание нас-хороших. Причем гораздо более полное знание, чем есть у нас самих.

Это не так уж сложно. Достаточно новости просканировать, и можно очень точно по категориям разбить термины. Примерно так - если "Обама" и "Wikileaks" часто встречаются в одном тексте, значит они по смыслу связаны. И, соответственно, если термины практически не попадаются вместе, значит и связи между ними нет.
Голубая Собака
18 июня 2013, 20:41

cruizer написал: Вот мы определили, что изменение погоды в Камбодже и курса иены связаны во времени, а дальше что? Надо определить, следует ли одно из другого, не случайное ли это совпадение, нет ли третьей общей причины. Большую работу надо провести, чтобы проверить действительно ли найдена закономерность.

В принципе, мы же тоже не всегда можем сказать, как связаны дожди в Камбодже с курсом йены. И самые мозговитые аналитики не всегда это скажут. Не, ну где-то кто-то еще может проследить, что затяжные ливни привели к резкому росту численности комара-переносчика денге, пошла вспышка заболевания, а пара-тройка алармистских статей в японской прессе (именно там, потому что сейчас как раз пара японских журналистов-фрилансеров дауншифтят на камбоджийском побережье) привели к резкому сокращению потока японских туристов в Сиануквилль... Не знаю, как это всё дальше с йеной увязать... а какая разница? Для большинства прикладных задач важно, что пролился дождь и йена скаканула. Промежуточные выкладки мало кого интересуют. Интересуют обычно более общие взаимосвязи: пролился дождь в Камбодже - покупай зонтик... или продавай йены на пике.

cruizer написал:  Примерно так - если "Обама" и "Wikileaks" часто встречаются в одном тексте, значит они по смыслу связаны. И, соответственно, если термины практически не попадаются вместе, значит и связи между ними нет.

А вот и нет. Обама с Викиликсом могут вообще рядом в одном тексте не стоять (опять же, тот же вопрос: кто будет определять, какой текст анализировать?). В том же тексте рядом могут стоять предлоги "в" и "на", и их сочетаемость и взаимосвязь будет сильнее, чем между Обамой и Вики.
Другой вариант: стоят вместе Вики и Обама - но они совершенно не при чем. Правда-правда smile.gif А при чем - тот же дождь в Камбодже, которого в ЭТОМ тексте нету.
Опять же: если кто-то будет искать взаимосвязи... к прмеру в том, что у меня появляется на экране монитора, то самыми часто встречающимися фразами будут "Купи квартиру в Ново-Гадюкино, фирменная кепочка в подарок" и "Сенсация!!! Сбросить ЖИР за три дня!" biggrin.gif
cruizer
19 июня 2013, 03:28

Голубая Собака написала:
В принципе, мы же тоже не всегда можем сказать, как связаны дожди в Камбодже с курсом йены. И самые мозговитые аналитики не всегда это скажут. Не, ну где-то кто-то еще может проследить, что затяжные ливни привели к резкому росту численности комара-переносчика денге, пошла вспышка заболевания, а пара-тройка алармистских статей в японской прессе (именно там, потому что сейчас как раз пара японских журналистов-фрилансеров дауншифтят на камбоджийском побережье) привели к резкому сокращению потока японских туристов в Сиануквилль... Не знаю, как это всё дальше с йеной увязать... а какая разница? Для большинства прикладных задач важно, что пролился дождь и йена скаканула. Промежуточные выкладки мало кого интересуют. Интересуют обычно более общие взаимосвязи: пролился дождь в Камбодже - покупай зонтик... или продавай йены на пике.

Вы правы... и даже если взаимосвязь как бы найдена, не обязательно что она найдена правильно и является главным фактором.


Голубая Собака написала:
А вот и нет. Обама с Викиликсом могут вообще рядом в одном тексте не стоять (опять же, тот же вопрос: кто будет определять, какой текст анализировать?).

Анализировать надо много текстов и собирать статистику. Например, все новости всех крупных и не очень крупных новостных агенств.


Голубая Собака написала: В том же тексте рядом могут стоять предлоги "в" и "на", и их сочетаемость и взаимосвязь будет сильнее, чем между Обамой и Вики.
Другой вариант: стоят вместе Вики и Обама - но они совершенно не при чем. Правда-правда smile.gif

А вот для этого и нужен семантический анализ smile.gif Искать совпадения слов в одном тексте - это самый простой вариант который работает. Если в гугл ввести obama wikileaks он выдаст неплохие результаты, а по их количеству можно судить о связанности фраз по смыслу. Этот запрос кстати показывает 60 млн результатов, а "yen" "cambodia weather" - только 699.
Дальше можно построить граф чтобы искать взаимосвязи между фразами, которые вместе не встречаются, и так далее.
В общем, здесь можно много чего делать и смотреть получается ли что-нибудь полезное. Меня интересует, имеются ли уже такие готовые системы, например на вооружении каких-нибудь финансовых аналитиков или политиков. Если нет - пора делать свою smile.gif
nezachem
19 июня 2013, 10:11

cruizer написал:
Есть численные методы, которые могут быстро искать корреляции на больших объемах данных. Там какие-то матрицы строятся, что-то перемножается или вращается. Деталей уже не помню, но методы такие точно есть smile.gif

Есть некоторая разница между искать корреляции и проверять все известные закономерности, тем более между всеми имеющимися параметрами, не находишь?

А методы есть, это да. Вычислять собственные вектора умели еще в 19-м веке. Модели строить сложнее. Но методы есть, но мы вам о них не расскажем, правильно я мыслю?

ps.gif Постфактум, кстати, искать закономерности можно. Применять их в дальнейшем можно тоже, но обязательно учитывая, что они найдены уже не только нами.
Crux
19 июня 2013, 13:58
Мы обсуждаем пока что иерархическую нейронную сеть как таковую, ее возможности, но не будем забывать - для адекватного анализа нужны еще базы данных. Тот же Grok не в состоянии анализировать ни изображения, ни звуки, ни запахи, ни что-то еще в том же роде. Ему можно скармливать только цифры. Ни одна из существующих систем ИИ не в состоянии адекватно анализировать изображения. Откуда это известно? А вот откуда - есть такая не хило развивающаяся отрасль в мире - информационный менеджмент инфраструктуры. Определяют транспортную нагрузку на разные участки дорог, в частности. Количество машин там считают люди, делают это, как правило, по записи с камер наблюдения. Если бы машины смог посчитать компьютер, это сразу экономия расходов на сотни миллионов долларов. Но нет такого до сих пор.
cruizer
19 июня 2013, 19:00

Crux написал:Определяют транспортную нагрузку на разные участки дорог, в частности. Количество машин там считают люди, делают это, как правило, по записи с камер наблюдения. Если бы машины смог посчитать компьютер, это сразу экономия расходов на сотни миллионов долларов. Но нет такого до сих пор.

Ну машины точно можно автоматически подсчитать.
Martin
19 июня 2013, 19:16

cruizer написал:
Ну машины точно можно автоматически подсчитать.

Без специальных датчиков, встроенных в полотно дороги или находящихся рядом?
alexia_f
19 июня 2013, 19:25

Crux написал: А вот откуда - есть такая не хило развивающаяся отрасль в мире - информационный менеджмент инфраструктуры. Определяют транспортную нагрузку на разные участки дорог, в частности. Количество машин там считают люди, делают это, как правило, по записи с камер наблюдения. Если бы машины смог посчитать компьютер, это сразу экономия расходов на сотни миллионов долларов. Но нет такого до сих пор.

Полностью автоматические системы давно разработаны и активно используются. См. статью в Wikipedia. Или, например, газетную заметку про счётчик за $139 с открытым форматом данных (на англ.).

Большие надежды сейчас связываются также с анализом данных о GPS координатах мобильных телефонов — т.назыв. Floating Car Data. Эти данные есть у мобильных операторов.

В недалёком будущем каждая машина будет пересылать (считывающим устройствам вдоль дорог или, что проще, мобильным операторам) данные о своём местоположении, скорости, техническом состоянии, загруженности и т.д. Все эти данные будут собираться, анализироваться в реальном времени и использоваться для оптимизации транспортных потоков, адаптивного изменения платы за проезд по платным дорогам, оперативного вызова эвакуаторов, ремонтных служб, полиции и т.д. Прототипы таких систем уже испытываются на реальных дорогах в Калифорнии и других штатах.
cruizer
19 июня 2013, 19:42

nezachem написал:
Есть некоторая разница между искать корреляции и проверять все известные закономерности, тем более между всеми имеющимися параметрами, не находишь?

А методы есть, это да. Вычислять собственные вектора умели еще в 19-м веке. Модели строить сложнее. Но методы есть, но мы вам о них не расскажем, правильно я мыслю?

ps.gif Постфактум, кстати, искать закономерности можно. Применять их в дальнейшем можно тоже, но обязательно учитывая, что они найдены уже не только нами.

Конечно поиск корреляции не панацея. Я и сам этому методу не доверяю, когда нужно сделать анализ предпочитаю визуализировать и посмотреть глазами. Но если параметров очень много, тут уже вопрос оптимизации - найти парамерты между которыми хоть какая-то связь есть, потом уже более детально изучать. Тут корреляция может помочь.
cruizer
19 июня 2013, 20:12

Martin написал:
Без специальных датчиков, встроенных в полотно дороги или находящихся рядом?

Да и видеокамеры хватит, направить ее вниз чтобы машины хорошо просматривались и все. Фотоаппараты современные умеют неплохо лица искать на произвольном фоне, а здесь прямоугольные машины на черном поле. Нормальная задача для курсовой или дипломной.
Голубая Собака
20 июня 2013, 02:25

cruizer написал: Меня интересует, имеются ли уже такие готовые системы, например на вооружении каких-нибудь финансовых аналитиков или политиков. Если нет - пора делать свою smile.gif

Что-то мне подсказывает, что фин.аналитики и уж тем более политики вряд ли об этом расскажут. Есть ли у них там готовые системы... или может на них толпа народа работает и каждый день глазами прессу просматривает (и какие-нибудь другие источники, признанные надежными - не все же ссылки Гугла сканировать).

Подробностей нам вряд ли дождаться. 3d.gif
Crux
20 июня 2013, 15:15

alexia_f написала:
Полностью автоматические системы давно разработаны и активно используются.

А машины, меж тем, продолжают считать люди. То есть, вот имеется статья в Википедии и реальность. Кому верить?
Solmir
20 июня 2013, 15:35

Crux написал:
А машины, меж тем, продолжают считать люди. То есть, вот имеется статья в Википедии и реальность. Кому верить?

А это свое очередное утверждение ты можешь чем-то подкрепить или как всегда?
Поскольку в Сети есть и другие мнения. Например.

Система Unicam способна измерять и оценивать большое разнообразие данных о трафике с помощью видеонаблюдения. Данные могут собираться и хранится локально или передаваться на центральный сервер для дальнейшей обработки с помощью стандартной инфраструктуры связи (оптоволокно, беспроводная связь). Собранные данные включают в себя:
Интенсивность движения

Интенсивность движения — это мера средней загрузки дороги в течение определённого периода времени. Она измеряется в транспортных единицах и выражается отношением времени, в течение которого дорога загружена, к промежутку времени, когда данная дорога свободна.
Пример диаграммы, отображающей определённую системой Unicam интенсивность движения. На диаграмме показана интенсивность в регулируемой 15-минутный промежуток времени.
Характеристики транспортного потока
Каждая полоса движения отдельно регулируется по следующим параметрам:

    Средняя скорость — отношение суммы скоростей конкретных автомобилей к сумме всех транспортных средств, проходящих в определённый период времени.
    Максимальная достигнутая скорость — максимальная скорость конкретного автомобиля среди всех транспортных средств, проходящих в определённый период времени.
    Гистограмма скоростей — отображение статистической информации, показывающей частотность прохождения транспортных средств за определённый период времени через последовательные равномерные числовые интервалы.

Пример гистограммы измеренных скоростей с интервалом в 5 км/ч.
Все транспортные средства в каждой категории скорости подразделяются на следующие группы:

    личные автомобили и развозные грузовики
    грузовые автомобили и автобусы
    неопределённые транспортные средства

Интеллектуальные видео-камеры системы Unicam, технология автоматического считывания номерного знака и аналитическое программное обеспечение могут быть использованы для исследований транспортных потоков по методу «отправление-назначение». Исследования показали, что анализ транспортных потоков по номерным знакам является разумным методом получения данных о движении автомобилистов и в настоящее время становится более важным, чем исследования, проводимые вручную. Это объясняется тем, что автоматизированные системы способны сопоставлять автоматически считанные текстовые формы номерных знаков в крупных базах данных и предоставлять информацию о поведении водителей на протяжённой территории в режиме реального времени

Используется словосочетание "могут быть использованы", но не только в России (и в основном не в России) могут использоваться подобные разработки.
nezachem
21 июня 2013, 12:23

cruizer написал:
Конечно поиск корреляции не панацея. Я и сам этому методу не доверяю, когда нужно сделать анализ предпочитаю визуализировать и посмотреть глазами. Но если параметров очень много, тут уже вопрос оптимизации - найти парамерты между которыми хоть какая-то связь есть, потом уже более детально изучать. Тут корреляция может помочь.

Корреляция между чем и чем? Я прицепился к словам проверять все известные закономерности между всеми имеющимися параметрами.

То, что обычно понимается под корреляцией (aka вычисление обусловленности матриц), отлично работает при поиске линейных связей. Шаг в сторону нелинейности, и конвой стреляет без предупреждения. Например, корреляция между синусом и косинусом равна, ясное дело, нулю. Те же данные, представленные в полярных координатах, дадут совершенно другую корреляционную картину. Поэтому я не случайно употребил слово модель; ты тоже предпочитаешь сначала визуализировать. Иначе говоря, автоматически искать закономерности можно только имея надежное представление о природе данных и возможных между ними связях. При поиске вслепую комбинаторный взрыв обеспечен.

Автоматически же строить модели пока еще никто не научился.
Martin
22 июня 2013, 17:31

nezachem написал: Автоматически же строить модели пока еще никто не научился.

Кстати, достойная задача для ИИ - определять семантические связи между данными.
Лис
23 июня 2013, 14:06

Martin написал:
Кстати, достойная задача для ИИ - определять семантические связи между данными.

Для желающих порешать такие задачи Google недавно опубликовал data set (англ.):
https://research.cs.wisc.edu/dbworld/messag...1366061568.html

со множеством примеров, рассмотренных и разобранных экспертами-человеками
Crux
25 июня 2013, 13:44

Solmir написал:
А это свое очередное утверждение ты можешь чем-то подкрепить или как всегда?
Поскольку в Сети есть и другие мнения. Например.

А на эту очередную безосновательную критику тебе я скажу вот что. Прав я. Потому что есть мировой рынок информационного менеджмента инфраструктуры, и он составляет несколько миллиардов долларов в год, и почти все считается вручную. А есть сырые, недоработанные технологии, в т.ч. по твоей ссылке, которые дорогие для внедрения и неудобные для использования. И проблема именно в несовершенных алгоритмах распознавания визуальных образов. Поэтому, считать-то машинки они считают, но лишь при определенном угле зрения видеокамеры и при условии, что едущая машинка резко не поменяет площадь и конфигурацию своей проекции на плоскость объектива. Иначе алгоритм подсчета машин начнет выдавать ошибки. И с этой целью, камеру вешают как можно выше, чтоб она снимала практически сверху транспортный поток. И для этого, под каждую камеру нужно вкапывать специальный столбик повыше. И снимает эта камера НЕ ДВИЖЕНИЕ транспортного потока - алгоритм считает машины из строго заданной заранее позиции. А значит, идет подсчет машин, проезжающих ПО УЧАСТКУ дороги. Заказчикам же подобных исследований нужно несколько иное - подсчет НАПРАВЛЕНИЙ транспортных потоков. То есть, откуда машинки едут и куда поворачивают. Компьютер с подсчетом поворачивающих машин не справляется, но если бы даже справлялся, толку было бы мало. Допустим, заказчику нужно просчитать машины на т.н. X-перекрестке. Это 12 направлений движения машин. Допустим, каждая камера автоматического подсчета способна брать по 2 направления одновременно (что тоже пока еще фантастика). В этом случае, понадобится вкапывать 6 высоченных столбов и вешать на них 6 камер. А в человеческом исполнении, это будет одна самая обычная видеокамера, прикрепленная к любому столбу неподалеку от перекрестка. И 24 человеко-часа работы на обсчет записи, что несравненно дешевле вышеприведенных глупостей.
Rendom
25 июня 2013, 23:35

Голубая Собака написала: В таком случае всё дело - в этом программисте-экономисте. У естественных интеллектов иногда случаются инсайты и прочие короткие замыкания, когда опа! и выясняется, что дожди-то в Камбодже - это не баран начхал, это очень даже имеет значение, и курс йены понятно почему скаканул!!!

Понятно, почему. Там в Камбодже этих японцев хватает. На реставрациях Ангкора очень много. Не бывает дыма без огня.
nezachem
26 июня 2013, 11:11

Crux написал:
А в человеческом исполнении, это будет одна самая обычная видеокамера, прикрепленная к любому столбу неподалеку от перекрестка. И 24 человеко-часа работы на обсчет записи, что несравненно дешевле вышеприведенных глупостей.


Извини, я честное слово не понял:
Во-первых,

Crux написал информационный менеджмент инфраструктуры. Определяют транспортную нагрузку на разные участки дорог


Crux написал:Заказчикам же подобных исследований нужно несколько иное - подсчет НАПРАВЛЕНИЙ транспортных потоков.

Так что же нас (их) интересует?

Во-вторых, не смог бы ты описать, что именно сделает человек с записью одной самой обычной видеокамеры на столбе недалеко от этого перекрестка?
user posted image?
И какова цена будет его "обсчету"?

В третьих, насколько я понял из твоего описания, машинки никому не интересны; достаточно прочитать номера, а уж с этим даже полицейские камеры справляются.
nezachem
26 июня 2013, 11:18
.
Голубая Собака
26 июня 2013, 17:47

Rendom написал:
Понятно, почему. Там в Камбодже этих японцев хватает. На реставрациях Ангкора очень много. Не бывает дыма без огня.

Ну вот. Тайна японской йены (и ее отношений с дождем в Камбодже) раскрыта. Недостающий элемент цепочки найден (наверное).

Теперь идем "обратным назадом" и раскручиваем: как именно мы, естественные интеллекты, узнали, как именно высокий курс йены связан с дождями. О том, что на раскопках Ангкор Вата полно японцев, можно узнать разве что побывав там где-то рядышком (вряд ли эта информация есть где-то в интернете... вернее... уже есть, на ФЭРе 3d.gif ... а пару недель назад не было). Как об этом узнает ИИ, если он за пределы своей серверной никогда не выезжал? (и даже загранпаспорта не имеет) tongue.gif Разве что взломает какой-нибудь сервер камбождийского МИДа с базой данных обо всех понаехавших.
Crux
27 июня 2013, 11:59

nezachem написал:

Извини, я честное слово не понял:

Верю.


nezachem написал:
Так что же нас (их) интересует?

Вас - не знаю. Их - нагрузка на дорожное полотно по разным направлениям.


nezachem написал:
Во-вторых, не смог бы ты описать, что именно сделает человек с записью одной самой обычной  видеокамеры на столбе недалеко от этого перекрестка?

И какова цена будет его "обсчету"?

Категории машин дает заказчик. Как правило, это: легкие грузовики, тяжелые грузовики, т.н. тендеры, легковые, такси, автобусы и велосипеды. Единоразово выбирается от трех до пяти категорий. Человек считает эти категории с записи по направлениям движения, с пятнадцатиминутными интервалами. Цена просчета полного перекрестка c 12 направлениями с 6.00 до 20.00 - от $50 до $100 в среднем.


nezachem написал:
В третьих, насколько я понял из твоего описания, машинки никому не интересны; достаточно прочитать номера

Заказы с номерами бывают, но их очень мало по отношению к общей массе заказов.
nezachem
28 июня 2013, 11:28

Crux написал:
Категории машин дает заказчик. Как правило, это: легкие грузовики, тяжелые грузовики, т.н. тендеры, легковые, такси, автобусы и велосипеды. Единоразово выбирается от трех до пяти категорий. Человек считает эти категории с записи по направлениям движения, с пятнадцатиминутными интервалами. Цена просчета полного перекрестка c 12 направлениями с 6.00 до 20.00 - от $50 до $100 в среднем.


Заказы с номерами бывают, но их очень мало по отношению к общей массе заказов.

Как обычно, прошу прощения. Цена не в смысле рублей в час, а в смысле грош цена. Кто-нибудь в здравом уме и трезвой памяти будет доверять подобным отчетам, которые ни проверить ни протестировать по хорошему невозможно?

Заказы с номерами ни при чем. Имея номер (а их легко распознать), несложно узнать категорию носителя номера, от тендера до велосипеда. Это, если интересуют маршруты. Нагрузка же гораздо проще меряется парой проводов с контактными датчиками.

И еще: за 15минутный интервал при нормальном движении по одной полосе пройдет примерно 3000 машин. Что, собственно, человек сможет посчитать, или я опять чего-то не понял?
cruizer
28 июня 2013, 13:02

Crux написал:  Категории машин дает заказчик. Как правило, это: легкие грузовики, тяжелые грузовики, т.н. тендеры, легковые, такси, автобусы и велосипеды. Единоразово выбирается от трех до пяти категорий. Человек считает эти категории с записи по направлениям движения, с пятнадцатиминутными интервалами. Цена просчета полного перекрестка c 12 направлениями с 6.00 до 20.00 - от $50 до $100 в среднем.

А объемы какие? Вырисовывается интересная бизнес-идея smile.gif Вы транслируете видео с камер на наш сервер, предварительно сделав несложную настройку для каждой камеры, и практически в реальном времени получаете статистику по указанным категориям транспорта. Цена в пересчет на час скажем в 2 раза меньше, объемы - чем больше тем лучше.
cruizer
28 июня 2013, 13:05

Голубая Собака написала: Как об этом узнает ИИ, если он за пределы своей серверной никогда не выезжал?

Гугл по запросу "Ангкор Ват японцы" выдает 2 миллиона результатов только на русском smile.gif
Crux
1 июля 2013, 11:50

cruizer написал:
А объемы какие? Вырисовывается интересная бизнес-идея smile.gif Вы транслируете видео с камер на наш сервер, предварительно сделав несложную настройку для каждой камеры, и практически в реальном времени получаете статистику по указанным категориям транспорта. Цена в пересчет на час скажем в 2 раза меньше, объемы - чем больше тем лучше.

Объемы в мире - кажется, 3 миллиарда долларов в год. И, кстати, так не пойдет. Подсчет не ведется длительное время на одном и том же месте. Есть видеозаписи перекрестков, включающие от 6 до 12 направлений транспорта. Если существует программа, способная просчитать цифровую запись по направлениям и видам транспорта, сообщите. Но такой программы нет.
Crux
1 июля 2013, 11:53

nezachem написал:
Имея номер (а их легко распознать)

Ошибка здесь. Их легко распознать при нормальном освещении, нормальной видеокамере, установленной должным образом, и лишь вдоль локального участка трассы. Вы замучаетесь считать перекресток подобным образом.


nezachem написал:
Кто-нибудь в здравом уме и трезвой памяти будет доверять подобным отчетам, которые ни проверить ни протестировать по хорошему невозможно?

Выборочная проверка проводится заказчиком по видеозаписи.


nezachem написал:
И еще: за 15минутный интервал при нормальном движении по одной полосе пройдет примерно 3000 машин. Что, собственно, человек сможет посчитать, или я опять чего-то не понял?

На практике, гораздо меньше - ведь это город, а не трасса. Светофоры, пробки, то-се.
Martin
2 июля 2013, 16:23
Читаю между делом Бжезинского "Великая шахматная доска" и навеяло такую мысль: то государство, которое сумеет внедрить в производство ТНП всю мощь искусственного интеллекта (и не только в производство), подаст заявку на звание новой супердержавы. Пока имеются три кандидата: старушка Европа (проект Human Brain Project), старые добрые США (совместный с Европой проект Blue Brain Project). О разработках в Китае пока ничего не слышно.
Alex Lonewolf
2 июля 2013, 23:21

Martin написал: Читаю между делом Бжезинского "Великая шахматная доска" и навеяло такую мысль: то государство, которое сумеет внедрить в производство ТНП всю мощь искусственного интеллекта (и не только в производство), подаст заявку на звание новой супердержавы. Пока имеются три кандидата: старушка Европа (проект Human Brain Project), старые добрые США (совместный с Европой проект Blue Brain Project). О разработках в Китае пока ничего не слышно.

ТНП = транснациональная преступность?

Если "товары народного потребления", то твою мысль стоило бы обосновать. т.к. лично я не вижу где у нас в производстве ТНП есть недостаток кадров, который стоило бы восполнить за счет ИИ.

Давай я выскажу альтернативную мысль: то государство, которое сумеет внедрить в слежку наблюдение за гражданами всю мощь искусственного интеллекта, подаст заявку на звание новой супердержавы.
Martin
3 июля 2013, 17:05

Alex Lonewolf написал: Если "товары народного потребления", то твою мысль стоило бы обосновать. т.к. лично я не вижу где у нас в производстве ТНП есть недостаток кадров, который стоило бы восполнить за счет ИИ.

Роботы быстрее и качественнее, чем люди, смогут производить товары. А также проектировать их, попутно двигать вперед прикладную науку (например, увеличение степени интеграции чипов), проводить маркетинговые исследования и т.д. Таким образом, товары, производимые роботами, будут конкурентоспособнее, чем обычные товары, производимые людьми. А страна, в которой будут работать эти роботы, станет очень быстро экономически расти (подобно Германии, Японии, Южной Корее, Китаю и т.д.)
Vasillyy
4 июля 2013, 12:56

Martin написал:
Роботы быстрее и качественнее, чем люди, смогут производить товары. А также проектировать их, попутно двигать вперед прикладную науку (например, увеличение степени интеграции чипов), проводить маркетинговые исследования и т.д.

" - А есть за меня вы тоже будете?
- Ага!" © "двое из ларца"
Martin
4 июля 2013, 16:10

Vasillyy написал:
" - А есть за меня вы тоже будете?
  - Ага!"  © "двое из ларца"

Люди не смогут конкурировать с роботами в хозяйственной деятельности и им придется уйти с рынка труда. Чтобы им не умереть с голоду, придется людям выплачивать вэлферы, достаточные для прожиточного минимума и осуществления основных свобод и прав (возможности коммуникаций, переезда в разные части света и т.д.). Настанет некое подобие коммунизма.
Solmir
4 июля 2013, 16:52
Коммунизм как высшая стадия социализма искусственного интеллекта. Естественным это понять трудно.
Дальше >>
Эта версия форума - с пониженной функциональностью. Для просмотра полной версии со всеми функциями, форматированием, картинками и т. п. нажмите сюда.
Invision Power Board © 2001-2016 Invision Power Services, Inc.
модификация - Яро & Серёга
Хостинг от «Зенон»Сервера компании «ETegro»