Нейронная сеть на PHP. Моя первая, работающая :)))

Очень захотелось похвастаться, что у меня получилось ))))

Мой однослойный персептрон (10 нейронов) находится здесь:
http://xcont.com/perc/newperceptron/

Ну а исходники можно посмотреть здесь:
http://rasty.kiev.ua/viewtopic.php?t=18964

Над чем думаю поработать - функция активации у меня жесткая (Функция Хевисайда). И соответственно порог для этой функции пришлось взять от балды. Для 10 картинок 3х5 - это не критично, но если захотим сделать персептрон серьезней - надо заюзать какую-то сигмоидальную фукцию. Но я пока не могу въехать, как это сделать.

PS. Потом чуть доработаю, чтобы можно было нейронной сети скармливать некорректные картинки.

Добавлено спустя 12 минут 47 секунд:
Могу же, когда хочу)))

Добавлено спустя 34 минуты 58 секунд:
PS. Для тех, кто не въехал. Обучить за раз можно только одну цифру. Не надо вводить в форме 0123456789, надо вводить по очереди 0, 1, 2... и после каждого ввода изучать.

 

По поводу обучения, то что сейчас на сайте - вряд ли получится обучить распознавать больше 4-5 символов. Дело в том, что там порог активации стоит 100. Больше ставить не могу - не хочу сервак грузить. Тестировал с порогом 1000 - все символы изучает.
Кроме того, для того, чтобы сделать сеть умнее - не обязательно порог завышать. Можно указать дробный коэффициент (0.01 например), и прибавлять к весовым коэффициентам +-(вход*коэффициент обучения). Результат тот-же, что и с порогом - сеть учится дольше, но становится умнее.
И еще одно, чем больше итераций обучения - тем меньше легче обучается сеть.

Добавлено спустя 1 минуту 3 секунды:
В общем, с персептроном справился. Теперь можно изучать многослойные персептроны, и сети с обратными связями ))

Добавлено спустя 57 минут 38 секунд:

получилось все 10

 

Не, ну почему. Скажем у нас есть сайт, на котором пользователи могу оставлять сообщения (личные сообщения, записи в блогах, комментарии). Другие пользователи могу нажать кнопочку "спам". Наша сеть учится находить какие-то шаблоны, по которым определяет вероятность, что сообщение спам (количество http в сообщении, какие-то слова, которые используются в основном спамерами, еще хер знает что...). Такую систему организовать не сложно, но эта систему будет покруче чем капчи с матанализом.

 

Но нейронная сеть на нем работает. Сегодня хочу попробовать генетический алгоритм написать, управляемый персептроном.

 

Java за вечерок не изучу.

 

Новые языки программирования изучаю примерно так-же, как мой персептрон - научившись распознавать "2" и тем более "3" - напрочь забываю, как выглядит "1". Изучение JavaScript прекратил, когда забыл, как посчитать массив в php - count($a) или $a.count.
Какой там синтаксис в Java?

 

Чем ява идеальней других инструментов?

 

Основной критерий, по которому я определяю, стану изучать язык или нет - работа с графикой. Если открыв новый инструмент, я в нем за полчаса не смогу написать клеточный автомат Конвея - инструмент закрываю и больше к нему не возвращаюсь.

В Java я смогу за час написать клеточный автомат? Или надо будет неделями выяснять, как тут графическую библиотеку подключить, где ее вообще скачать и почему она у меня не компилируется?

 

Ладно. Будет на твоей совести.
С зарплаты выделю 10% на покупку литературы по Java.

 

Зачем мне англицкий? Литературу я буду покупать с переводом. Поцоны посоветовали "Java 2. Библиотека профессионала." - Кей С. Хорстманн, Гари Корнелл. Там два тома, общим весом 1800 страничек. На первое время, думаю, должно хватить

 

Зря как? А как не зря?

 

Англицкий я знаю на уровне чтения доков. Но для того, чтобы изучить язык - мне нужен структурированный подход. Книга лучше всего подходит.

Добавлено спустя 20 минут 59 секунд:
Да и вообще. В книге больше полезностей чем в доке. В книге опыт, а в доках сухой синтаксис.
Например, те кто с JavaScript

Код (PHP):

1. var numbers = [1,2,3,4,5];
2. for (var i = 0; i < numbers.length; i++) {
3.   alert(numbers[i])
4. } 

переходят на PHP, будут упорно лепить говнокод:

Код (PHP):

1. $numbers = array(1,2,3,4,5);
2. for ($i = 0; $i < count($numbers); $i++) {
3.   echo $numbers[$i];
4. } 

Даже не догадываясь, что это говнокод. А если почитать хорошую книгу (действительно хорошую), то там обязательно где-то в примечании заметят, что так писать некорректно.

Ну и так по мелочам. Чтобы не лепить говнокод, лучше все-же начать с книги, а потом уже по мере надобности пользоваться доками-справочниками-мануалами

 

Зачем быть в тренде?