Т. Сегаран, «Программируем коллективный разум».

Очень увлекательное и вдохновляющее введение в алгоритмы обработки данных. Как ранжировать результаты поиска, искать «товары, похожие на данный», как сделать обучаемый спам-фильтр, и для чего разработчику социальной сети может пригодиться знание линейной алгебры – всё это и многое другое в книге Тоби Сегарана.

Написана (и переведена) на удивление легко и понятно, рассматриваются очень жизненные для веб-разработки вопросы.

Примеры кода на Python, но знание тонкостей языка для понимания не требуется: всё подробно расписано в тексте. По своему опыту могу сказать, что оттранслировать пример на PHP достаточно легко, а самостоятельно поиграться с получившимися системками – ужасно любопытно.

Кстати, эта книга была одной из самых продаваемых на Амазоне книгой по искусственному интеллекту, а автор сейчас работает в Google.

Во время прочтения понимаешь, что вокруг тебя масса данных, и начинают чесаться руки опробовать на них все интересные штуки, о которых пишет Тоби. Лично для меня это вылилось в то, что половину новогодних праздников я провел за написанием самообучающегося RSS-ридера на основе байесовского классификатора, который выбирал бы и показывал из кучи новостей те, которые будут интересны лично мне. Плюс назаказал ещё книжек по датамайнигу, нарушив свое правило не покупать больше одной книги за раз.

После прочтения «Программируем…» мне захотелось поглубже вникнуть в нейронные сети и я купил
С. Толкачев, «Нейронное программирование диалоговых систем».

Осилил её до конца (благо, тоненькая), но исключительно чтобы получить моральное право оставить негативный отзыв.

Автор явно «в теме» и работал с нейронными сетями на практике, но для кого написана эта книга – непонятно. Казённый язык, очень обзорный подход без сколько-нибудь подробного описания реализаций, много общих слов. Все интересные темы, вынесенные на обложку, там действительно затрагиваются, но конкретики почти никакой. Примеры, приведенные в книге, в лучшем случае поясняют базовые принципы. В общем, сплошное разочарование.

Отсюда вопрос: можете порекомендовать толковую книжку по нейронным сетям?

Гаджеты для Windows по-прежнему можно разрабатывать и устанавливать, но размещать их предлагается не в галерее, а на хостинге для разработчиков CodePlex. Что, как вы понимаете, совсем не так удобно для конечных пользователей.

То, что MS была не очень заинтересована в последние годы в гаджетах, чувствовалось: баги Sidebar не правились, корпоративный блог о гаджетах заглох. Так что закрытие галереи – вполне логичное продолжение. Вот почему плохо программисту связываться с проприетарными технологиями: решили перестать развивать – и всё, прости-прощай. Билл дал – Билл взял. Печально.

Ну а для тех, кто хочет всё-таки обновить гаджеты Википедии, я выложил новые версии у себя на сайте. В них исправлен, наконец, баг со счётчиком страниц, и гаджеты перенастроены на новую верстку Википедии.
Wikiknow.gadget
Wikiday.gadget

Я грешил на какие-то хитрые настройки безопасности, но дело оказалось гораздо проще. 64-битная версия Internet Explorer не поддерживает Flash, а в 64-битной Windows именно он используется Боковой панелью в качестве движка для гаджетов. Придётся ждать, когда Adobe выпустит нужную версию флэшплеера (обещают, вроде как, в начале следующего года).

Меня ужасно расстраивало, что такое каскадное распространение не работает в случае виджетов для рабочего стола (особенно моих любимых гаджетов Windows) и «стартовых страниц»: люди ставят виджет из галереи и не могут быстро порекомендовать его друзьям. Но на РИФе коллеги (о которых, пожалуй, рано или поздно будет отдельный пост) подсказали, что можно использовать тот же принцип: добавить в виджет окно «поделиться» с кнопками для простановки ссылки на него в соцсетях и блогах. Думаю, если развить идею и связать рекомендацию с результатом работы виджета, эффект будет ещё больше. Например, виджет погоды может вставлять в блог картинку с прогнозом, а виджет с интересными фактами – такой факт.

На практике этот подход я пока не проверял, но надо будет попробовать. Когда сделаю и соберу статистику, обязательно поделюсь.
А вы как считаете, сработает? И есть ли другие способы запустить «цепную реакцию» распространения виджета?

Кстати, очень заметно, как поменялась аудитория конференций: если 2 года назад на РИТе царила атмосфера студенческого сборища, то сейчас там тусовался народ постарше и посерьёзнее. А на РИФе наоборот, в этом году были сплошные молодёжные промоакции с раздачей халявы и рисованием граффити на асфальте.

Полетал там на воздушном шаре. Правда, невысоко, всего метров на 11 поднимались – сказали, погода нелётная.

А вот и моя презентация.

Надеюсь, позже организаторы конференции выложат видео, а пока выкладываю презентацию и черновик текста доклада.

Кстати, меня пригласили прочесть доклад о виджетах на РИФ 2010. Он будет ориентирован не на разработчиков, как РИТовский, а на менеджеров интернет-проектов и просто интересующихся: не «как это сделать», а «что это вообще такое». Поэтому, если будете там 22-го, заходите, пообщаемся лично.

Доклад_Белогорцев – это текст доклада, который я писал для себя, так что без какого-то особого оформления.

Итак, встречайте Amnesty Generator for Vista.

Работает она просто: устанавливаете себе на компьютер, запускаете, и видите окно генератора.

Создание гаджета состоит из трех шагов.

• На первом – ищите нужный веб-виджет. Выбираете каталог из выпадающего списка и нажимаете «Open Site in Browser», чтобы перейти на его сайт.
• На втором шаге вставляете HTML-код из каталога в текстовое поле.
• На третьем – указываете имя виджета, размеры (с ними, возможно, придётся поэкспериментировать) и иконку (при желании). Жмёте Generate… и вуаля – гаджет готов и установлен.

К сожалению, как показала практика, срабатывает Amnesty не всегда, работать созданный гаджет будет только при наличии соединения с интернетом и по дизайну будет уступать сделанному профессионально. Но для личного пользования может хватить, так что если заинтересовались, попробуйте.

Кстати, у той же компании есть генератор виджетов для Mac OS X.

Для этого есть несколько способов.
Во-первых, можно отслеживать посещаемость страницы, где стоит ссылка на виджет. Для этого подойдут обычные счётчики вроде LiveInternet, но такая статистика мало что даст: неизвестно, заинтересовались ли пользователи продуктом. А встроить такой счётчик в сам виджет не получится: они на это не рассчитаны.

Во-вторых, можно анализировать логи веб-сервера. Когда пользователь скачивает виджет или работающая программка обращается к сайту за данными, сервер об этом узнаёт. Но этот способ достаточно трудоёмкий и не даёт полной картины. Например, если у нас есть новостной виджет для Windows Vista, мы сможем по логам узнать, когда виджет обращался за данными. Но просматривал ли пользователь новости, кликал ли по ссылкам – непонятно.

В-третьих, если это виджет для сайтов и соцсетей, можно поискать страницы, на которых он установлен, с помощью того же Яндекса. Например, так. Но оценка, опять же, получается приблизительная и не для каждого случая подходит.

Как видите, ни один из этих способов не может дать полную информацию о том, кто и как использует ваш продукт. Поэтому, перепробовав их все, я написал свою собственную систему учёта статистики.

В чём её плюсы:

1. Тесно интегрируется с разрабатываемыми мной виджетами: виджет сам отправляет в статистику те и только те данные, которые нужно учитывать.
2. Очень гибкая. Благодаря этому легко вычислять как стандартные метрики (например, число уникальных посетителей в сутки), так и добавлять специфические, нужные конкретному заказчику. Например, для того же новостного виджета можно отслеживать, через какое время после запуска программы пользователь начинает кликать по заголовкам новостей. Читает он их раз в сутки, после включения компьютера, или регулярно?
3. Может выдерживать повышенные нагрузки благодаря тому, что сбор, хранение и отображение данных легко разносятся на разные сервера. Это становится актуально, если виджет резко набирает популярность, а хостинг к такому оказывается не готов.

К этой системе уже подключены несколько сделанных мной виджетов и она отслеживает основные метрики: для десктоп-виджетов – количество пользователей в сутки, для веб-виджетов – ещё браузеры, OS и рефереры. А просмотр собранных данных осуществляется в минималистичной админской панели:

P.S. Я открыл доступ к статистике двух моих экспериментальных виджетов, так что теперь вы можете лично посмотреть, как выглядит WStat изнутри.

Попалась мне тут презентация о виджетах главной страницы Яндекса.

Без самого доклада, конечно, вещь не очень полезная, но в ней есть приятная цифра: чтобы попасть в каталог и региональную программу, виджету надо набрать популярность не 500, как говорили вначале, а 75 пользователей в сутки.

Напомню, что виджеты Яндекса позиционируются как способ продвижения сайтов с региональным контентом: поставщик контента создаёт виджет, рекламирует его на своём сайте, и когда его творение набирает достаточную популярность, оно попадает в каталог Яндекса. А потом, если виджет будет принят в региональную программу, его реклама может быть размещена на главной странице Яндекса,  показываемой для соответствующего региона.

Интересно взглянуть на отчёты о региональной программе, которые Яндекс регулярно публикует:

http://clubs.ya.ru/company/replies.xml?item_no=17898 – июльский

http://clubs.ya.ru/company/replies.xml?item_no=18994 – сентябрьский

Из них можно узнать, что самыми активными пользователями виджетов являются воронежцы, а больше всего сделано для Санкт-Петербурга. Причём самые популярные сервисы – не новостные, как можно было бы подумать (хотя их больше всего), а о работе.

Виджеты Opera

- это разновидность виджетов для рабочего стола, «движком» для которых является браузер Opera.

Появились они в версии 9 и до сих пор активно дорабатываются.

Чтобы сразу получить представление о том, что это такое, загляните в галерею виджетов с помощью этого браузера (чтобы иметь возможность сразу устанавливать виджеты).

Создаются эти мини-программы с помощью обычных веб-технологий: HTML, JavaScript, плюс Opera предоставляет свой JavaScript-API для управления виджетом и сохранения его параметров.
К тому, как у них всё организовано с технической точки зрения, я не могу придраться: обширная документация для разработчиков, готовые JS-библиотеки и шаблоны дизайна, живой форум, наличие инструментов отладки.

Свою технологию Opera активно продвигает с помощью конкурсов для программистов и ведётся работа по утверждению W3C этой технологии как стандарта для создания виджетов.
Ещё один плюс виджетов Opera – их кроссплатформенность. Везде, где есть Opera или Opera Mobile, они будут работать. Благодаря этому виджеты Opera – один из самых лёгких способов делать виджеты для коммуникаторов.

Теперь о недостатках. Их всего два, но они могут с лёгкостью перевесить достоинства.
Малая распространённость Opera
Доля этого браузера в Рунете постепенно растёт, но сейчас составляет лишь около 20% (по данным LiveInternet). А процент людей, пользующихся виджетами, будет гораздо меньше (при всей простоте использования, в блогах до сих пор можно встретить вопрос «Что это ещё за виджеты в Опере такие?»).
Виджеты привязаны к браузеру
Когда окно браузера открыто, они работают. Закрыто – пропадают. Это может быть неудобно для людей, использующих браузер не 100% времени работы за компьютером.

Резюме.
На мой взгляд, малая доля Opera на рынке сводит на нет все достоинства технологии. Поэтому разрабатывать виджеты Opera для вашего проекта имеет смысл, только если процент её пользователей у вас достаточно велик.