Crowdsourcing

Слово "outsourcing" уже давно стало известо всем, а не только программистам, чья работа уплыла в Индию-Китай, пионеря всех и вся, прямо с началом 21 века. Познакомьтесь теперь с новым словом "crowdsourcing", и опять программисты тут в пионерах.
Итак, что же это такое? Происходит от 2-х слов: crowd - толпа, и sourcе - источник. Читаю вчера по дороге на работу статью о том, как одна из крупных компаний, AOL, к-я когда-то была из первых, принесших в США электронную почту и прочие прелести интернета в широкие массы, что они задумали проверить, а эффективно ли используются видео из их видиотеки. Для этого проекта надо было просмотреть тысячи вебстраниц и выяснить как публикуются линки на те видео, к-е есть в видеотеке, насколько удобен доступ к ним, все ли категории фильмов удобно просматриваются, и не остаются ли вообще  невострeбованные видео и проч.

Проект гигантский. Как его выполнить? Можно написать сложную программу видео-детектор, но для этого необходимо нанять высоквалифицированных программистов, и все равно они не успевают выполнить задание к сроку. Можно нанять временных работников, к-е просмотрят эти тысячи веб-страниц, но этих работников только искать и нанимать займет много времени. Да и зачем, когда появился crowdsourcing?
Проект разбивают на крошечные по об'ему работ порции в component tasks, и помещают задания на вебсайте для всех, кто пожелает участвовать. Tasks по простой обработке данных оплачивается просто в центах, написание более сложных scripts и кода на языках программирования оценивается от $10 до $20 за task (не за час, ребята!), а если весь проект опубликовать вообще как game, то и вообще ничего не платят, но всегда находятся добровольцы (азарт - великй двигатель!) за то, чтобы их nickname или настоящее имя поместили на вебсайте с к-вом заработанных очков.
В общем эта тенденция настолько понравилась бизнесам, что количество таких проектов, отданных на публику, резко возросло за прошлый год, а доходы фирм, специализирующихся на crowdsourcing выросли на 74% за год.
Конечно, есть минусы, ибо компания раскрывает свои данные не известно кому, и одна порция обрабатывается пареньком из индийской деревни, а другая - домохозяйкой в Мексике, - лишь бы у них был бы доступ к интернету, но когда данные не представляют никаких секретов, то почему не сыкономить на их обработке?
Дальше - больше.
В США есть компания по рассылке видео-дисков с фильмами по почте или по прямому internet movie streaming, Netflix. Каждый их customer может написать о просмотренном фильме все, что он пожелает, и дать свой rate, т.е. оценку. В зависимости от результатов коллективного рэйтинга, народ, конечно же, запрашивает те фильмы, к-е оценили получше, те, кто уже их просмотрел ранее. Компания хочет заранее заготавливать побольше копий дисков именно этих фильмов, а не тратить деньги впустую, пытаясь угадать желания клиентов. Результаты рэйтинга постоянно обновляются и хранятся в базе данных.
 Netflix искала эффективный алгоритм по рекомендации фильмов. Австралийская компания Kaggle специализируется на таких "заумных" задачах, она не решает их сама, она просто их публикует анонимно, и все гении, аутисты и просто те, чьи мозги скучают на рутинной работе, предлагают свои алгоритмы. Всего уже зарегистрировали около 51,000 geeks, к-е предлагают алгоритмы банкам, как выявить жуликов, покупающих на чужие кредит-карты, в какой день недели или час суток магазины должны выставить на кассы больше персоналу, как оценить автомобильную страховку в зависимости от производителя и модели автомобиля и проч...
Участники этих конрурсов, а особенно победители, еще пока могут рассчитывать на приличные вознаграждения, иногда до миллионов долларов, ибо фирмы экономят на внедрении этих алгоритмом огромные деньги, да и философия создателей Kaggle такова, что многие geeks имеют весьма слабо развитые people skills, т.е. не общительны и поэтому они не умеют продавать свои таланты, да и их просто трудно найти потенциальным работодателям, но это не значит, что их аналитические способности и таланты, по-настоящему очень нужные, должны прозябать всуе. Вот интернет в сущности и выполняет роль свахи, сводя geeks с бизнесами.
Однако, одни благородно дают гениям-отшельникам заработать, а другие просто берут идею crowdesourcing  в своих исключительно личных целях.
Но так или иначе, дамы и господа, Сrowdesourcing  - прошу знакомиться!