Все лгут. Поисковики, Big Data и Интернет знают о вас всё

Cет Cтивенс-Давидовиц напоминает ребенка, которому дали интересную игрушку и он никак не может наиграться. Это забавно и одновременно здорово, когда человек от своей работы получает так много удовольствия. Сейчас, когда каждый человек каждый день чувствует на себе давление интернет-маркетинга, и всё актуальнее становятся ужастики про захват нашей жизни социальными сетями, поговорка "предупрежден-значит вооружен" становится как никогда актуальной. Наша жизнь становится все более бесконтрольной, человек в поисках комфорта лишает себя способности контролировать свою жизнь, напрочь пропадает такое понятие как осознанность. Жизнь превращается в очень комфортное бессознательное и бездумное существование. Алгоритмы за нас выбирают, что нам смотреть, реклама за нас решает что нам есть, бизнес нас зомбирует, чем нам увлекаться. Психология и экономика стали действенными науками, способными менять нас по щелчку пальца и это страшно. Это нужно осознавать, нужно задаваться вопросами, мы живем в информационную эпоху и эту информацию нужно обрабатывать, жизненно необходимо. Мне нравится, что автор не только делится своими находками и интересной статистикой, он так же (как и преподаватели в ВУЗе) учит мыслить нас самостоятельно, делать выводы, анализировать, смотреть шире. В этом плане книга меня очень порадовала, элемент обучения и информационного обогащения – два в одном.

Чтец Павел Константиновский отчитал идеально, мне тут прямо таки даже сказать больше нечего.

Большой Брат следит за нами

Все лгут. В соцсетях, в соцопросах и даже у психотерапевта. Только наедине со своим компьютером мы становимся достаточно откровенны сами с собой. Интернет-гиганты прекрасно знают об этом и накапливают данные о поведении и запросах пользователей, чтобы потом аналитики вроде автора этой книги обнаруживали неочевидные корреляции. Объемы таких данных уже сегодня зашкаливают, поэтому их называют большими.

Уважаемые гуманитарии, не волнуйтесь, что книга окажется сложной. Никаких математических алгоритмов и формул не будет, только занимательные истории на любой вкус. Выбирайте, что вам ближе: президентские выборы в Америке, конный бизнес, сексуальные предпочтения в странах мира, бейсбольная лига, структура литературных бестселлеров, онлайн-реклама, вопросы толерантности, заговоры правительств и корпораций...

На примере всех этих историй Cет Cтивенс-Давидовиц показывает, как большие данные помогают прогнозировать и отвечать на интересные вопросы. Как можно было предсказать победу Трампа? Как выбрать лучшую скаковую лошадь? О чем говорить на первом свидании, чтобы было второе? Сколько в действительности геев в Америке? Какое порно предпочитают индийцы? Как сочинить шедевр и сколько людей дочитают его до конца?

Некоторые выводы и находки автора кажутся очевидными, другие удивляют. Не ожидала, что люди, имеющие детей, чаще выражают сожаление об этом, чем люди без детей жалеют о том, что они бездетны. Интересно, что количество преступлений снижается, когда по телевизору показывают жестокий фильм, а вовсе не наоборот, как можно предположить. А пары с общими друзьями чаще расходятся, чем те, где у каждого своя компания.

Поразительно, сколько информации можно выудить из одних только поисковых запросов. Появившиеся в цифровую эпоху большие данные могут многое рассказать о политике, экономике и обществе в целом. Это настоящая революция в социальных науках. Правда, просто иметь кучу информации не достаточно для успеха. Важно уметь отбирать нужные данные, обрабатывать их и, самое главное, задавать правильные вопросы.

Технологии сегодня развиваются быстрее, чем люди успевают научиться их применять. Некоторые ученые продолжают проводить исследования на маленьких выборках добровольцев, не замечая огромные массивы данных миллиардов пользователей Интернета. Однако будущее, конечно, за большими данными. Хотя бы поэтому стоит ознакомиться с этой книгой. Ну, или просто ради того, чтобы пополнить свою копилку рандомных фактов.

М.

Школьная вселенная. Четырнадцатый учебный год. 5А класс. Управление искусственными созданиями.

Оставь барометр, смотри на небо!

Чем отличается психиатр (медицинское образование) от психолога (гуманитарное образование)? Чем отличаются их методы диагностики душевных расстройств? Тем же чем отличаются методы охотника от методов метеоролога. Когда им нужно узнать погоду, охотник смотрит на небо, а метеоролог – на барометр. Психиатр, соответственно, разговаривает с пациентом, а психолог, предлагает пациенту заполнить сто различных анкет. Эта медицинская байка вспомнилась мне где-то к середине книги.

Наивно-восторженное отношение автора к новым источникам данных вызывает удивление. Хотя, может быть, это осознанно выбранная тональность, чтобы воодушевить читателей и не дать им заснуть, знакомясь с очевидными выводами, известными всем задолго до появления Google и Facebook? Какие из приведенных автором фактов были для нас неожиданными? Мы не знали, что злые отцы, оказавшись без работы, чаще бьют детей, а факты домашнего насилия часто скрываются? Что правильная реклама увеличивает продажи товаров? Нас удивило, что достижения в спорте (лошади - частный случай) зависят от насосной функции сердца в сочетании с количеством депонированной в селезенке крови ?

В книге есть любопытный эпизод. Не знаю, насколько осознанно автор вставил его в текст. Эпизод следующий – добившись определенной популярности, автор был приглашен к умному человеку. Умный человек выслушав рассказы автора, задал ему главный вопрос – могут ли предлагаемые автором методы помочь успешно инвестировать деньги? Уверен, что умным человеком двигала не жлобская тяга к обогащению. Все проще. В некоторых случаях деньги (или способ их заработать) позволяют быстро нейтрализовать демагогию. Что и произошло с автором книги. Можно красиво рассказывать о радужных перспективах нового метода, но все иллюзии быстро тают, как только этот метод начинают использовать на практике.

И даже тотальная прозрачность каждого из нас уже давно не новость. Мир становится большой деревней, где все про всех знают. Параноидальное стремление к скрытности может быть удовлетворено где-нибудь в глухой тайге. Но и это не точно.

Наша культура постоянно заваливает нас изображениями прекрасных, счастливых семей. Большинство людей никогда даже не предполагали, что могут пожалеть о наличии детей. Но некоторые жалеют. И они не могут признаться в этом никому - кроме Google.

Я раньше и правда не задумывалась, какой компромат есть у google на меня. Что я там только не гуглила,страшно подумать. Понимаю, что мы живем в век информационных технологий и вся приватность сошла на нет, но после прочтения этой книги стало как-то неуютно. Как будто за мной кто-то постоянно шпионит, анализирует, сует свой нос в мое личное пространство, неприятно, правда? Но ближе к содержанию книги, если объективно и честно - было скучно. Тонны никому ненужных данных, чисел и бесполезной информации. Много воды, автор умудрялся по три раза писать одно и тоже только другими словами. Были конечно и любопытные данные, но в общем и целом, никакой революции я там не рассмотрела. Возможно, людям, работающим в схожих сферах и будет интересно ознакомиться с книгой, то мне было просто скучно.

Классная книга! Вопреки ожиданиям автора, я прочитал её до конца, все 75,000 слов, кроме благодарностей, которые в самом конце. Благодарности только просмотрел: в абсолютном большинстве случаев они интересны лишь тем, кого благодарят -- и в нашем случае тоже.
Книга посвящена тому, что копание в больших данных может приводить к результатам, которые по-другому не найдёшь и которые порой прямо противоположным данным, которые нам поставляет интуиция. В этом смысле данные, которые собирает Google и в некоторых случаях Facebook и другие источники дают нам понятие о том, как на самом деле работает наш мир. Что может быть ценнее?
Ещё совсем недавно слова "большие данные" воспринимались как лженаука. Положение дел стремительно поменялось в последнее время. Большие данные могут наконец сделать социологию действительно наукой -- и, судя по всему, сделают, причём, довольно скоро. Уже начали делать.
При этом по некоторым объективным причинам запросы к поисковику Google позволяют делать самые правдивые на сегодняшний день выводы о некоторых сторонах нашей жизни.

Автор много внимания уделил "проклятию размерности" при поиске корреляций. Странно, что он совсем не написал о "законе малых чисел". Чем мельче мы дробим статистику, тем больше становится дисперсия. Например, следующий факт, скорее всего, объясняет, что:

Графства, в которых нет крупных городов с колледжами, демонстрируют гораздо худшие результаты, чем городские округа.

Неважно, о чём речь. Важно, что крупная сущность (графство) даёт меньшую среднюю величину какого-то параметра, чем сущность мелкая (округ). "Закон малых чисел" да и вообще теория вероятностей предсказывает, что некоторые городские округа наверняка дадут лучший результат. Та же причина приводит к тому, что какой-то мелкий округ даёт непропорционально большое по отношению к своему населению количеству классных хоккеистов. Соседний даст непропорционально малое, что и не удивительно.

Но в основном описанным в книге данным, выводам и объяснениям я верю, несмотря на то, что они часто диаметрально противоположны априорным ожиданиям.

Наконец-то даже посетители порносайтов сподобились дать науке полезную информацию. Я думал, что они, эти посетители, какой-то ерундой заняты. Но нет. Они тоже по мере сил работают на науку.

Отличная идея ежедневно подсчитывать уровень валового национального счастья по данным настроения пользователей Facebook-а. Надо нашим властям об этом рассказать. Пусть хоть так узнаю́т о том, как те или иные их действия влияют на народ.
В очередной раз порадовался за американцев. У них

в целом полученные данные свидетельствуют о том, что рынок определяет направленность газет в гораздо большей степени, чем воля хозяев.

У нас, похоже, не так. Надо бы исследовать этот вопрос и здесь. Не знаю про газеты, не читаю их, но основные телеканалы точно подчиняются воле хозяина, и он, к сожалению, на всех один.

Количество поисковых запросов со словами «погода», «молитва» и «новости» достигает максимума около 5:30 утра – это доказывает, что большинство людей просыпаются гораздо раньше меня. Число поисковых запросов со словом «самоубийство» достигает пика в 12:36 дня, а минимума – около 9 утра. Это доказывает, что большинство людей утром гораздо менее несчастны, чем я.
Статистика показывает, что время между 2 и 4 часами утра – не лучшее для решения главных вопросов бытия. В чем смысл сознания? Существует ли свобода воли? Есть ли жизнь на других планетах? Популярность этих вопросов поздно ночью может быть результатом, в частности, использования каннабиса. Пик поисков с текстом «Как забить косяк?» приходится на период между 1 и 2 часами ночи.

Интересно, когда возрастает частота запроса "куда спрятать труп?" Cтивенс-Давидовиц пишет следующую книгу. Надеюсь, в ней он ответит и на этот животрепещущий вопрос.

Не обходит автор вниманием и вопрос о границах применимости анализа больших данных. И касается вопросов этики их использования, что очень, на мой взгляд, важно.

Классная книга, это совершенно точно. На наших глазах рождается новая наука!
Жаль только, рождается она опять где-то в за океаном. Кто мешал кому-нибудь из наших социологов стать родоначальником? Вообще-то я знаю, кто мешает, но это не предмет обсуждения на этих страницах.