Андреас Вайгенд - BIG DATA. Вся технология в одной книге

Интересно, что истинная личность изобретателя биткойна по-прежнему неизвестна, несмотря на все усилия журналистов-расследователей и, в еще большей степени, властных структур всего мира. Известен только псевдоним – Сатоси Накамото. См. Nakamoto, Satoshi, “A Peer-to-Peer Electronic Cash System”, Bitcoin.org, October 31, 2008, http://www.bitcoin.org/bitcoin.pdf.

На самом деле, в блокчейне можно отражать все что угодно, не связанное ни с операциями в биткойнах, ни с деньгами вообще.

Buterin, Vitalik, “On Public and Private Blockchains”, Ethereum Blog, August 7, 2015, https://blog.ethereum.org/2015/08/07/on-public-and-private-blockchains.

Krause, Andreas, and Eric Horvitz, “A Utility-Theoretic Approach to Privacy in Online Services”, Journal of Artificial Intelligence Research 39 (September – December 2010), pp. 633–662, http://research.microsoft.com/en-us/um/people/horvitz/pvoijair_jair.pdf.

Bertrand, Marianne, and Sendhil Mullainathan, “Are Emily and Greg More Employable Than Lakisha and Jamal? A Field Experiment on Labor Market Discrimination”, National Bureau of Economic Research working paper no. 9873, July 2003, http://www.nber.org/papers/w9873; “No Names, No Bias?”, The Economist, October 31, 2015, http://www.economist.com/news/business/21677214-anonymising-job-applications-eliminate-discrimination-not-easy-no-names-no-bias.

Я привожу в качестве примера вибраторы, поскольку у меня с коллегами был конкретный опыт в Amazon. За неделю до Дня матери на домашней страничке покупателя в Amazon всегда появляются рекомендации по выбору подарков маме. Рекомендательные алгоритмы сначала работают на случайно отобранных товарах соответствующих категорий, а затем постепенно начинают показывают те, которые кликают чаще всего. По ходу дня на лидирующей позиции с огромным отрывом оказался вибратор. Это произошло потому, что он относился к категории «Женские товары для здоровья», которая участвовала в промоакции, а люди кликали его, удивляясь, что вибратор рекомендуют в качестве подарка ко Дню матери.

Kemp, Joe, and Daniel Beekman, “‘Pressure Cooker’ and ‘Backpack’ Internet Search Prompts Visit from Feds: Long Island Woman Claims”, New York Daily News, August 1, 2013, http://www.nydailynews.com/news/national/long-island-woman-claims-online-search-pressure-cooker-helped-prompt-visit-feds-article-1.1415101.

Warner, Stanley L., “Randomized Response: A Survey Technique for Eliminating Evasive Answer Bias”, Journal of the American Statistical Association 60, no. 309 (March 1965), pp. 63–69.

Я впервые задумался о мощи таких ручек и движков применительно к данным в 1990-х годах, попользовавшись демо-проектом “HomeFinder”, который создал преподаватель информатики Мэрилендского университета Бен Шнайдерман. Пользователи программы могли подбирать жилье в Вашингтоне и его окрестностях в соответствии с заданными критериями. Человек, желавший снять дом с пятью спальнями не дороже чем за пятьсот долларов в месяц, мог обнаружить, что ничего подобного не предлагается. Но постепенно повышая стоимость аренды или снижая количество спален, можно было найти подходящие варианты. См. Shneiderman, Ben, “Information Visualization: Dynamic Queries, Starfield Displays, and LifeLines”, in Ben Shneiderman, ed., Sparks of Innovation in Human-Computer Interaction (Norwood, NJ: Ablex Publishers, 1993), http://www.cs.umd.edu/hcil/members/bshneiderman/ivwp.html.

Этот принцип лучше всего передает заповедь веб-дизайна, которую сформулировал Стив, Круг, – «Не заставляйте меня думать». См. Krug, Steve, Don’t Make Me Think, Revisited: A Common Sense Approach to Web and Mobile Usability, 3rd ed. (San Francisco: New Riders, 2014).

Mayer-Schönberger, Viktor, and Kenneth Cukier, Big Data: A Revolution That Will Transform How We Live, Work, and Think (New York: Houghton Mifflin Harcourt, 2004).

В Amazon также применяются электронные адреса для каждого товара. В прошлом Amazon выделял продукцию, особенно популярную среди людей с электронными адресами одного доменного имени. Эту практику прекратили, когда очень известные компании стали жаловаться, что она может давать предстваление об их стратегических решениях. Чисто теоретически, скачок спроса на книги о блокчейне со стороны покупателей с адресами домена @gs.com или с доставкой по адресу 200, Уэст-стрит, Нью-Йорк, мог бы навести на мысль о том, что в Goldman Sachs начинают внедрять блокчейн еще до официального объявления об этом.

Vara, Vauhini, “How an Airline Fare Loophole Could Hurt Passengers”, The New Yorker, January 5, 2015, http://www.newyorker.com/business/currency/united-skiplagged-problem-hidden-city-ticketing; and Jansen, Bart, “Judge Throws Out United Airlines Case Against Skiplagged”, USA Today, May 4, 2015, http://www.usatoday.com/story/todayinthesky/2015 /05/04/united-skiplagged-lawsuit-federal/26864961.

Tversky, Amos, and Daniel Kahneman, “Judgment Under Uncertainty: Heuristics and Biases”, Science 185, no. 4157 (September 27, 1974), pp. 1124–1131. В качестве введения в предмет рекомендую ознакомиться с этим прекрасным сборником: Kahneman, Daniel, Paul Slovic, and Amos Tversky, eds., Judgment Under Uncertainty: Heuristics and Biases (Cambridge: Cambridge University Press, 1982).

Anders, George, “LinkedIn Offers College Choices by the Numbers”, MIT Technology Review, January 22, 2014, https://www.technologyreview.com/business-report/ data-and-decision-making.