47270
Аннотированные ссылки на интересные, полезные и удивительные новости хайтека. Тем, кто больше любит слушать длинное чем читать короткое — могу посоветовать свой подкаст ;) http://sebrant.chat Вопросы - @asebrant
Когда топ-менеджер уверен в разработанной технологии настолько, что готов рискнуть собственной жизнью для демонстрации ее безопасности, это вызывает уважение. Volvo запустила первый автономный грузовик, бороздящий шахты на глубине 1320 метров, а руководитель разработки снялся в ролике, наглядно показывающем безопасность беспилотного грузовика. Подробности и видео здесь: https://www.content-review.com/articles/36964/
Напомним, что про удивительные технологии Volvo мы уже писали в этой статье: http://www.content-review.com/articles/36349/
Хайтек вокруг автодорожного транспорта генерит, кажется, не меньше интересных новостей, чем околоинтернетовские компании. Но знания наши там очень фрагментарны. Про Теслу все-таки многие слышали. А вот про автобусы на электрической тяге - не очень. Хотя если оглянуться на улице, то увидим, что сизый пахучий дым куда чаще стелется за автобусами, а не за легковушками.
А, между прочим, компания Proterra, жаждущая заменить вонючие автобусы на электрические, работает с 2004 года, первые продажи совершила в 2009, а в 2015 продала аж несколько десятков. Но дальше дело не шло: не хватало ресурса одной зарядки, чтобы конкурировать с традиционными автобусами. И вот, наконец, получилось: автобус с пробегом 350 миль (а это больше 600 км) с одной зарядки и вместимостью 77 пассажиров начнут поставлять заказчикам в начале следующего года. Машинка не только электроприводом хороша: тут и дизайн, и углепластиковый корпус, и изумительная устойчивость благодаря низкому центру тяжести. Вот, полюбуйтесь - для будущего городов может оказаться важнее электромобилей.
http://www.businessinsider.com/proterra-unveils-electric-bus-with-350-mile-range-2016-9
Физики бывшими не бывают ;) вот сегодня, спасибо Алексу @alexrb , получил удовольствие как когда-то от ночных споров в общаге на темы вокруг теорфиза. Двое ученых задались, как положено хорошим ученым, вроде бы наивным, но очень хорошим вопросом: Why does deep and cheap learning work so well? Почему именно многослойные нейронные сети в их современном виде удивительно хорошо учатся вещам, которые нам кажутся на первый взгляд очень сложными? Например, распознаванию изображений или игре в го. Ответ авторы ищут на интересном уровне: в устройстве нашей вселенной - насколько его описывает современная физика. И напоминают очевидные вещи, о которых не задумываешься. Например, инвариантность относительно переносов и вращений - лежащая и в основе физических законов - позволяет не только для описания мира использовать относительно простые функции, но и для описания объектов. Симметрия, локальность и иерархичность мира тоже делают его удобным для сеток.
И это красиво доказывается математически (хотя эх, уже заржавели эти части мозга у меня, доказательства я только кусочками понимаю:( )
Можно почитать популярный дайджест работы, а если теорподготовка позволяет - то и оригинал, ссылки ниже; всё в открытом доступе.
https://www.technologyreview.com/s/602344/the-extraordinary-link-between-deep-neural-networks-and-the-nature-of-the-universe/
Исходная статья - по ссылкам ниже
http://arxiv.org/abs/1608.08225
http://arxiv.org/pdf/1608.08225v1.pdf
Известное дело: люди, занятые одной и той же деятельностью, могут описываться словами "доблестные разведчики" или "гнусные шпионы" в зависимости от того, какая сторона их описывает.
Эту особенность восприятия полезно держать в уме, читая восторженную статью о том, как технологии Гугла помогают перевоспитывать потенциальных сторонников террористов. Инструмент технологичен и могуч - в поиске и на Youtube алгортимы выявляют людей, похожих на уже вовлеченных в экстремистскую деятельность или склонных ею увлечься - и начинают им показывать специфическую рекламу (ссылающуюся на отрицательные мнения уважаемых людей об экстремистах и специально подобранные плейлисты анти-экстремистских роликов).
Статистика показывает, что инструмент работает - на рекламу хорошо кликают и время просмотра контрпропагандистских роликов выше среднего времени просмотра на сервисе.
В этом конкретном случае нет сомнений, что разработанные умные таргетинги на людей с определенным складом ума и мировоззрением решают очень полезную для человечества задачу. Вот только в общем случае это очередной раз показывает мощь манипулятивных возможностей поискового и видео-сервиса. И, конечно, всем нам надлежит верить, что эти алгоритмы, таргетинги и возможности всегда будут использоваться во благо, и благо это всегда будет таковым считаться всеми.
https://www.wired.com/2016/09/googles-clever-plan-stop-aspiring-isis-recruits/
Вот не буду ничего про айфон7 писать и прочие ЭйрПоды - хотя 23-его Плюс себе закажу - идея с двумя камерами мне понравилась сильно, и у меня есть ощущение, что фотографировать айфоном мне понравится пуще прежнего.
А сошлюсь я сегодня на описание девайса куда более уникального, обеспечивающего не только технологический прорыв, но и социальный. Часто можно встретить публикации, где справедливо ругаются или обижаются на все еще сохраняющееся неравноправие женщин - им правда кое-где приходится труднее, чем мужикам, или чего-то им недодают. Но была одна бытовая область, где ситуация складывалась обратная: у женщин было то, что не давали мужикам. У женщин было - и есть! - биде. А мужику после пописать оставалось разве что в душ идти.
Несправедливость устранена - ну, или будет вскорости устранена. Новый писсуар (хотя неловко таким словом хайтековый девайс называть) по окончанию мочеиспускания обмоет испустивший орган мылом и нежно его высушит. Я уже хочу попробовать это ощущение больше, чем вставить в уши Эйрподы ;)
http://www.mirror.co.uk/news/world-news/hi-tech-urinal-washes-dries-8778823
Последнее время в лекциях и рассказах про машинное обучение постоянно приходится повторять: это не рассказ про причуды богатеев, это не из рубрики "их нравы" - это абсолютно доступная бизнесу любого размера или стартапу технология. Но вот совсем красивого кейса, реального примера не хватало. Спасибо @scum_sum за присланную ссылку на историю японского фермера.
Малый семейный бизнес: выращивание огруцов. Необходимость эти огурцы сортировать, поскольку они вырастают разные, и надо одного типа и сорта в один ящик складывать. Это полный рабочий день матери фермера, занятый, скажем прямо, не самым интересным трудом. Конечно, есть индустриальные решения, старинные, традиционные - с фотоэлементами, калиброванными отверстиями, весами и пр.
А есть современный мир: Arduino, Raspberry Pi, Open CV, TensorFlow. Если правильно их скомбинировать, то можно обучить систему классифицировать движущиеся по конвейеру огурцы по их изображениям - и правильно сталкивать их в разные ящики. Видео под названием TensorFlow powered cucumber sorter by Makoto Koike - одно из самых мотивирующих, которые смотрел за долгое время - да и вся заметка с фотографиями хороша.
https://cloud.google.com/blog/big-data/2016/08/how-a-japanese-cucumber-farmer-is-using-deep-learning-and-tensorflow
Популярная футурология в явном виде, но неплохая ;) Рассказ о будущем медицины в виде монолога дедушки, вспоминающего о разговорах со внучкой в 2050 году. Внучка, которая спрашивает "что такое больница?" Не так смешно как кажется: я вот знаю детишек, которые про колодец только в сказках читали - ведь воду в бутылках покупают в магазине, а как иначе-то? Между прочим, темпы внедрения бутилированной воды в массовое сознание - это темпы прошлого века ;) Вполне допускаю, что с телемедициной - когда она наконец обретёт промышленный вид - всё будет быстрее. Потому что это же так удобно, а к хорошему быстро привыкаешь и оно начинает казаться естественным и вообще единственно возможным. И, честно говоря, я не вижу, что из того, что делает вызванный на дом врач, он не мог бы сделать по телефону. Зато вижу, сколько он мог бы получить дополнительной информации от уже сегодня вполне реализуемых девайсов. И уж совсем я молчу про экспертную помощь врачу со стороны всяких скромных AI ;)
http://medicalfuturist.com/healthcare-in-2050/
Хорошая новость: DARPA, американское агентство, занятое передовыми разработками для армии, полагает, что искусственный интеллект и "интернет вещей" - важные военные технологии. И финансирует разнообразные исследования в этой области, в том числе для решения конкретных боевых задач.
Я очень желаю им успеха, пусть даже не публичного: разведку пока никто не отменял, и серьезный прорыв от неё не утаишь. Мой опыт прошлой жизни в Средмаше и вообще при совке показывает: нет более надежной гарантии, что какое-то научно-техническое направление в нашей стране будет хорошо развиваться, чем военные успехи американцев по этому направлению. Философы, партийные идеологи, журналисты и политики могут гундосить что угодно и что угодно требовать запретить - но если известно, что дело касается конкурентоспособности в военной сфере, прагматические соображения власти берут верх над страхами, неграмотностью и консерватизмом.
Учитывая текущее увлечение как раз консерватизмом, хорошо бы от него защититься в ИТ так же, как всегда со времён войны защищалась физика ;)
http://www.computerworld.com/article/3114139/internet-of-things/darpa-sees-iot-and-ai-as-weapons-to-dominate-wars.html
С творчеством у нейронок - как, кстати, и у людей в большинстве своём - дела обстоят, скажем прямо, неровно ;) Некоторые картины Deep Dream были интересны, но далеко не все; а уж шедеврами не пахло. Со стихами, как показала "Нейронная Оборона", тоже раз на раз не приходится. Теперь вот Google вместе с Zalando в рамках проекта Muze поэкспериментировал с дизайном модной одежды. Автор статьи считает, что ничего не получилось - какой-то ужас-ужас получился. Я вот не уверен: дизайнерские шмотки, придуманные людьми, тоже бывают, э-э-э, странные. Подождём, через несколько дней обещают показать творчество нейронки в реале на подиуме ;) В целом мне нравится спектр осваиваемых ИИ творческих профессий ;)
https://techcrunch.com/2016/09/02/googles-new-project-muse-proves-machines-arent-that-great-at-fashion-design/
А вот не про технологии, но ради пятницы и приближающейся субботы (которая 3 сентября, а это не только дата, но и немножко мем) отвлекусь. Ребята из Яндекс.Музыки изволили приличествующие случаю стикеры для нас, телеграмистов, нарисовать:) Некторые из них в известных мне чатах очень даже актуальны будут.
http://telegram.me/addstickers/YandexMusic
Ссылка на этот ролик сегодня много где кочует, но и я мимо не пройду. Конечно, в истории есть хорошо продуманная маркетологами ирония: попросить машину собрать трейлер к фильму ужасов про восставшего робота-гуманоида. Вирусный эффект гарантирован. В самом ролике все политкорректно: специалисты успокаивающе вещают, что без человека пока в вопросах творчества никуда.
Никто, однако, не вспоминает, как раньше говорили, что интеллектуальным трудом могут заниматься только обладающие интеллектом люди, а машины им лишь в помощь. Неожиданно оказалось, что надо либо признать отсутствие интеллекта у миллионов людей, чью работу алгоритмы успешно взяли на себя, либо резко сузить понятие интеллектуального труда.
Сильно подозреваю, что в ближайшее время будем наблюдать все более нишевое и сужающееся определение понятия "творчества", чтобы защитить его от покушений машинного интеллекта. Можно писать новый сценарий, где неподвластное машине творчество в роли шагреневой кожи, а защитники избранности человеческого разума - в роли бедного Рафаэля ;) Надо успеть, чтобы его написали люди.
http://apparat.cc/news/morgan-trailer/
Почувствуй себя ядром, ответь на вопросы анкеты:) Собрать репрезентативную выборку Лёше не получится, но кое-что интересное про самых неленивых он может узнать. А потом он и нам расскажет.
Читать полностью…
Были времена, когда Google почти что нежно любил Uber: инвестировал в бойкого юношу, в совет директоров опытного своего сотрудника отправил, карты предоставлял на, по слухам, очень хороших условиях.
Прошли времена. Драммонд недавно покинул совет директоров, поскольку - вот сюрприз! - обнаружился конфликт интересов. Убер начал тихонько говорить о возможности появления своих карт (кажется, в силу осознания объема и стоимости данных, которые получает Гугл) и сильно озаботился машинками без водителя - а это уж точно сфера пристального интереса Гугла.
И вот совсем свеженькая новость: Гугл запускает, пока в пилоте, возможность заказать машину для поездки в Waze (компания и приложение куплено Гуглом). Пока дело ограничивается Сан-Франциско, но у Гугла точно есть возможность быстро масштабировать, если понравится. И еще у него есть возможность пока не гнаться за заработком и избежать кучи юридических проблем. Гугл пока не собирается брать комиссию, и не заморачивается вопросами налогов: "да ребята просто друг другу бензин оплачивают, о чем речь?".
Все интереснее и динамичнее становится в сфере технологизации и вообще трансформации автомобилей и автомобильных услуг - по крайней мере, по ту сторону океана.
http://time.com/4473094/google-waze-carpooling-uber-lyft/
В США в прошлом 2015 году число смертей в ДТП сломало нисходящий тренд предыдущих лет и выросло на 7,2% к 2014, составив 35 092 трупа. Примерно по сотне в день. Печальный, конечно, факт - но впечатляет не только он, но и реакция чиновников из американского минтранса и National Highway Traffic Safety Administration. Вот она, эта реакция, - из правильного будущего. Они публикую пост в блог и выкладывают в открытый доступ анонимизированные данные по инцидентам. Они обращаются к сообществу Data Scientist'ов и прочих спецов по умным машинам и алгоритмам: "помогите нам понять и исправить ситуацию!"
https://www.transportation.gov/fastlane/2015-traffic-fatalities-data-has-just-been-released-call-action-download-and-analyze
Не просто AI, а его бизнес-применения окончательно стали мейнстримом (или опопсели, кому как нравится считать). Может, кто из моих читателей помнит, что был такой рекламный шедевр 1990 года "Вам пора и нам пора с вентиляторным заводом заключать договора". Не помните - поиск в помощь, в интернете этого видео навалом.
Так вот, как у нас когда-то рекламировали по ТВ корпоративные поставки вентиляторов, IBM в эфирные паузы популярного турнира US Open начинает рекламировать "Watson in the World", AI и когнитивные вычисления для бизнеса, и "IBM Cloud" - про прелести своих облаков. На один из роликов - про важность технологий персонализации - можно полюбоваться в статье по ссылке.
Нельзя не признать, что за четверть века реклама ушла вперед: новые ролики сняли не абы кто, а Ogilvy and Mather.
http://adage.com/article/btob/ibm-ai-futuristic/305620/
Не могу это не отрепостить - просто отличное продолжение вчерашнего моего поста про транспорт и автобус
Читать полностью…
Я стараюсь не злоупотреблять в этом канале анонсами мероприятий, но в редких случаях вспоминаю, что хозяин - барин ;)
Вот как раз такой случай сейчас. В среду 14 сентября у нас в Яндексе будет выступать с открытой лекцией человек, многое изменивший в технологиях (в первую очередь - в технологиях знаний). Его зовут Джимми Jimbo Уэйлс. Он идеолог вики как концепции и основатель Википедии. Кажется, этого достаточно, чтобы проявить интерес к его идеям и словам.
Запись на мероприятие - у нас на сайте. Свободных мест в зале не много (активные участники википедийного сообщества по очевидным причинам имеют преференции), но не стоит огорчаться: будет интерактивный онлайн во время мероприятия, а потом будет и запись. Как обычно, все онлайновое у нас - без регистрации и СМС ;) Зато с синхронным переводом для тех, кому это важно.
https://events.yandex.ru/events/yagosti/14-september-2016/
Ну а биография Джимми для справки вот - https://ru.wikipedia.org/wiki/Уэйлс,_Джимми
DeepMind все время что-то крутое и красивое объявляет, мало им успехов в го ;) Вот свежий пост про новинку в синтезе голоса. И приведённые звуковые семплы впечатляют: да, это уже звучание совсем без механических оттенков или бубнения, с красивой интонационной модуляцией.
Просто послушайте, просто порадуйтесь, что скоро девайсы с нами вот так будут разговаривать. А неленивые могут ещё и прочитать, какая за этим технология стоит. Красота подхода WaveNet в том, что он универсален, это не только TTS - это и прямой синтез музыки. Ждём ещё чуть-чуть и наслаждаемся по полной ;)
https://deepmind.com/blog/wavenet-generative-model-raw-audio/
Интелу становится все труднее жить. Мало им проблем с мобильными устройствами, так теперь ещё и на серверном рынке начались сложности. Фейсбук и Гугл разрабатывают свои модули, заточенные под решение задач машинного обучения, и обходятся в них без интеловых процессоров. А теперь вот ещё и IBM совместно с Nvidia показали свой сервер, сочетающий IBMовский проц Power8 и Tesla P100 Pascal от Nvidia. Интел, конечно, поспешил заявить, что на все эти новации приходится лишь 3% серверных мощностей, а в остальном он - царь горы. Тут мне вспомнилась статья, на которую ссылался здесь недавно: у Убера всего 4% перевозок наемными машинами, но все верят, что будущее транспорта определит он, а не таксопарки. Как бы Интелу не попасть в итоге в один список с такси в будущих кейсах о компаниях, не успевших за темпом инноваций ;)
http://venturebeat.com/2016/09/08/ibm-unveils-power8-linux-servers-for-deep-learning/
Мне кажется, что все-таки некоторые компании, особенно из традиционных областей, перегибают палку в своём стремлении стать технологичными и свою продукцию сделать умной, интерактивной и connected. Вот, например, вполне хороший обувной бренд hi-tec выпустил ботинки (причём скорее для туризма, чем для городских прогулок, судя по фасону) и снабдил их интерактивными стельками, которые должны вибрировать, таким образом указывая, куда мне поворачивать. Связь по bluetooth со смартфоном, в котором специальное приложение.
Я люблю ходить и по горам, и по городам. Я очень люблю гаджеты и всякие хайтековые новинки и фенечки. Но что-то я очень сильно не хочу себе эти стельки - представил себя на тропе с этим девайсом: ФУУУ. Уж если им так хотелось технологий, сделали бы, чтоб они мне на привале просто нежно пятки почесывали, и то было б толковее.
http://www.cnet.com/news/bluetooth-boots-vibrate-to-guide-you-to-your-location/
Что автомобили, не нуждающиеся или редко нуждающиеся в водителе, заметно изменят мир - общее место, все примерно согласились и спорят лишь о сроках. Но автор статьи по ссылке не поленился и собрал в список аж 99 способов, которыми эти машинки мир поменяют; не толко технологически, но и социально.
Признаюсь, о некоторых аспектах я не задумывался. Вот, например, пункт 42: изменится структура полиции: сотрудников дорожной полиции станет существенно меньше, исчезнет ситуация, при которой самый массовый сценарий общения граждан с полицией - это общение на тему дорожных нарушений или происшествий. Ещё круче п.19: станет больше секса на дорогах: чем заняться парочке в дороге, когда никто не за рулём?
http://www.inc.com/bill-murphy-jr/apple-google-tesla-and-uber-99-ways-self-driving-cars-will-totally-change-everyt.html
Ожидая, что там Apple объявит на днях, мы опять забываем наблюдать за Китаем. И зря. Вот на той неделе прошла конференция Baidu World, и ее девизом было AI is the new electricity. Можно забыть, что эта идея не нова (мой любимый Кевин Келли писал в своей книге Inevitable, что AI позволяет проделать с промышленностью то, что когда-то проделали электродвигатели - стоило их засунуть в старое устройство - и сразу рождался новый класс, от стиральных машин до электровозов). Главное, что машинный интеллект с Востока всерьез посоревнуется с тем, что предлагают Apple и Google. Увлекательное будет зрелище.
http://www.bloomberg.com/news/articles/2016-09-01/baidu-envisions-robot-cars-with-nvidia-and-echo-like-home-gadget
Есть у меня замечательный коллега, Лёша Тихонов (здесь известный как @altsoph). По работе - совершенно гениальный аналитик, но я не о том сейчас . Суббота же на дворе :)
Лёша - большой любитель что-то придумать и быстренько сделать. Причем сделать так, чтоб еще и работало. Это он придумал Метромарафон, просчитал маршрут, а потом мы его 16 с лишним часов пробовали в реале подземки :)
Это при его деятельном участии прирученная им нейронка изучала русскую поэзию, а потом писала тексты для небезызвестной «Нейронной Обороны».
А еще Лёша любит добрую компьютерную старину. Была, вы не поверите, в дремучем 1971 году игра Star Trek. Лёша портировал её в Телеграм в виде бота @Startrek_game_bot
Если вы сами ископаемое - понастальгируйте. Если вы юны - попробуйте, каково оно тогда было. На дворе как раз осень, самое время играть.
Хорошая статья в The Economist, в которой разбирается, почему Uber, не став ни прибыльным, ни публичной компанией, удостоился редкой чести: его имя стало нарицательным, он вошёл в клуб Ксерокса и Гугла (да, Uber уже и глаголом стал в англоязычной речи - Let's Uber it! любят говорить господа инноваторы). Но ведь из каждых 100 км в мире, пройденных нанятой легковушкой с водителем, на Убер приходится лишь 4. Казалось бы, какой ты лидер в нише с 4% (а по деньгам - и того меньше, а по прибылям - в минусе)?
Но современный мир устроен так, что при таких показателях можно быть общепризнанным _будущим_ лидером. Потому что будущее, судя по всему, за автономным транспортом с электроприводом и обслуживанием без компаний-посредников. И его строит ошеломляющими темпами эта сравнительно небольшая компания - поэтому в неё и верят, и вкладываются. Почитайте: действительно интересный взгляд на транспортную революцию.
http://www.economist.com/news/leaders/21706258-worlds-most-valuable-startup-leading-race-transform-future
Если позволить именитому производителю крутых дронов-квадрокоптеров производить ещё и палки для селфи, он такую палку сделает, что закачаешься. И как бы ты ни качался, в процессе съемки видео камера на этой палке будет держать тебя в кадре, сама как надо поворачиваясь. Вот ровно так всё и произошло: знаменитый DJI выпустил Osmo Mobile - стабилизатор для смартфонов, который в процессе съёмки и следит за объектом, и дрожания всякие убирает. Можно себя любимого снимать, можно видеосюжет про что-то вокруг, и при этом иметь профессиональную плавность движения камеры. Правда, устройство само стоит как смартфон - около 300 долларов. Но, с другой стороны, если уж снабдили смартфоны хорошими 4K камерами, логично к ним серьезные аксессуары начать выпускать. А Osmo Mobile уже собирает предзаказы, поставка в ближайшие месяцы.
http://store.dji.com/product/osmo-mobile?site=brandsite&from=buy_now_bar
#Важно!
Приглашаю Вас принять участие в первом исследовании аудитории российского Telegram.
По ссылке доступна короткая анкета, заполнение которой займет не больше 1 минуты и не требует ваших персональных данных.
Я прошу Вас поделиться ссылкой на анкету в социальных сетях и своих каналах, чтобы мы увидели наиболее полный портрет аудитории.
Большое спасибо!
https://goo.gl/forms/fOEoAT6QaIEaLvL72
Всякие бизнесово-инженерно-научные новости технологического мира иногда просто необходимо разбавлять хайтеком в искусстве. Видео про трехмерное рисование в дополненной реальности, возможно, кое-кто из моих читателей уже видел. Простите, все равно им поделюсь - уж больно красиво ;) И да, технологически тоже круто.
https://www.facebook.com/nplusone/videos/1674829422837798/
Мне нравится ехидная улыбка Безоса - и у него есть все основания улыбаться именно так. Благодаря именно росту покупок в Amazon классические торговые сети в Штатах чувствуют себя не лучшим образом и закрывают один за другим магазины, пытаясь срезать затраты, делающие их неконкурентоспособными.
Традиционные торговцы всегда твердили, что они хорошие и нужные потому, что у людей все-таки есть потребность пощупать товар, покрутить в руках, полистать книгу. Безос улыбался и душил их ценами. И выжимал из Амазона бешеный рост: только в 2015 у него продажи выросли на 60%.
И вот теперь, когда конкуренты слабы или померли, Амазон начинает открывать свои офлайновые магазины. Первый книжный он открыл еще в конце 2015, а теперь, удовлетворенный результатом, готовится еще три открыть. Не хочу даже представлять себе чувства людей, работавших в удушенном Амазоном Barnes and Noble. Говорят, именно на него похож изнутри книжный магазин Амазона.
Прекрасный, прекрасный способ расчищать себе нишу в офлайне онлайновым огнеметом ;)
http://europe.newsweek.com/amazon-opening-brick-and-mortar-bookstores-494216
А еще лучше вот этот ролик: Cloud services for startups.
Во времена рекламы вентиляторного завода не существовало ни одной из двух концепций ;)
https://www.youtube.com/watch?v=kddX4GdScHM&feature=youtu.be
Вполне толковая популярная статья о проблемах анонимизации данных. Главная ее тема - нельзя датасет рассматривать изолированно: надо понимать, что произойдет, если "анонимизированные" данные пересечь с другими, доступными где-то еще. Слишком часто вдруг оказывается, что сравнение набора данных (о запросах, о посещаемых местах, о покупках и т.д.) из которых вычищены идентификаторы пользователей, после сопоставления с другим набором вдруг отлично позволяют сделать привязки к конкретным личностям. Классика - якобы анонимизированные данные (даже с хэшированием номеров машин) нью-йоркских такси после правильной обработки и сопоставления с картинками, найденными в Гугле по запросу "знаменитости на Манхеттене" позволили получить скрываемые многими звездами адреса их (или не только их) проживания, их привычки давать чаевые.
Проблема в действительности глубокая, и изобилие данных делает реальную анонимность все менее достижимой: поэтому борьба за право на прайваси в области запретов на явные публикации персональных данных выглядят немного глупо и жалко. Насколько все это в итоге осложнит доступ к действительно важным данным о людях - пока совершенно неясно.
http://www.forbes.com/sites/kalevleetaru/2016/08/24/the-big-data-era-of-mosaicked-deidentification-can-we-anonymize-data-anymore/#13dca0274839