Архив метки: Palantir

Большие Данные как большие риски

(Сентябрь 2017)

Все и повсюду, массово и с пользой накапливают гигантские базы данных. Беда в том, что никто и нигде не знает, как эти горы данных защищать от злоупотреблений.

Проблемы разные – суть одна

В ленту текущих новостей из разных концов планеты недавно попали три сообщения, рассказывающие о существенно разных, казалось бы, проблемах у людей и властей в связи с особенностями новейших инфотехнологий. Единственное, на первый взгляд, что их объединяет – это общая тема рисков и угроз, с которыми сталкивается общество по мере все более масштабного освоения Больших Данных.

Но вот если, однако, с этими неприятностями начать разбираться чуть внимательнее, то довольно быстро становится ясно, что на самом деле речь тут везде идет о разных сторонах одной и той же гранд-проблемы. Такого рода серьезные вещи обычно принято именовать «системными дефектами конструкции». Специалисты-профессионалы об этой беде отлично знают, конечно же. Вот только как это дело эффективно лечить – вопрос более чем дискуссионный… Ибо варианты ответов-решений сильно зависят от того, кому они адресованы.

Иначе говоря, владельцы баз с Большими Данными трактуют безопасность системы по-одному; профессионалы ИТ-сектора, занимающиеся разработкой и анализом защиты подобных систем, видят проблемы очевидно по-другому; ну а те люди, чьи персональные данные накапливаются и обрабатываются в этих системах в гигантских количествах, представляют себе заботу об их личной, чувствительной к разглашениям информации существенно по-третьему.

Проиллюстрировать суть возникающих здесь проблем и коллизий, ясное дело, удобнее всего на живых примерах. А потому самое время процитировать сообщения из ленты текущих новостей.

Читать далее Большие Данные как большие риски

Бизнес на мифах

(Декабрь 2011)

Быстро и незаметно восходящую ныне американскую корпорацию Palantir, специализирующуюся на датамайнинге, иногда называют странным замесом из Средиземья и Агентства национальной безопасности.

LotR-Palantir-1

ОТ ФАНТАЗИЙ К РЕАЛЬНОСТИ

В магическом мире Средиземья, порожденном фантазией автора «Властелина колец», палантирами назывались особые «видящие камни». С помощью такого волшебного камня его владелец мог не только посмотреть, что в данный момент происходит в любом интересующем месте, но и пообщаться с другим хозяином аналогичного палантира, где бы тот ни находился.

Как и всякая технология мира нашего, это магическое средство также не было ни хорошим, ни плохим. Все зависело от деяний тех, кто использовал камни. В руках добрых волшебников палантир был полезным инструментом для защиты от зла, ну а принадлежа темным силам, превращался в орудие беспощадного порабощения.

Сколь банально бы это ни звучало, но быстро расцветающая ныне в Кремниевой долине ИТ-компания под названием Palantir Technologies максимально близко воспроизводит в своей продукции не только «всевидящие» функции магических камней Средиземья, но и их богатейший потенциал для злоупотреблений.

ЧТО ДЕЛАЕТ PALANTIR

Для того, чтобы доходчиво и наглядно пояснить, в чем заключается суть, специфика и причина нынешней популярности аналитических программ датамайнинга от фирмы «Палантир», можно вкратце напомнить известные трудности их основных клиентов (подробнее см. «Системные ошибки»).

Солидные спецслужбы вроде ЦРУ или ФБР обычно располагают множеством – иногда тысячами – разнообразных баз данных, каждая из которых имеет специфические особенности. Записи о финансовых транзакциях и сделках, образцы ДНК и отпечатков пальцев, образцы звуков и видеоклипы, топографические карты и поэтажные планы зданий, агентурные сообщения разведки и данные радиоперехвата, горячие новости СМИ и информация из блогосферы – этот внушительный список может тянуться очень и очень долго.

А гранд-задача заключается в том, чтобы из всех этих разрозненных данных отобрать такие фрагменты, которые складывались бы в согласованную цельную картину интересующего события. Нередко на восстановление подобной головоломки могут уходить даже не многие месяцы, а годы аналитической работы.

Причем даже теперь, когда появились автоматизированные компьютерные системы, способные сводить воедино разрозненные клочки информации, таким системам по-прежнему крайне сложно обрабатывать существенно разные типы данных. Формулируя более конкретно, записи цифр о суммах продаж из таблиц все еще непросто алгоритмически сопоставлять и объединять в одно целое с кадрами съемок из записей видеонаблюдения.

Так вот, чем занимается Palantir, так это очень существенно облегчает действительно неподъемную задачу по просеиванию огромных массивов с плохо сопоставимыми данными. Программное обеспечение «Палантира» реально способно довольно быстро, в режиме параллельной обработки прочесывать все доступные ему базы данных и выявлять там связанные друг с другом фрагменты информации. После чего программа складывает все найденное в одно место – причем в виде, удобном для просмотра человеком-аналитиком.

Несколько упрощая суть подхода, можно сказать, что в основу платформы Palantir заложена идея не чистой автоматизации проходки данных, а умного синтеза – где объединены методы анализа, опирающиеся на человека, и мощный алгоритмический движок, способный сканировать одновременно несколько баз данных на очень тонком уровне гранулирования. Движок способен брать информацию из гигантских баз данных и позволяет пользователям «нарезать слои» и просматривать результаты просеивания практически бесконечным числом способов.

На сегодняшний день аналитический инструментарий «Палантира» продается в двух основных версиях программы – Правительственной и Финансовой. Интерфейс базовой системы внешне оформлен так, чтобы выглядеть словно программа из голливудского шпионского триллера.

palantir-screen

За несколько лет успешного внедрения Palantir уже успел выстроить весьма внушительный список клиентов, включающих в себя Министерство обороны США, ЦРУ, ФБР, аналитические службы американской армии, морской пехоты и военно-воздушных сил, полицейские департаменты Нью-Йорка и Лос- Анджелеса, ну а также постоянно растущее число финансовых институтов, с помощью этой программы выявляющих различные виды банковских афер и мошеннических операций.

Хотя в Palantir принципиально не имеют подразделения по продажам и маркетингу (о чем чуть позже), все эти контракты ныне превратили компанию в одну из «самых тихих историй большого успеха» в Кремниевой долине. Сейчас эта неприметная фирма зарабатывает в год около 250 миллионов долларов, а ее собственную стоимость оценивают суммой порядка 2 миллиардов. Читать далее Бизнес на мифах