Чат  ::   FAQ  ::   Поиск  ::   Регистрация  ::   Вход

«пакет Яровой» навсегда изменит судьбу рунета

Информация о разработках, технологиях, VoIP клиентах, серверах, библиотеках и всему что связано с темой форума

Модераторы: april22, ded

Re: «пакет Яровой» навсегда изменит судьбу рунета

Сообщение ded » 16 апр 2017, 16:58

Не только терроризм.

Если действительно разобраться и копнуть немного глубже, то Google, а потом и Дуг сделали инструмент(и далеко не идеальный, как призналось Google, спустя несколько лет), для решения конкретного класса задач — построение поискового индекса.
Инструмент получился неплохим, но есть одна проблема, в прочем, обо всем по порядку.

В начале 2012 года начался агрессивный тренд — "эпоха big data".

Изображение

Именно с этого момента начали появляться бесполезные статьи и даже книги в стиле "Как стать big data company" или "Большие данные решают все". Ни одна из конференций больше не обходилась без рассуждений о том, "с какого терабайта начиналась big data" и повторяющихся историй о том, как "одна компания была почти на грани дефолта, но таки перешла на большие данные и она просто порвала рынок". Вся это пустая болтовня подкармливалась грамотным маркетингом от компаний, которые продавали поддержку на все это — спонсировались хакатоны, семинары и много-много всего.
В конечном итоге у большого количества людей сложилась конкретная картина мира, в которой традиционные решения — это медленно, это дорого, да и как минимум, это больше не модно.
Прошло уже много лет, но до сих пор я вижу обсуждения и статьи с заголовками "Map Reduce: first steps" или "Big Data: What Does it Really Mean?" на профессиональных ресурсах.
Hadoop как средство для индексирования
Что же все-таки такое Hadoop? В общих словах это файловая система HDFS и набор инструментов для обработки данных.

Все это размазано по кластеру из "дешевого железа" и по мнению маркетологов должно в мановение ока завалить вас деньгами, которые будут приносить "большие данные".
Крупные интернет-компании, например Yahoo, в свое время, оценили Hadoop, как средство обработки больших объемов информации. Используя MapReduce, они могли строить поисковые индексы на кластерах из тысяч машин.
Надо сказать, тогда это было действительно прорывом — Open Source продукт умеет решать задачи такого класса и все это бесплатно. Yahoo сделало ставку на то, что возможно в будущем им бы не пришлось выращивать специалистов, а набирать со стороны уже готовых.

Но я не знаю когда первая обезьяна спустилась с дерева, взяла палку и начала использовать MapReduce для аналитики данных, но факт остается фактом, MapReduce начал реально появляться там, где это совершенно не нужно.
Изображение
Демонстрация Hadoop пользователям

https://habrahabr.ru/post/303802/
ded
 
Сообщений: 12292
Зарегистрирован: 26 авг 2010, 19:00

Re: «пакет Яровой» навсегда изменит судьбу рунета

Сообщение skynetyar » 18 апр 2017, 11:31

ded, Радуют и улыбают Ваши посты меня, а это значит что Вы вносите позитив в мою жизнь :D
tma , смысл есть во всем чего мы видим,нюхаем,тыкаем и.т.д..,другое дело какими способами это реализуется, скорее об этом весь спор...
Даже наш директор тщательно записывает все разговоры и хранит все годами. Зачем ему это надо? купил Тб винт для этого,вот зачем? а за тем что в случае спорной ситуации раскопать и предъявить..
Всё знают и всё понимают только дураки да шарлатаны.(с)А.П Чехов.
skynetyar
 
Сообщений: 231
Зарегистрирован: 18 авг 2016, 14:25

Re: «пакет Яровой» навсегда изменит судьбу рунета

Сообщение tma » 23 апр 2017, 13:02

skynetyar писал(а):Даже наш директор тщательно записывает все разговоры и хранит все годами.

Кто бы Вашем директору разъяснил, что он нарушает законодательство.

А по теме: через 10 лет, когда наконец-то расшифруют какую-нибудь угрозу, это уже никому будет не нужно.
Смысле в предотвращении, но в России ищут не виновных, но крайних. И не только в современной России.
Так вот над предотвращением никто и не думает, думают о том сколько можно с этого распилить + запугивание несогласных.
К терроризму никаким боком.
http://telecomtechnology.net - услуги связи premium качества с сохранением CallerID
Номера: iNUM в +8835100 бесплатно, а так же в СПб/МСК (7812/7495) и Эстонии (372)
Эстония: +3723335510, Россия СПб: +7(812)3839300; Москва: +7(495)4019950; РФ: 88005500383
tma
 
Сообщений: 1676
Зарегистрирован: 18 сен 2010, 20:50

Пред.

Вернуться в Новости отрасли

Кто сейчас на форуме

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1

© 2008 — 2017 Asterisk.ru
Digium, Asterisk and AsteriskNOW are registered trademarks of Digium, Inc.
Design and development by PostMet-Netzwerk GmbH