6
Искусственный интеллект охлаждает дата-центры Google
Охлаждение центра обработки данных (ЦОД) – одна из ключевых статей расходов на обслуживание этих конструкций. Гигантские здания, в которых стоят десятки и сотни тысяч шкафов с оборудованием, вырабатывают колоссальное количество тепла, отвод которого стоит безумных денег.
Системы охлаждения в них настолько сложные, что проектированием и обслуживанием занимаются только очень опытные инженерные бригады. Однако в дата-центрах Google решили попробовать настроить эти системы с помощью искусственного интеллекта. В результате машина смогла подобрать такие параметры, что эффективность системы охлаждения в одном из ЦОДов повысилась на 40 %. Это позволяет компании экономить несколько миллионов долларов в год.
Первая поисковая страничка
А между тем Сергей Брин вместе с Ларри Пейджем теперь, забросив все юношеские забавы, сутками корпели над своим «детищем». И вот в 1996 году в компьютере Стэнфордского университета, где учились оба юноши, появилась страничка – предшественница всем ныне известной поисковой системы Google. Называлась поисковая страничка BackRub, что переводилось как «ты – мне, а я – тебе». Это была научная работа аспирантов, имена которых были Сергей Брин и Ларри Пейдж. Позднее поисковая страничка стала называться PageRank.
Основатель BackRub Сергей Брин держал сервер с винчестером в своей комнате общежития. Объём его был равен одному терабайту или 1024 «гигам», если перевести на современный язык компьютерщиков. Принцип работы BackRub основывался на том, чтобы не просто отыскивать страницы в интернете по запросу, а ранжировать их в зависимости от того, как часто на них ссылаются другие страницы, как часто к ним обращаются пользователи интернета. Собственно, этот принцип получил впоследствии своё развитие в системе Google.
Будущие основатели Гугл Сергей Брин и Ларри Пейдж ещё больше утвердились в своём решении продолжить работу над усовершенствованием системы поиска, ведь даже этой несовершенной программкой стало пользоваться огромное количество людей. Например, в 1998 году ежедневно сюда обращалось около десяти тысяч пользователей.
Однако пословица о том, что инициатива всегда должна быть наказана, в это время очень некстати воплотилась в жизнь. Сергей Брин вспоминает, что профессура Стэндфорда пришла в негодование оттого, что сервис начал расходовать большую часть трафика университетского интернета. Но самое страшное для преподавателей было даже не это – будущих создателей Гугла обвиняли в хулиганстве!
Причиной всему было несовершенство системы. И она выставляла всем «напоказ» даже университетские «закрытые» документы, доступ к которым был строго ограничен. В это время биография будущих основателей компании Google вполне могла получить такой негативный факт, как исключение из университета.
Конкурентов все больше
За последние несколько лет в мире появилось немало сервисов, постепенно обесценивающих труд и навыки программистов. Например, в июне 2020 г. начал работу проект Honeycode за авторством Amazon, позволяющий создавать программы без необходимости написания непосредственно программного кода. Плюс ко всему, проект совершенно бесплатный – им могут пользоваться и крупные компании, и обычные потребители.
Amazon Honeycode
В октябре 2020 г. Microsoft выложила в открытый доступ сервис Lobe, позволяющий создавать готовые модели машинного обучения даже тем, кто за всю жизнь не написал ни одной строчки кода. В конце мая 2021 г. из-под пера Microsoft вышел инструмент Power Apps для написания ПО без развитых навыков программирования. Это помощник для начинающих программистов, решивших освоить язык Power Fx.
Суперапп для ЦОД: что это такое и как его внедрять
ПО
Еще через месяц Microsoft запустила полностью бесплатный сервис Copilot с возможностью самообучения, представляющий собой виртуального помощника программиста на базе искусственного интеллекта. Он изучает код и комментарии к нему и предлагает разработчику функции и целые строки для добавления в этот код. Такой подход ускоряет процесс написания программ и дает возможность полностью отказаться от поиска решений в интернете.
Copilot пользуется популярностью у программистов
В конце лета 2021 г. в ассортименте «заменителей программистов» Microsoft появился еще один инструмент – Codex. Он способен переводить обычный текст, написанный на английском языке, в программный код. С его помощью «программистом» может стать любой, кто знает английский на среднем или более высоком уровне.
Свой Copilot Microsoft интегрировала в сервис GitHub, приобретенный ею в 2018 г. к октябрю 2021 г. почти треть нового кода, выгружаемого программистами на GitHub, создавалась при помощи этого виртуального ассистента (статистика Microsoft).
Задача проекта
Компания будет разрабатывать коммерческие продукты, включая облачную версию ClickHouse и решения для крупного бизнеса. «Про новые продукты и сервисы мы будем рассказывать дополнительно», — пообещал CNews представитель «Яндекса».
«Яндекс» зарегистрировал ClickHouse Inc., финансирование которого составляет почти $50 млн. Инвесторы — Benchmark Capital и Index Ventures
«Мы собрали отличную команду, которая способна реализовать весь технологический и коммерческий потенциал ClickHouse. Этим мы и займемся», — отмечает руководитель разработки ClickHouse Inc. Алексей Миловидов. По его словам, создание компании даст возможность начать коммерческую деятельность вокруг открытого кода, оказывая дополнительные услуги.
Разработкой продукта будет руководить Юрий Израилевский,
который с 2018 г. работал в должности вице-президента по разработке в
, где был ведущим разработчиком платформ и несерверных облачных
решений. «Создание ClickHouse Inc. позволит нам сосредоточиться на том,
чтобы сделать продукт еще более мощным, особенно при развертывании в
облачных средах», — приводит цитату Израилевского Businesswire. CEO
компании стал Аарон Кац, до прихода в компанию он был ответственным за продажи в поисковой системе Elastic.
Принципы работы компании Яндекс
На протяжении двадцати лет руководство Яндекса придерживается следующих позиций:
На работу принимаются специалисты не только с техническим образованием. К примеру, в штате работали и выпускники театральных академий, и люди с военным образованием. Приоритет отдавали начитанным личностям. Так, на первом этапе работы всем соискателям показывали рисунок из книги «Маленький принц» Экзюпери – слона в удаве. Тех, кто определял, что это такое, принимали на работу.
Иллюстрация из книги «Маленький принц» Антуан де Сент-Экзюпери
- Компания Яндекс делает ставку на молодых специалистов. Да, в штате по сей день работают и сотрудники, которые стояли у истоков поисковой системы. Им уже давно за пятьдесят. Но основной контингент – это двадцати-тридцатилетние перспективные разработчики и менеджеры.
- Руководство Яндекса прекрасно понимает, что качественный продукт может разработать только сытый и здоровый человек. Именно поэтому оно полностью оплачивает своим сотрудникам питание, медицинскую страховку, мобильную связь, приобретает все необходимые для работы журналы, проводит интернет тем, кто работает на удаленке.
- Офисы Яндекса украшены орхидеями, за которыми следят профессионалы. Посетители думают, что это искусственные цветы. На самом деле в стенах имеются замаскированные ниши с землей. И вообще, скажем прямо, о роботе в таких офисах не мечтает разве что фрилансер с Бали (и то не факт).
Офис Яндекса в Питере
Ресепшн
Питерский офис Яндекса
Казалось бы, ничего сверхъестественного, но такие правила помогают отбирать для работы в компании лучших из лучших и ежедневно создавать для них позитивный настрой.
Имя
Название «Google» возникло из-за неправильного написания «googol », что означает число, представленное единицей, за которой следует сотня нулей. Пейдж и Брин пишут в своей первой статье о PageRank : «Мы выбрали название нашей системы, Google, потому что это обычное написание слова googol, или 10, и оно хорошо соответствует нашей цели построения очень крупномасштабного поиска. двигатели «.
Имя встречается, по крайней мере, с момента создания персонажа комикса Барни Гугл в 1919 году. Британский детский автор Энид Блайтон использовал фразу «Google Bun» в The Magic Faraway Tree (опубликовано в 1941 г.) и (опубликовано в 1946 г.) и назвал персонажа клоуна » Google «в Circus Days Again (опубликовано в 1942 г.). Существует также Звездный мыслитель Googleplex от Дугласа Адамса ‘Автостопом по Галактике. В марте 1996 года компания Groove Track Productions подала заявку на регистрацию товарного знака Google для различных продуктов, включая одежду нескольких категорий, мягкие игрушки, настольные игры и конфеты. Фирма отказалась от заявки в июле 1997 года.
Все чаще находя свое отражение в повседневном языке, глагол « » был добавлен в словарь Merriam Webster Collegiate Dictionary и Оксфордский словарь английского языка в 2006 году, означающий «использовать поисковую систему Google для получения информации в Интернете». Использование самого термина отражает их миссию по организации, казалось бы, бесконечного количества информации в сети. Первое использование «Google» в качестве глагола в поп-культуре произошло в сериале Баффи Истребительница вампиров в 2002 году. В ноябре 2009 года журнал Global Language Monitor назвал «Google» № 7 в своем списке лучших слов десятилетия. В декабре 2009 года BBC выделила Google в серии «Портрет десятилетия (слова)». В мае 2012 года Дэвид Эллиотт подал жалобу на Google, Inc., утверждая, что когда-то отличительный знак Google GOOGLE стал общим и не имеет значения товарного знака из-за его обычного использования в качестве переходного глагола. После проигрыша Google в судебном разбирательстве UDRP с участием многих принадлежащих ему доменных имен, «связанных с Google», Эллиотт позже потребовал вынесения декларативного решения о том, что его доменные имена по праву принадлежат ему и не нарушают никаких прав на товарные знаки Google может принадлежать, и что все зарегистрированные в Google знаки GOOGLE должны быть аннулированы, поскольку «Google» в настоящее время является распространенным во всем мире общим словом, которое означает «искать в Интернете».
Значимые достижения системы поиска
Начнем с того, что первоначальным разработчиком системы была компания «Агама», по совместительству она же занималась программным обеспечением для Windows, что гарантировало отличный старт.
Как было отмечено, одной из важных особенностей поисковика стала возможность автоматического перевода запроса и ответа с русского языка на английский и в обратной последовательности.
К ноябрю 1997 года было проиндексировано значительное количество документов (первый миллион), которые располагались на десяти тысячах серверов.
Aport.ru обладал еще одной важной особенностью – наличие собственного каталога данных давало возможность восстанавливать проиндексированные страницы, поэтому можно было просматривать даже те из них, которые уже не существовали
Это далеко не все достижения, которые были в копилке Aport в самом начале развития:
Она была пионером среди других поисковых систем благодаря тому, что стала воплощать базовые технологии Google
Для определения популярности ресурсов кроме количества обратных ссылок бралась во внимание также их важность.
Обновленная система Aport 2000 при обработке вводимых запросов учитывала сразу html-код и слова, находившиеся непосредственно в URL.
Это была первая база данных, которая стала осуществлять поисковую возможность по лентам новостей.
Апорт стала первопроходцем в том, чтобы применять платную нулевую строку при выдаче.
Поисковая база Aport 2000 позволяла дробить себя на несколько фрагментов, чтобы затем использовать ее для работы на каждом компьютере. Затем фрагменты совмещались и выдавали общий результат для пользователя.. В свои лучшие времена Апорт имела весьма обширные возможности
Русскоязычные интернет-ресурсы присутствовали в каталоге (аналог Дмоз) в значительной степени, охватывая большую часть пространства
В свои лучшие времена Апорт имела весьма обширные возможности. Русскоязычные интернет-ресурсы присутствовали в каталоге (аналог Дмоз) в значительной степени, охватывая большую часть пространства.
Поэтому практически каждый вебмастер стремился попасть в базу данных Aport, чтобы обеспечить значительное повышение посещаемости.
Главная страница предоставляла массу дополнительной информации, как например, прогноз погоды, последние новостные сводки, прогноз погоды, блоки с рекламными объявлениями, валютные котировки и многое другое.
Отдельно можно было выделить блок на aport.ru, где находилась справочная информация и доступ к почте. Уже тогда сайту был подвластен поиск по вводимому адресу компаний и различных учреждений.
Не меньший интерес представляла собственная доска объявлений – сервис наравне с современными аналогами позволял купить или продать товары, а также отдать ненужное безвозмездно или обменять.
Был раздел по поиску работу, который оказался не доработан и предлагал недостаточно релевантные результаты.
Традиции
На официальном сайте традиционно заменяется логотип, его место занимают задачи, видеоролики и т. п. Компания организует мероприятия, посвящённые знаменательному дню. В сети и на сервисах Яндекса привычно в этот день поздравлять коллег, все поклонники сервиса шлют тёплые пожелания компании.
Нередко 23 сентября проводят тематические мероприятия, организуют семинары, собрания, чтобы вспомнить достижения и очертить будущие проекты.Компания чествует своих лучших работников, вручая премии и другие награды. Массовые мероприятия на юбилейные даты всегда полны креативности.
Главные уроки
Подытожив статью, хочу выделить основные моменты из истории самого популярного российского IT-бренда.
- Яндекс предлагает и продолжает разрабатывать сервисы, которые нужны пользователям ежедневно и значительно упрощают им жизнь. Практически каждый продукт уникален, поэтому выделяется на фоне конкурентов.
- Инвестиции в будущее – неотъемлемая часть успеха. Яндекс вкладывает много денег как в краткосрочные, так и долговременные проекты. Развиваясь в различных IT-сферах и скупая стартапы, бренд создаёт для себя «подушку безопасности», благодаря которой даже при полном падении основного бизнеса, компания продолжит своё существование.
- Локальность бренда – технологии поиска остаются заточенными под русскоязычных пользователей. Несмотря на то, что Яндекс стремится занять топовые позиции в мировом поиске, ставки делаются на Россию, Белоруссию, Казахстан.
- Масштабируемость – сегодня офисы Яндекса находятся не только в странах СНГ, но также в Турции, Германии, Швейцарии, Нидерландах, Китае, США и Израиле.
Во многом успех Яндекса в Рунете связывают с тем, что он стал пионером в разработке поисковой системы, способной эффективно справляться с трудностями русского языка. А ведь этого разработчик действительно сумел достичь, получив весомое преимущество перед тем же Google в России.
Предпосылки возникновения поисковых систем
Цель всех поисковых систем — найти и отранжировать данные, найденные в интернете. До разработки поисковиков интернет представлял собой набор сайтов, по которым пользователи переходили вводя прямой адрес сайта, или пользовались специализированными каталогами и списками сайтов. По мере того, как список веб-серверов увеличивался в несколько раз, возрастала потребность в улучшенном поиске.
Дополнительная информация. Первую идею по созданию общего архива для всех мировых данных реализовали в 1945 году. Ванневар Буш опубликовала научную статью, в которой предложила собирать данные и исследования, извлекая из них самое полезное.
Перенесемся в истории создания и развития поисковых систем на полвека вперед. Публичные FTP-серверы были распространены в конце 1980-х, но не было простого способа найти информацию или файлы, если не известно имя и местоположение документа, а также адрес сервера.
Все это изменилось, когда в 1990 году студент Алан Эмтаж создал Archie, первую поисковую систему, которая индексировала и находила FTP архивы. Веб-каталоги и поисковики постепенно приобрели популярность, став предпочтительным методом поиска в Интернете. Основные этапы истории развития поисковых систем приходятся на период с 1993 по 1998 год.
С чего все начиналось, история APORT
Российская поисковая система Апорт была представлена общественности в 1996 году, а уже в ноябре 1997 года она могла индексировать все пространство Рунета.
Лидирующие позиции получалось удерживать долгое время благодаря грамотному вкладу разработчиков в самом начале.
К сожалению, год от года у компании менялись владельцы – как результат, слишком большая доля внимания уделялась маркетинговым стратегиям и все меньше разработкам.
Уже в 1998 году поисковик был продан за 55 тысяч долларов Джозефу Авчуку. В результате бренды «Апорт», а вместе с ним и «Агама» продолжили свое существование, но используемый поисковик под названием «Ау!» был свернут.
В 1999 году каталог был переименован в AtRus, после чего он получает экспорт на сайты «Апорт», «Омен» и «Россия он-лайн».
Впоследствии от этой прекрасной базы данных ничего не осталось. После слияния система получила новое название «Aport 2000» и активно участвовала в компьютерных выставках.
Новая база данных строила выдачу на основе результатов отдельно взятых сайтов, используя данные каталога AtRus и владельцев ресурсов.
31 июля 2000 года владельцем Апорта и других проектов от «Агама» стал Golden Telecom.
Через год в компании наметилась тенденция по снижению расходов на амбициозные и требующие больших вложений проекты, поэтому стало неизбежным постепенный спад оборотов в развитии системы.
В 2004 году дизайнеры опять немного изменили дизайн и цветовую гамму поисковой машины.
Буквально через 2 года разработчики снова вносят правки в дизайн портала.
Технологии были положены в основу при создании поисковой системы Gogo.ru в 2007 году, которая, однако, также не является действующей к настоящему моменту.
Апорт.ру с августа 2011 года перешел на технологию поиска, которую использует Яндекс, а затем летом 2012 года он был приобретен директором сайта Mamba.ru.
После перепрофилирования сайта www.aport.ru в торговую площадку интернет-поиск был выключен.
Удивительный работодатель
В мире программистов сложилось мнение, что работа в Google – это едва ли не главная цель в жизни. Рекрутеры компании каждый день рассматривают десятки резюме. Привлекает соискателей не только статус лучшего работодателя в стране, но и условия работы, а также зарплата.
Рабочее пространство
Офис Google не похож на лабиринт из тесных кабинок, где трудятся сотрудники американских страховых или финансовых организаций. Интерьер рабочего пространства обставлен так, что работники чувствуют себя как дома и может возникнуть желание остаться в офисе на всю ночь, ведь мягкий диван вполне способен заменить кровать. Есть продукты, предметы личной гигиены, поэтому утром можно продолжить работу, не тратя время на дорогу из дома.
Работать можно не только за столом, но и в гамаке на свежем воздухе. Ученые доказали, что сидячий образ жизни вредит здоровью, поэтому в офисе есть беговые дорожки и другие приспособления для занятий спортом. Поэтому каждый сотрудник Google имеет возможность поставить ноутбук на подставку, включить легкий режим на беговой дорожке и продолжать трудиться.
Пару раз в неделю работникам разрешают работать из дома, но даты удаленки согласовывают с менеджером заранее. До пандемии COVID-19 это считалось блажью, а впоследствии стало требованием, чтобы уменьшить случаи заражения в коллективе.
Сотрудников компании называют «гуглерами», а новичков – «нуглерами», экс-работников – «зуглерами». Каждую пятницу в офисе устраивают праздник для «гуглеров». Организуют мини-вечеринку по случаю завершения рабочей недели.
Отдых
Гамаки и мягкие диваны – не единственные способы, которые помогают сотрудникам Google расслабиться
Внимание уделяют медитациям, в которых преуспел Чед-Менг Тан, который пришел в компанию на должность инженера. Гуглер так увлекся духовными практиками, что разработал программу личностного роста для коллег. Менеджеры освободили Тана от должности инженера и назначили на пост «довольно неплохого парня»
Менеджеры освободили Тана от должности инженера и назначили на пост «довольно неплохого парня».
Кому медитация не так по душе, расслабляются за игрой в бильярд, настольный футбол или включают игровую консоль.
Зарплата
Средняя годовая зарплата в Google превышает $200 тыс. Так, доходы инженера-программиста варьируются в пределах $98–330 тыс. На директорских должностях специалисты получают $291–385 тыс. в год. Доход аналитиков качества поиска – $114–173 тыс. Самая высокая зарплата у вице-президента – $650 тыс.
От несчастного случая, болезни и смерти никто не защищен. Но в Google не только приносят соболезнования родственникам скончавшихся сотрудников. Близкие почивших 10 лет безвозмездно получают 50% от годовой зарплаты родственника.
Первые поисковые система
Проект WebCrawler, который появился в сети в 1994 году, стал первой ласточкой в ряду полноценных поисковых систем и определившей дальнейшее развитие поисковых систем.
В следующем, 1995 году Интернет пополнился системами Lycos и AltaVista, одна из которых (AltaVista) долго лидировала в сфере поиска информации в сети.
1997-й – год рождения Google. Создана она была Сергеем Брином и Ларри Пейджем в Стэнфордском университете как исследовательский проект; сегодня же нет более популярной поисковой системы в мире, чем Google. Создание Google стало революцией, определившей дальнейшее развитие поисковых систем. Google сделал работу поисковиков коммерчески выгодной, связав поисковые запросы и выдачу, с контекстной рекламой.
В том же 1997 году официальное представление получила самая востребованная в русскоязычном Интернете система Yandex.
Интересные факты о Яндексе
Этих подробностей многие точно не знают. Рассказываю:
- Первые компьютеры, которыми укомплектовали офис Яндекса, называли буквами старорусского алфавита. Несведущий человек не понял бы ничего, если бы услышал: «Аз упал», «На веди закончилось место». Когда алфавит закончился, была долгая дискуссия о выборе следующего языка. Решили, что машины станут называть армянскими буквами.
- Долгое время у компании не было помещения для хранения серверов. Первые серваки вообще находились под ногами у разработчиков. И только в 2000 году Яндекс позволил себе первую серверную.
- В штате изначально не было ни одного дизайнера, только разработчики. Поэтому когда стали решать, как сделать главную страницу красивой, ничего оригинального на ум не приходило. Решили, что кроме стандартной строки на ней появятся числа, элементы сказок и логотип. Кстати, последний тогда был нарисован под небольшим углом. Разработчики посчитали, что это круто и необычно. А вот пользователи не поняли суть и забросали специалистов письмами с предложениями положить бумажку в сканер ровно, а не криво.
Лого Яндекса по годам
- Когда разработчики предложили внедрить голосового помощника Алису, началась жаркая дискуссия о выборе голоса для озвучки. В результате работать над проектом пригласили актрису Татьяну Шитову, профессионально занимающуюся озвучкой иностранных фильмов.
- Для тестирования разработанной поисковой системы предложили взять Библию. Такой странный выбор был объяснен тем, что Библия является самой популярной книгой в мире. Разработчики решили, что именно в ней собран самый большой массив русскоязычных текстов. Большая часть запросов во время тестирования набиралась специалистами вручную. А если возникали спорные моменты, за помощью обращались к священникам.
- Новейшие технологии прочно вошли в жизнь Яндекса. Их можно найти даже на офисных кухнях компании. Например, на одной из них есть говорящая кофеварка. Для того, чтобы она сделала кофе, нужно ее попросить об этом. А еще она периодически вмешивается в общение отдыхающих специалистов.
Креатив от Яндекса
Первым человеком, озвучившим Яндекс Навигатор, стала сотрудница компании Оксана Мандрыки. На сегодняшний день пользователи могутт выбирать один из двадцати четырех голосов. Среди них есть и весьма популярные. Например, Баста, Гарик Харламов, Артем Дзюба и другие.