[Перевод] Open-source решение для десятикратного снижения задержек чтения данных с Apache Cassandra

В Instagram развернута одна из крупнейших в мире БД Apache Cassandra. Проект начал использовать Cassandra в 2012 году с целью замены Redis и поддержки внедрения таких функций приложения как система распознания мошенничества, Лента и Директ. Сначала кластеры Cassandra работали в среде AWS, но позже инженеры мигрировали их в инфраструктуру Facebook вместе со всеми остальными системами Instagram. Cassandra показала себя очень хорошо с точки зрения надежности и отказоустойчивости. В то же время метрики задержки при чтении данных явно можно было улучшить.

В прошлом году команда поддержки Cassandra в Instagram начала работать над проектом, направленным на существенное снижение задержки чтения данных в Cassandra, который инженеры назвали Rocksandra. В этом материале автор рассказывает, что сподвигло команду на реализацию этого проекта, сложности, которые пришлось преодолеть, и метрики производительности, которыми инженеры пользуются как во внутренней, так и во внешней облачных средах.

Основания для перехода

Instagram активно и широко использует Apache Cassandra в качестве сервиса хранения типа «ключ-значение». Большинство запросов Instagram происходят онлайн, поэтому для предоставления надежного и приятного пользовательского опыта для сотен миллионов пользователей Instagram, SLA очень требовательны к показателям работы системы. Читать дальше →
[Перевод] Open-source решение для десятикратного снижения задержек чтения данных с Apache Cassandra
Source: geektimes

ГЛОНАСС сделают такой же точной, как и систему навигации GPS

Президент РФ поручил «Роскомосу» сделать навигационную спутниковую систему ГЛОНАСС такой же точной, как и американская GPS. Для того, чтобы добиться такого результата, оператору сети придется снизить погрешность определения координат в три раза. А для этого на орбиту необходимо запустить новое поколение космических аппаратов (КА) «Глонасс-К2». Эти системы в состоянии учитывать помехи, которые возникают при прохождении сигнала через верхние слои атмосферы.

Поручение конструкторам ГЛОНАСС президент Владимир Путин дал в сентябре 2017 года, на заседании Военно-промышленной комиссии РФ. Все это время конструкторы работали над созданием КА нового поколения. Первым из них станет «Глонасс-К2», который и разрабатывается в ИСС. Этот спутник будет оснащен электронной начинкой, которая не попала под санкции Европы или США. Правда, защита эскизного проекта аппарата задерживается. Она должна была состояться еще осенью прошлого года, вместо этого спутник будет проходить защиту только в этом году.
Читать дальше →
ГЛОНАСС сделают такой же точной, как и систему навигации GPS
Source: geektimes

Как фермеры Дикого Запада организовали телефонную сеть на колючей проволоке


Трудно представить, как иногда два совершенно далеких друг от друга события могут связавшись воедино, кардинально изменить жизненные реалии сотен тысяч людей. С полным правом к таким случаям можно отнести изобретение колючей проволоки в 1874 году и создание телефонного аппарата Александром Беллом, два года спустя.
Читать дальше →
Как фермеры Дикого Запада организовали телефонную сеть на колючей проволоке
Source: geektimes

[Перевод] Спросите Итана: почему бы нам не сделать телескоп без зеркал или линз?


Разместить ПЗС-матрицу в главном фокусе телескопа или обсерватории – отличный способ получения превосходных изображений; похожую технологию используют уже более 100 лет. Но возможно ли использовать одну только ПЗС-матрицу, без зеркал или линз?

Сотни лет принцип использования телескопа был простейшим из простейших: создать линзу или зеркало для сбора большого количества света, сфокусировать его на детекторе (глаз, фотопластинка, электронное устройство), и увидеть что-то, лежащее далеко за пределами возможностей невооружённого глаза. Со временем линзы и зеркала становились больше в диаметре и их делали со всё возрастающей точностью, а детекторы достигли уровня, на котором они способны собирать и использовать каждый поступающий фотон. Качество детекторов может заставить вас задуматься о том, зачем нам вообще нужны линзы! Об этом и спрашивает наш читатель:

Зачем нам нужны линзы и зеркала для создания телескопа, если у нас есть ПЗС-датчики? Почему бы вместо того, чтобы делать 10-метровое зеркало или линзу, фокусирующую свет на маленьком датчике, не сделать 10-метровый датчик?

Вопрос очень хитрый, ведь если бы могли такое сделать, это произвело бы революцию.
Читать дальше →
[Перевод] Спросите Итана: почему бы нам не сделать телескоп без зеркал или линз?
Source: geektimes

Техническая сторона «РадиоАстрона»


Снимок звёздного неба «GLEAM» сделанный в диапазоне радиоволн 70-230 МГц. В центре фото расположен Млечный путь, а по сторонам — около 300 тыс. других галактик.

Космический радиотелескоп «РадиоАстрон» на данный момент имеет самое большое угловое разрешение среди всех телескопов, а также является пожалуй самым успешным научным проектом российской непилотируемой космонавтики.


Разрешения РадиоАстрона достаточно чтобы различить спутники на противоположных сторонах НОО наблюдая с Проксимы Центавра или различить сигналы двух объектов на концах орбиты Земли с другого конца нашей галактики.

Сегодня мы поговорим о технической стороне работы «РадиоАстрона» с Александром Плавиным, научным сотрудником лаборатории внегалактической радиоастрономии Астрокосмического центра ФИАН и лаборатории исследований релятивистских объектов в МФТИ. Читать дальше →
Техническая сторона «РадиоАстрона»
Source: geektimes

Доверяй и проверяй: подход к проверке схем и печатных плат

image 1

Создание электрических схем и трассировка печатных плат становятся всё более простыми делами. Производители компонентов интегрируют в изделия всё больше функционала, выкладывают готовые модели, условные графические обозначения (УГО) и целые схемы, сайты автоматически генерируют источники питания, фильтры и многое другое. Тем не менее, даже при проектировании простых печатных узлов обнаруживаются ошибки, часто — глупые и очевидные.

Как их избежать?
Доверяй и проверяй: подход к проверке схем и печатных плат
Source: geektimes

MIT обещает запустить небольшую термоядерную электростанцию за 15 лет


Визуализация термоядерного реактора SPARC. У него мощность 20% от ИТЭР, а размер в 65 раз меньше. Иллюстрация: Ken Filar/MIT

Управляемый термоядерный синтез — настоящая чаша святого Грааля для энергетики. Если физики научатся удерживать плазму в магнитной ловушке и тратить на магниты меньше энергии, чем выделяется в результате реакции, то человечество получит практически неисчерпаемый источник чистой энергии, а об ископаемом топливе из углеводородов и урана можно будет забыть как о страшном сне (тем более что их запасов надолго не хватит).

Сейчас человечество потребляет 22,4 ТВт·ч электроэнергии ежегодно (в среднем по миру 3052 кВт·ч на человека, в России — 6588 кВт·ч, в США — 12833 кВт·ч, на Гаити — 40 кВт·ч на человека). Потребление растёт с каждым годом, а ископаемые источники рано или поздно закончатся (того же урана осталось примерно на 50 лет).

Поэтому уже сейчас необходимо готовиться к окончанию эпохи использования ископаемых типов горючего — и рассматривать альтернативные варианты. Это могут быть реакторы на тории, плутониевые бридеры на быстрых нейтронах, солнечные батареи (для удовлетворения потребностей человечества достаточно собирать 0,5% солнечной энергии, падающей на Землю) и проч. Но ядерный синтез — это кардинальное решение проблемы, потому что он потенциально представляет собой неистощимый источник энергии для развития Вселенной вообще. Ядерный синтез обеспечит не только текущие энергетические потребности человечества (22,4 ТВт·ч электричества в год), но даст гораздо больше энергии. Нам придётся думать, куда её потратить.
Читать дальше →
MIT обещает запустить небольшую термоядерную электростанцию за 15 лет
Source: geektimes

FREE SPACE РАЗРУШИТЕЛИ ЗВЁЗД

Книга третья

НАШ ЧАС

Мы летим ковыляя во мгле,
Мы ползём на последнем крыле.
Бак пробит, хвост горит и машина летит
На честном слове и на одном крыле…

Глава 1

Ветер с моря донёс рокот прибоя.
— Хорошо-то как! — с этими словами Алекс томно перевернулся на живот, подставляя свою спину под ласковые лучи жёлтого карлика согревающего своим светом знаменитые на все земные миры курорты планеты Лебедя Прайм.
Прямо перед его лицом по чистейшему песку маленький деловитый крабоид тащил свою раковину, озабоченно позыркивая своими стебельчатыми глазками в сторону загорелого и почти голого молодого человека с мокрыми после купания рыжими вьющимися волосами. Алекс осторожно потянул к маленькому членистоногому свою ладонь сложенную лодочкой. Крабоид тотчас замер на месте, покачиваясь на восьми своих тоненьких ножках и внимательно глядя на эти подозрительные приготовления. Его глазки-стебли настороженно вращались в двух плоскостях, ни на секунду не выпуская из вида потенциальной угрозы.
«Ты смотри, прямо как локаторы, на станции дальней разведки», — подумал молодой человек и резко дернул правой рукой, чтобы накрыть ладонью маленькое животное. Но реакция крабоида оказалась получше, чем у тренированного пилота боевого истребителя. Алекс успел схватить только пустую раковину, а само членистоногое в лучших традициях ведения звёздных войн, мгновенно катапультировалось из своего попавшего под атаку корабля. Через мгновение крабоид был уже в метре от агрессора, оставив тому в качестве трофея раковину, которую где-то сам подобрал в своих нелёгких странствиях.
— Пилот покинул свой корабль в спасательной капсуле, — задумчиво пробормотал молодой человек, рассматривая странную восьмиугольной формы добычу.

Читать дальше →
FREE SPACE РАЗРУШИТЕЛИ ЗВЁЗД
Source: geektimes

Google открыла код для машинного поиска экзопланет по данным с «Кеплера»


Фрагмент Солнечной системы (слева) в сравнении с восьмипланетной системой Kepler 90 (справа). Обнаруженная нейросетью Google экзопланета Kepler 90i с периодом обращения 14 дней отмечена оранжевым цветом

Исследователи находят всё новые применения нейросетям для обработки изображений. Теоретически возможности машинного обучения с подкреплением (DL) поистине безграничны, но когда смотришь на реальные достижения этих программ — среди них не так уж много действительно полезных на практике. Чаще всего нейросети достигают успеха в какой-нибудь игре, выдавая в качестве положительного стимула количественный результат в очках. Но какой смысл, что ваш ИИ научился отлично играть в Counter-Strike, если он не способен реализовать свои знания на практике и обезвредить настоящих террористов?

Но в отдельных случаях DL всё-таки используют не только для изучения самого DL, но и для решения практических задач, важных для человечества. Например, они используются в здравоохранении, квантовой химии и ядерной физике (везде даны ссылки на исследования Google). Теперь к этому списку присоединилась астрофизика. Инженеры из подразделения Google Brain нашли две новые экзопланеты, обучив нейросеть анализировать данные с космического телескопа «Кеплер». Хотя это всего лишь предварительные результаты после обработки 670 звёздных систем, но они доказывают применимость машинного обучения в данной области.

8 марта 2018 года разработчики Google выложили на GitHub исходный код программы для обработки данных с «Кеплера», программ обучения нейросети и выдачи прогнозов по самым перспективным звёздным системам.
Читать дальше →
Google открыла код для машинного поиска экзопланет по данным с «Кеплера»
Source: geektimes

Жидкий металл: подводные камни. Взгляд глазами химика

image
Написать эту статью меня подвиг пост NotSlow Не так страшен жидкий металл. Там все просто: подстраховался от замыкания, нанес тонким слоем, прикрутил и радуйся низким температурам. Но так ли все хорошо на самом деле?
Читать дальше →
Жидкий металл: подводные камни. Взгляд глазами химика
Source: geektimes