Category: интересное

Ама­зо­нов­цы опуб­ли­ко­ва­ли тех­ни­че­ский раз­бор при­чин недав­не­го паде­ния AWS. То, что вино­ват был DNS, уже было извест­но, но лич­но мне было любо­пыт­но понять — что же имен­но они смог­ли сло­мать в систе­ме, кото­рая, по идее, долж­на быть одной из самых про­стых и надёж­ных в инфра­струк­ту­ре интер­не­та?

Ока­за­лось, в их реа­ли­за­ции DNS скры­вал­ся ранее неза­ме­чен­ный баг, при­вед­ший к клас­си­че­ской race condition — ситу­а­ции, когда несколь­ко про­цес­сов или нитей про­цес­са одно­вре­мен­но пыта­ют­ся полу­чить доступ к обще­му ресур­су и в ито­ге меша­ют друг дру­гу. Такое состя­за­ние закан­чи­ва­ет­ся тем, что ресурс «зали­па­ет», а вся систе­ма рушит­ся, как кар­точ­ный домик.

При­знать­ся, изна­чаль­но у меня было подо­зре­ние на на чело­ве­че­ский фак­тор — дума­лось, что какой-нибудь неопыт­ный сисад­мин дёр­нул не за ту руч­ку, посо­ве­то­вав­шись с ИИ, но не спро­сив стар­ших това­ри­щей. Такое быва­ет, и мне тоже дово­ди­лось такое устра­и­вать. Но, как выяс­ни­лось, всё ока­за­лось куда глЫб­же.

Боль­ше все­го впе­чат­лил мас­штаб тре­ша, уга­ра, и бед­ла­ма с содо­ми­ей, вызван­ных сбо­ем. Лег­ла такая туча сер­ви­сов, что толь­ко успе­вай пам­пер­сы менять. Наши систе­мы, к сча­стью, напря­мую не постра­да­ли — но один из наших вен­до­ров ощу­тил послед­ствия спол­на.

Хочет­ся верить, что в Amazon извле­кут из это­го инци­ден­та пра­виль­ные уро­ки — ведь даже гиган­там вре­мя от вре­ме­ни полез­но вспом­нить, что совер­шен­ство инфра­струк­ту­ры не отме­ня­ет зако­нов веро­ят­но­сти и чело­ве­че­ской при­ро­ды.

Опо­ссум вир­гин­ский, адна шту­ка:

Я их не гоняю, хотя они жрат­ву у кота вору­ют, жули­ки. Сами посу­ди­те — полез­ная в быту и хозяй­стве тварь:

1. Жрут кле­щей (ticks), гад­ских раз­нос­чи­ков болез­ней. Один опо­ссум может в одно рыло сожрать пять тысяч кле­щей за сезон, а у нас их мно­го.
2. Гно­бят тара­ка­нов, ули­ток, слиз­ней (НЕНАВИЖУ!), мел­ких ядо­ви­тых змей, и даже мышей и крыс.
3. Жрут мусор и даже раз­ла­га­ю­щи­е­ся тру­пы живот­ных. Уби­тых белок, по-мое­му, с дере­ва снял (ага, недол­го они про­ви­се­ли) имен­но он.
4. Не боле­ют бешен­ством в прин­ци­пе — у них тем­пе­ра­ту­ра тела ниже (34−35), вирус бешен­ства тупо не раз­мно­жа­ет­ся. У собак, напри­мер, нор­маль­ная тем­пе­ра­ту­ра тела 38–39, там виру­су самое то.
5. Не агрес­сив­ны по отно­ше­нию к домаш­ним живот­ным. Зубы у них вну­ши­тель­ные, но опо­ссу­мы в душе паци­фи­сты.

Сло­вом, хоро­шие живот­ные, несмот­ря на оттал­ки­ва­ю­щий внеш­ний вид. Я их люб­лю. И, кста­ти, это един­ствен­ное сум­ча­тое живот­ное (ага, они сум­ча­тые, как кен­гу­ру) родом из Север­ной Аме­ри­ки.

Хочу поде­лить­ся дву­мя видео, где две груп­пы исклю­чи­тель­но талант­ли­вых музы­кан­тов в сту­дии с нуля дела­ют игра­ют каве­ры попу­ляр­ных песен.

Пер­вы­ми идут нор­веж­ские прог-метал­ли­сты LEPROUS с каве­ром на «Take on Me» груп­пы A‑ha (тоже нор­веж­ской, кста­ти, види­мо, им там в воду что-то добав­ля­ют). Лич­но меня боль­ше все­го впе­чат­ли­ли бара­бан­щик и вока­лист. У Мор­те­на Хар­ке­та (вока­ли­ста A‑ha) совер­шен­но офи­ги­тель­ный голос и потря­са­ю­щий фаль­цет­ный диа­па­зон — и ниче­го, метал­лист пре­крас­но спра­вил­ся с этим вызо­вом.

Вто­рое видео — тоже потря­са­ю­щее. Груп­па джа­зи­стов из Нью-Йор­ка испол­ня­ет джаз-кавер на “Heart-Shaped Box” «нашей всей» Нир­ва­ны. При всём моём ува­же­нии к прог-метал­лу, джа­зи­сты, конеч­но, в музы­каль­ном плане люди куда более про­дви­ну­тые: они не про­сто пере­иг­ра­ли пес­ню, а сде­ла­ли её по-насто­я­ще­му сво­ей. Очень реко­мен­дую.

Видео встав­ле­ны так, что­бы вос­про­из­ве­де­ние начи­на­лись с момен­та финаль­но­го испол­не­ния каве­ров, но если понра­вит­ся — сове­тую посмот­реть их цели­ком. Крайне инте­рес­но наблю­дать за кре­а­тив­ным про­цес­сом вжи­вую, осо­бен­но у джа­зи­стов: они бук­валь­но ста­вят гранж-пес­ню с ног на голо­ву, пре­вра­щая её в свин­го­вый номер в духе вели­ко­го Дюка Эллинг­то­на.

У меня тёп­лые, дру­же­ские отно­ше­ния с мест­ным цен­тром пере­ли­ва­ния кро­ви. При­мер­но каж­дые два меся­ца я сдаю цель­ную кровь (это важ­но, что цель­ную, а не плаз­му). У меня доволь­но рас­про­стра­нён­ная груп­па кро­ви — A+ (вто­рая, резус поло­жи­тель­ный), и её мож­но пере­ли­вать паци­ен­там с кро­вью как A+, так и AB+ (чет­вёр­тая, резус поло­жи­тель­ный) . Жаль, что я уна­сле­до­вал груп­пу кро­ви от мате­ри, а не от отца, у кото­ро­го была кровь O- (пер­вая, резус отри­ца­тель­ный) — тогда я бы был уни­вер­саль­ным доно­ром. Мог бы помочь боль­ше­му коли­че­ству людей.

Одна­ко я сдаю кровь не толь­ко из люб­ви к чело­ве­че­ству, и не из-за денег (пла­тят там всё рав­но три копей­ки), а в‑основном из-за того, что заме­сти­тель­ная гор­мо­наль­ная тера­пия уве­ли­чи­ва­ет коли­че­ство крас­ных кро­вя­ных телец в кро­ви, и если не дер­жать этот момент под кон­тро­лем, мож­но схло­по­тать тром­боз. Имен­но поэто­му мне луч­ше под­хо­дит сда­ча цель­ной кро­ви, а не плаз­мы. При сда­че плаз­мы все крас­ные кро­вя­ные тель­ца воз­вра­ща­ют­ся назад в туло­во доно­ра — чего мне как раз и не надо.

Одна­ко, выяс­ни­лось ещё инте­рес­ное. Как извест­но, аме­ри­кан­ская хими­че­ская ком­па­ния «Дюпон» отра­ви­ла всю пла­не­ту полифто­рал­киль­ны­ми соеди­не­ни­я­ми (PFAS), исполь­зу­е­мы­ми при про­из­вод­стве крайне широ­ко­го ассор­ти­мен­та про­дук­ции, от непро­мо­ка­е­мой одеж­ды до водо­про­вод­ных тефло­но­вых уплот­ни­те­лей. Нали­чие этих соеди­не­ний в окру­жа­ю­щей сре­де и нашей кро­ви свя­за­но с уве­ли­че­ни­ем рис­ка самых раз­ных забо­ле­ва­ний (линк на ста­тью на сай­те Аген­ства по Охране Окру­жа­ю­щей Сре­ды), и что самое пло­хое — они прак­ти­че­ски не раз­ла­га­ют­ся, так как хими­че­ски очень инерт­ны. Поэто­му полифто­рал­киль­ные соеди­не­ния био­ак­ку­му­ли­ру­ют­ся, накап­ли­ва­ют­ся в наших телах, так как ни наша печень, ни наши поч­ки не в состо­я­нии их отфиль­тро­вать и выве­сти. Кому-то при­шло в голо­ву мет­кое выра­же­ние «forever chemicals» (веч­ные хими­ка­ты) — так неохот­но они раз­ла­га­ют­ся на состав­ля­ю­щие их фтор, угле­род, и водо­род.

С тех пор, как вра­чи и учё­ные заби­ли тре­во­гу, нача­лись мас­си­ро­ван­ное тести­ро­ва­ние на содер­жа­ние PFAS в телах людей. Мож­но даже купить домаш­ний тест, про­ве­рить свою кровь (тест, прав­да, доволь­но доро­гой, несколь­ко сотен дол­ла­ров США). И тести­ро­ва­ние выяви­ло инте­рес­ную вещь — у жен­щин содер­жа­ние PFAS в кро­ви обыч­но было ниже, чем у муж­чин. Поче­му? Ока­за­лось, пото­му что PFAS частич­но выво­дят­ся из кро­ви при каж­дом мен­стру­аль­ном цик­ле, т.е. вме­сте с поте­рей кро­ви.

Таким обра­зом, сда­вая кровь, мож­но серьёз­но почи­стить своё туло­во от этой дря­ни. Чего и вам желаю.

Видео для допол­ни­тель­но­го куре­ния:

Ком­пью­те­ры не уме­ют вычи­тать чис­ла. Внут­ри про­цес­со­ра нет «вычи­та­то­ра», есть толь­ко сум­ма­тор (adder). Поэто­му когда надо посчи­тать, напри­мер, 3 — 2, ком­пью­тер внут­ри себя пере­пи­сы­ва­ет это выра­же­ние как 3 + (-2), то-есть, скла­ды­ва­ет трой­ку с минус двой­кой.

Чис­ла внут­ри ком­пью­те­ра, конеч­но же, дво­ич­ные. Самый зна­чи­мый бит в чис­ле — зна­ко­вый, если он 0, то чис­ло неот­ри­ца­тель­ное, а если 1 — то отри­ца­тель­ное. Если мы пишем сле­ва напра­во, так что самый зна­чи­мый бит — самый пер­вый сле­ва (к сло­ву, внут­ри себя ком­пью­те­ры же пишут по-еврей­ски, спра­ва нале­во (little endian)).

Так, зна­ко­вое целое чис­ло 3 запи­сы­ва­ет­ся как 0011 (пусть у меня будет четы­рёх­бит­ный про­цес­сор), а зна­ко­вое целое чис­ло ‑2 пишет­ся как 1110 (т.н. допол­ни­тель­ный код, two’s complement). Ну, и скла­ды­ва­ем эти чис­ла, поль­зу­ясь дво­ич­ной мате­ма­ти­кой, полу­ча­ем иско­мый 0001 (вер­нее, 10001, но про­цес­сор у нас четы­рёх­бит­ный, так что мни­мое пере­пол­не­ние идёт в игнор).

Все совре­мен­ные про­цес­со­ры (x86/AMD64, про­цес­со­ры ARM, и так далее) запи­сы­ва­ют отри­ца­тель­ные целые чис­ла, поль­зу­ясь допол­ни­тель­ным кодом. А вот на неко­то­рых более ран­них ком­пью­те­рах, типа PDP‑1 или совет­ской ЭВМ БЭСМ‑2, для запи­си таких чисел исполь­зо­вал­ся более про­стой обрат­ный код. Полу­чить обрат­ный код из дво­ич­но­го чис­ла про­ще — надо про­сто поме­нять еди­нич­ки на ноли­ки и наобо­рот. Так, что­бы запи­сать ‑2, берём +2 — это 0010, и меня­ем еди­нич­ки на ноли­ки, а ноли­ки на еди­нич­ки: 1101, вот вам и обрат­ный код.

И на этом месте появ­ля­ет­ся хох­ма!

Вот, напри­мер, обык­но­вен­ный нуль: 0000

Мож­но из него сде­лать отри­ца­тель­ный нуль: 1111

Таким обра­зом, у тебя в систе­ме есть два нуля — поло­жи­тель­ный и отри­ца­тель­ный, и запи­сы­ва­ют­ся они по-раз­но­му 🙂 И если ариф­ме­ти­че­ские дей­ствия с ними про­блем не вызы­ва­ют, так как на таких ком­пью­те­рах (-0 == +0) было TRUE, то с поби­то­вы­ми опе­ра­ци­я­ми, хеши­ро­ва­ни­ем, сор­ти­ров­кой уже воз­ни­ка­ют эффек­ты, и к кон­цу 1970х от про­сто­го обрат­но­го кода (one’s complement) для запи­си зна­ко­вых целых чисел отка­за­лись, перей­дя на запись допол­ни­тель­ным кодом (two’s complement), в кото­ром нуль как Аллах — один 🙂

Забав­но.

PS: А вооб­ще я стал­ки­вал­ся к неко­то­ры­ми зада­ча­ми, где мне бы при­го­ди­лось нали­чие двух нулей, отри­ца­тель­но­го и поло­жи­тель­но­го. А ещё было бы при­коль­но запи­сы­вать эти­ми раз­ны­ми нуля­ми резуль­та­ты вычис­ле­ния неко­то­рых пре­де­лов — было бы понят­нее, с какой сто­ро­ны пре­дел под­кра­ды­ва­ет­ся к нулю: lim (x → -∞) 1/x = ‑0 😉

В дет­стве у меня был про­иг­ры­ва­тель для вини­ло­вых пла­сти­нок с изме­ня­е­мой ско­ро­стью про­иг­ры­ва­ния. Обыч­ный диск на 33 обо­ро­та мож­но было запу­стить на 45 — уже полу­ча­лось смеш­но. А мож­но было зафи­га­чить аж на 78 обо­ро­тов — тогда пла­стин­ка про­иг­ры­ва­лась очень быст­ро, и всё зву­ча­ло по-муль­тяш­но­му. По баш­ке, конеч­но, надо было мне дать, что­бы пла­стин­ки не пор­тил, но что было, то про­шло. У меня сей­час тоже про­иг­ры­ва­тель пла­сти­нок есть, но такой дурью я боль­ше не маюсь. Про­сто играю пла­стин­ки и всё.

Так вот, все­гда мучал вопрос — как это ютуп­чик и про­чие сер­ви­сы видео- и аудио­кон­тен­та, типа под­ка­стов, могут убыст­рять (или замед­лять) про­иг­ры­ва­ние зву­ка без изме­не­ния его высо­ты?

Ока­за­лось, что дела­ют так:

1. Раз­би­ва­ют циф­ро­вой звук на малень­кие бло­ки в 512‑2048 байт. На часто­те дис­кре­ти­за­ции в 44.1 кило­гер­ца эти бло­ки име­ют дли­ну все­го несколь­ко мил­ли­се­кунд.
2. На каж­дом бло­ке запус­ка­ют пре­об­ра­зо­ва­ние Фурье. Для тех, кто вдруг не зна­ет — это мате­ма­ти­че­ский спо­соб раз­бить звук на инди­ви­ду­аль­ные состав­ля­ю­щие часто­ты.
3. Вос­со­зда­ют те же часто­ты, но про­сто уко­ра­чи­ва­ют или уве­ли­чи­ва­ют им дли­ну про­иг­ры­ва­ния в нуж­ное коли­че­ство раз по жела­нию поль­зо­ва­те­ля. Скле­и­ва­ют звук назад.

PROFIT!

Ну, немно­го послож­нее, конеч­но (обыч­но там не тупо дис­крет­ные бло­ки по 512 байт, а т.н. «сколь­зя­щее окно» (sliding window) раз­ме­ром в 512 байт, напри­мер, но осно­ва алго­рит­ма Phase Vocoder («фазо­вый воко­дер», что ли?) имен­но такая.

При­коль­но. Неуже­ли всё это дела­ет­ся пря­мо в бра­у­зе­ре, джа­вас­крип­том? Обал­деть. Навряд­ли на сер­ве­ре хра­нят­ся сто раз­ных вер­сий одно­го и того же видео­фай­ла.