24 декабря Архивач восстановлен после серьёзной аварии. К сожалению, значительная часть сохранённых изображений и видео была потеряна. Подробности случившегося. Мы призываем всех неравнодушных помочь нам с восстановлением утраченного контента!
У МЕНЯ ВОПРОС А где хранятся все загруженные видео на Ютуб. То есть, вот, смотрите: есть ролики с
А где хранятся все загруженные видео на Ютуб. То есть, вот, смотрите: есть ролики с продолжительностью в десять часов. Весят они около 1 - 10 гб
Есть ролики с весом более 50-ти гб
Миллион таких роликов – весить должны просто доОООХууууище. На Ютубе видосов, точно, больше миилиарда штук – вес всех вместе взятых видео должен быть просто невероятный
НА ЧЕМ ЭТО ВСЁ ХРАНИТСЯ? ГДЕ/В ЧЕМ ХРАНЯТСЯ ВСЕ ВИДЕО ЮТУБА? ЧЕ ЗА НАКОПИТЕЛЬ С НЕЕБИЧЕСКИМ КОЛ-ВОМ ВЕСА?
датацентры гугла Согласно официальным данным, размещенным на сайте Google, по состоянию на 2022 год компания владеет 14 дата-центрами в Северной Америке, 1 в Южной, 6 в Европе и 2 в Азии. В общей сумме 23 ЦОД, каждый из которых имеет свою историю строительства и уникальные технические особенности. При этом, с 2018 по 2022 год было объявлено о начале возведения еще как минимум 6 дата-центров.
>>303113432 Так можно забить эти дата центры пустыми роликами, с хромоентражом в 900 часов и весом больше 100гб, если каждый день люди будут загружать на ютуб такую хуйню?
>>303113334 (OP) Ты еще не вкурсе про тысячи каналов которые раз в минуту выгружают огромные ролики без содержания, так что твоя идея вручную сговорившись обрушить дата центры это хуйня
Гений fuksosiciti непопулярные ролики сжимают на серверах, наглядный пруф этому то что такие ролики могут плохо грузится при отличном инете, алсо чтобы постить длинные ролики там есть критерии к каналу
>>303113334 (OP) Так место почти нихуя не сто́ит, до хохлокоста даже у крупных российских поставщиков, которые крутят на них свои мерзопакостные проценты за хранение и реализацию, жесткие диски стоили копейки, а гугел 100% напрямую для датацентров закупает свои диски, минуя посредников, ещё и много большим тиражом, от чего цена для них должна быть ещё ниже
>>303113663 Понял. Хорошо, ещё один вопрос. Дебильный но всё же
Если спалить нахуй эти датацентры – информация хранящаяся на них, естественно, уничтожится, НО, а она где-то кроме этих датацентров хранится? Резервные датацентры или чёт такое
Или реально можно уничтожить миллионы страниц ВК, если зайти в такой датацентр и спалить его
Храниться в гугловских датацентрах. Последний раз в новостях читал что у них замена была старых 16 тб хардов на 28-32. В одной паллете 4320 таких хардов. Паллет в стойке дохуя. Вот и считай.
А учитывая что гугл и прочие компании дата центры сейчас активно апдейтят под ИИ, я думаю там размеры будут еще более бешенные.
>>303113696 Гений айти мира ты вообще открывал что то кроме cmd? Кеширование нужно для быстрого доступа к данным, никто твой ролик на 5 просмотров не будет кешировать, его как раз сожмут для экономии места на серверах
>>303113481 У гугла свой кодировщик при закачке видео оно преобразуется таким образом что повторяющиеся кадры не занимают места, никто сейчас не использует постоянный битрейт для хранения потому что это невыгодно. Вот в телеге видосы загружаются без изменения иди ломать её, как сломаешь отпиши в тред.
>>303113744 >она где-то кроме этих датацентров хранится? Тебе кроме гугла это никто не скажет, у всех компаний свой подход к бэкапированию. Обычно сервера бэкапов находятся в том же здании, что и основные, просто на уровне сети отделены от остального контура, возможно часть этих датацентров выполняет функцию бэкапирования и только для этой цели и существует, но в твоем случае (если сжечь всё нахуй) - уничтожиться всё.
>>303113842 Ютуб по дефолту сжимает все видео, популярность видео на это не влияет, а вот на кеширование влияет. >никто твой ролик на 5 просмотров не будет кешировать Ебать ты даун, я об этом и говорил.
Потому дата центры и строят обьеденяя все это. Ты как физик например, можешь приобрести стойку на 100 хардов. 100х16 = 1.5 петабайта. Достаточно что бы сохранить дохуя.
>>303113635 Пропускная способность позволит им загружать тысячу гигабайт? Поставь сейчас загружаться любое видео и сообщи с какой скоростью это происходит.
>>303113371 Поломать YouTube путем загрузки огромного объема видео очень маловероятно из-за нескольких причин.
1. Инфраструктура YouTube: YouTube вложил значительные ресурсы в свою инфраструктуру, чтобы обрабатывать огромный объем видеоконтента каждый день. Их серверы и сеть распределены по всему миру и масштабируются в соответствии с загрузками.
2. Алгоритмы контента и качества: YouTube имеет системы, которые автоматически анализируют и фильтруют контент. Если множество видео будет загружаться без органического интереса со стороны зрителей, алгоритмы могут игнорировать или даже блокировать это содержимое.
3. Правила использования: YouTube имеет правила использования, и некоторые действия, такие как загрузка огромного объема контента, могут привести к блокировке или приостановке аккаунта за нарушение правил.
4. Поведение пользователей: Пользователи, которые будут пытаться загрузить столько видео, скорее всего столкнутся с проблемами, такими как недостаток времени и ресурсов для создания и загрузки такого количества контента.
Хотя в теории можно представить ситуацию, когда огромный объем контента может создать временные проблемы для YouTube, вероятность такого сценария крайне низка из-за вышеперечисленных факторов.
А было бы эпично напасть двачом на те же одноклассники/твиттер и загружать туда сто гигибайтную хуйню, тем самым забивая дата центры гомонигерами или трапами в итоге выведя из строя нахуй соцсеть
>>303114023 Из-за кеширования, один пользователь открывает видос, он грузиться медленно, сохраняется в кеш и для других грузится быстрее. Это базовая модель с которой я работал, естественно в гугле алгоритмы кеширования сложнее. https://youtu.be/QpBaA6B1U90?t=857
>>303114051 Двач так уже ломали. Но теперь он хостится на серверах мэйлру, а это опять гигантские датацентры. Так что теперь двач не сломать. Зато общение стало {{{анонимным}}}
>>303113635 1кк человек ежедневно срёт на сотни мегабайт в вк и прочие соцсетки на территории рф, что твоя сотня? Ты даже примерно масштабов не представляешь.
>>303113991 >Поведение пользователей: Пользователи, которые будут пытаться загрузить столько видео, скорее всего столкнутся с проблемами, такими как недостаток времени и ресурсов для создания и загрузки такого количества контента.
>>303113371 Ддос называется. Хуй вы так гугл положите. У вас пропускная способность в среднем 20мегабайт/сек, гугл может до несскольких террабайт обрабатывать, а ролики ваши будет просто сносить, если это станет проблемой
>>303114310 блять дебил сука я тебе уже написал, что то, что ты хочешь сделать делается ддосом, то есть когда ты дохулиард пакетов на сервак отправляешь и он крашится, потому что обрабатывать их не успевает, своей хуйней ты ничего не сделаешь.
>>303114051 Двач хостится на мейл.ру так что вопрос стоит не в том как поломать двач, а в том как поломать мейл.ру Ответ только прямым физическим воздействием, никакие маня атаки через интернет проводок не подействуют.
>>303113334 (OP) Пробовали использовать ютуб как файлохранилище преобразуя файлы в цветовой код, где-то пол года назад любой набор чисел выдавал сотни таких видео, в какой-то момент они все резко пропали, значит ютубу не понравилось и все потерли.
>>303113334 (OP) У них ебейшие датацентры с ебейшими raid-массивами, состоящими из хардаков на 50+тб в каждом разьёме, плюс они перекодируют в vp8 или 9 хз, на свой гуглокодек и шакалят исходные видосы для оптимизейшона
>>303114828 Да, я, как покупатель, люблю Пятерочку и не люблю Магнит. А еще принципиально перестал покупать что-либо в той сети потому, что из-за дебильного руководства их местного распределительного центра и их некомпетентности на районе ежегодно куча фур блокирует улицы, создавая пробки, шум, аварийные ситуации, длится это по 3 дня 2 раза в год. Даже ДПС еле справляется. А еще из-за магнитопидоров расхерачен асфальт в жилом районе. Конечно, в таком расположении виноваты не только магнитопидоры, но и местные власти, разрешившие это, но магнитопидорам насрать - легче.
Да и в Магнитах постоянно какой-то бардак, а в Пятерочках - уют, чистота и гармония.
>>303114885 И что? Там же одни дегенераты стали руководить после того, как его отжали у Галицкого. Не удивлюсь, если они сами всё сломают когда-нибудь.
>>303115107 >И что? И то, что охуительный оборот ведёт к охуительным требованиям по инфраструктуре, там Любы Отмены каждый час оказыват большую нагрузку, чем сотка сосачеров сможет из себя выдавить в сумме за год
>>303115064 Двачую, у них еще и постоянное наебалово с ценниками, в пятере есть тема, что как на ценнике, так и на кассе, а в магните всем просто похуй, могут годами не менять ценники на скидки и они там будут висеть и наебывать, всем поебать, мне хуеплет на кассе прямо так и сказал "даже если на ценнике другая цена, я по ней не пробью".
>>303115629 >Двачую, у них еще и постоянное наебалово с ценниками, в пятере есть тема, что как на ценнике, так и на кассе, а в магните всем просто похуй, могут годами не менять ценники на скидки и они там будут висеть и наебывать, всем поебать, мне хуеплет на кассе прямо так и сказал "даже если на ценнике другая цена, я по ней не пробью" > Дергаешь администратора и всё пробивается на кассе, естественно если ценник именно на этот товар. кассир-магнита
Бинарные данные никто не кэширует, сэкономленное время поиска будет абсолютно ничтожным в сравнении с временем чтения, а стоимость такого кэша запредельная. В кэше лежат только ключи для поиска файла, кэш ускоряет запрос на миллисекунды.
Для хранения кучи данных существуют многоуровневые стораджи Горячий для текущего контента (десятки петабайт) Холодный для архивного (сотни петабайт) Контент в них не сжимается, видео итак уже сжато кодеком. Но в холодном хранятся не файлы целиком, гугли deduplication
Ролики могут грузится дольше потому что их нет на cdn, они хранят горячий контент близко к клиенту, чтобы он грузился быстрее.
>>303115629 Недавно с коллегой заскочил в магнит, чтобы взять что-нибудь на обед. Сам я туда не захожу уже года 2, а сейчас просто по пути было... Меня попытались также наебать на 50 рублей. Ценник - один, на кассе пробивать начале по более высокой цене. На вопросы о том, как так получается, пизда начала бубнить что-то невнятное. Короче, я не стал это брать. Ебанутые. Еще какая-то старшая их подошла и стала нести какой-то бред о том, что невсегда реальная цена совпадает с той, которая на ценнике, что они носят лишь информативный характер, показывая примерные цены, что это - нормально...
Замечательно, этой курве депутатом надо быть, хехех.
Конченые, блядь. Теперь буду лучше без обеда сидеть, чем с кем-то по пути заскакивать в эту шарагу ебаную.
Понятно, что такая моя "борьба", такое голосование рублём одного человека ничего не дадут, но зато я не поддерживаю этих пидорасов. А пидорасы там - не только руководство, но и такие ебанатки с ебанатами, ишачущие за копейки и после этого жалующиеся на тяжкий и недооцененный труд.
>>303117793 >Понятно, что такая моя "борьба", такое голосование рублём одного человека ничего не дадут Естественно, нормальные люди просто требую продать по ценнику, отказывают - лепишь жалобу на них, они их как огня боятся.
>>303117793 >невсегда реальная цена совпадает с той, которая на ценнике, что они носят лишь информативный характер, показывая примерные цены Как же дурачка легко развести, лол.
А где хранятся все загруженные видео на Ютуб. То есть, вот, смотрите: есть ролики с продолжительностью в десять часов. Весят они около 1 - 10 гб
Есть ролики с весом более 50-ти гб
Миллион таких роликов – весить должны просто доОООХууууище. На Ютубе видосов, точно, больше миилиарда штук – вес всех вместе взятых видео должен быть просто невероятный
НА ЧЕМ ЭТО ВСЁ ХРАНИТСЯ? ГДЕ/В ЧЕМ ХРАНЯТСЯ ВСЕ ВИДЕО ЮТУБА? ЧЕ ЗА НАКОПИТЕЛЬ С НЕЕБИЧЕСКИМ КОЛ-ВОМ ВЕСА?