Зачем я это делал: Раскрываю карты и реальную цель моего «пулеметного» марафона постов на DTF

Привет, DTF. Последние несколько часов я закидывал ленту бенчмарками, вычислениями в bfloat16, инъекциями C++ и спорами про Nvidia. В комментариях шутили, что я строчу как из пулемета, звали ликвидаторов и ФБР.


Пора сбросить маски и рассказать, ради чего всё это создавалось. Забудьте на минуту про терафлопсы, компиляторы и AVX2. Технологии — это просто инструмент.


Моя реальная цель — создать полностью автоматизированную систему, способную скачивать, фильтровать и архивировать колоссальные массивы данных. Если говорить конкретно: я нацелился на медиа-архивы NASA и крупнейших мировых обсерваторий.


Зачем? Чтобы развернуть независимую, гигантскую базу данных космических снимков, которая будет обрабатываться на лету.


Масштаб задачи, чтобы вы понимали:

• Скачивание напрямую в облачную среду со скоростью более 200 000+ фотографий в час.

• Полноценный анализ и каталогизация сотен миллионов объектов.

• Управление всем этим процессом прямо с обычного планшета, лежа на диване, без задействования локальной памяти устройства.


Все эти тесты скорости на 150 000 000 объектов, которые я показывал — это был стресс-тест фундамента. Подготовка фундамента для того, чтобы система не захлебнулась, когда в неё хлынут терабайты реальных снимков звездных скоплений и галактик.


Я не пытаюсь продать вам софт или соревноваться с корпорациями ради забавы. Я строю рабочий инструмент для глобального проекта, и весь его бэкенд открыт для каждого:

👉 https://github.com/nlozkina19-crypto/vector-zero-compute


Технологическая база готова, тесты пройдены. Дальше начинается самое интересное — запуск сбора данных. Как думаете, взлетит проект такого масштаба на чистом энтузиазме и оптимизации, или космос слишком тяжел для облачных серверов? Пишите, что думаете, теперь вы знаете всю историю.