Yuriy Gavrilov: posts tagged Storj

Storj купил cunoFS

Sat, 12 Oct 2024 15:56:14 +0300

Getting started with cunoFS#
cunoFS is a scalable, high-performance POSIX compatibility layer that lets you interact with files stored on object storage such as Amazon S3, Azure Blob Storage, Google Cloud Storage, or any S3-compatible object store hosted in the cloud or locally.

Интересно, теперь наверное встроить в себя или новое что то придумает.

Небольшие итоги с арендой дисков в storj

Fri, 10 Nov 2023 11:26:02 +0300

Давно уже писал статью о создании ноды https://gavrilov.info/all/node-storj-created/.
Можно подвести некоторый итог. Одну ноду я потерял из за проблем с ssd кэшем для диска asustor.
Поставил две планки ssd m2 по 120гб для кэша, а он видимо не выдержал нагрузки. Где то в марте потерял одну планку, а через неделю другую. Понятное дело raid рассыпался и данные вместе с ним. Восстанавливать данные помогали ребята из https://rlab.ru, все сделали качественно, прочитали диски, скопировали данные. Но так как их очень много, процесс занял неделю примерно и около 60т руб. Папку с арендованными данными было решено похоронить т.к. ее восстановление заняло бы еще недели две, уж очень было много мелких файлов. Такие папки даже копировать очень сложно будет при миграции ноды. Я бы даже сказал практически невозможно.
В итоге одной ноды нет, был вынужден купить еще диск для копирования туда восстановленных данных и запускать вторую ноду сначала. Пришлось еще повозиться с восстановлением старой ноды и переборкой метаданных ее, но это все было зря т.к. ноду старую уже исключили из сети из за долгого отсутствия. За то я теперь умею перебирать биты базы нод, инфы для этого достаточно оказалось в сети.

Сейчас ноды работаю прекрасно, внимания не требуют, хотя раньше бывало отвлекали перегрузки ручные.
Общий занимаемый объем на скринах.

Денег приносят примерно по 10-20$ в месяц.

А последние дни курс storj заметно вырос и общая сумма составила 472$ за весь период.

Это за период 401 день и 9 часов) примерно выходит 1$ в день где-то.
Наполнение дисков еще активно идет, в итоге доход должен расти еще больше. 🤑

Статичный хостинг сайтов по протоколу s3 от Storj

Tue, 19 Jul 2022 19:15:03 +0300

Иногда достаточно простой страницы, которую мы хотим опубликовать в интернет. Хостингов много разных, а хочется не только страницу сделать, но и выложить там фотки например гигов на 150 с последнего отпуска. Конечно можно купить хостинг Яндекс диск или еще Гугл и шарить папки, но кто ищет легких путей)) не я точно.

Ниже я расскажу как создать хостинг статичных страничек на протоколе s3 от Storj

Вот коротко, что требуется:

Аккаунт
Папку
Uplink
Домен и DNS

А теперь подробнее:

Заводим аккаунт на https://www.storj.io – тут просто, выбираем регион из трех Европа, Азия или США. Сразу скажу, что логины отличаются в разных регионах и стоит запомнить в каком регионе вы регистрируетесь.

После регистрации заходим в раздел Bucket и создаем новый с любым названием. Например, “site”. Имейте ввиду, что регистр важен и лучше использовать маленькие буквы. При создании бакета потребуется придумать пароль. ВАЖНО! Если его забыть то ничего восстановить не получится. Так что придумываем надежный пароль и помним его сильно))). Можно, кстати не придумывать и положиться на систему и она сгенерирует автоматически ключевую фразу в несколько слов. Выучить предложение наизусть в этом случае будет сложно, да и печатать долго. Ладно будем считать пакет создан.

На этом этапе нужен uplink. Скачать его можно тут: https://docs.storj.io/dcs/downloads/download-uplink-cli/

Далее настраиваем доступы API вводим команду:

uplink setup

Но погодите, у нас же нет еще ключей! А их мы должны взять в личном кабинете и предварительно сгенерировать. При генерации ключей можно давать полный доступ. Эти ключи не будут использоваться публично. Они нужны для работы Uplink, который запускается локально на вашем ПК.

Что бы сделать ключ заходим в аккаунт storj, меню Access и наживаем “Create Keys for CLI”. Там выбираем API и полные права. После генерации система выдаст две строки: ‘satellite address as “< nodeid>@

:” и API Key’. Запоминаем их и возвращаемся к Uplink. Он попросит сначала выбрать регион. Далее указать строку сателлиты, а за тем API Key. А в самом конце попросит ключ фразу от папки (бакета). На последнем этапе лучше не ошибаться, так как сообщений об ошибке не будет потому как это пароль шифрования, а не доступа. Если пароль будет другим, то вы не увидите там файлов. В общем не ошибаемся на этом этапе и аккуратно вводим пароль. Еще дополню, что можно запутаться с паролями и папками и правами для простоты можете создать один общий пароль или создавать для каждой папки свой пароль и свои API ключи. В прочем делайте, как вам нравится.

и так Uplink работает. А если нет то вот инструкция: https://docs.storj.io/dcs/api-reference/uplink-cli/setup-command/

Генерируем общий доступ для нашей папки site. Для этого нужно выполнить команду:

uplink share --dns www.example.com sj://bucket/prefix

В итоге uplink выдаст настройки DNS, которые мы указываем у своего провайдера.

$ORIGIN example.com.
$TTL    3600
www.example.com    INCNAMElink.storjshare.io.
txt-www.example.comINTXT  storj-root:bucket/prefix
txt-www.example.comINTXT  storj-access:jqaz8xihdea93jfbaks8324jrhq1

Все! Кладем в папку site index.html и радуемся.

Создал ноду storj

Sat, 12 Feb 2022 23:45:23 +0300

Привет всем желающих запускать ноды! Пару лет назад я уже создавал ноду storj, но тогда возникли некоторые трудности и я забросил это дело. Конечно запустить мне её удалось тогда, но проверить насколько она хорошо работает, и работает ли вообще, было затруднительно. Причина была в том, что низкая активность пользователей генерировала малый трафик, понять работает ли нода было сложно. За сутки тогда было использовано всего пару десятков мегабайт. Недавно, у меня снова возникли мысли создать ноду, да и проект достаточно развился, много куда интегрировался. Например, есть поддержка в Filezilla, а еще недавно узнал, что сервис storj используется для хранения NFT, а их я тоже люблю, как и не меньше разных нод.

Сейчас нода в аптайме уже почти 200 часов, полет нормальный. Уже принесла 17 центов :) Счастье 😁

Почитать про сервисы можно тут: https://www.storj.io

Как создать ноду?

Я буду описывать мой случай, но возможны и некоторые ответвления.
Что нужно для ноды: ПК, диск и сеть. и эти ссылки

Я использовал Rockpro64 NAS https://pine64.com/product/rockpro64-metal-desktop-nas-casing/
и два диска объединенные в Straped RAID. В сумме получилось 19TB, но на картинках видно 15 – это потому, что я оставил 4 для нужд сети. Так рекомендует проект, но не обязательно так много 10-15% достаточно.

Тут есть статья в целом как создать ноду. использовал ее частично. https://gateway-it.com/become-a-storj-node-operator-step-by-step-tutorial/

Для создания Raid мне пригодилась статья: https://www.digitalocean.com/community/tutorials/how-to-create-raid-arrays-with-mdadm-on-ubuntu-18-04

Что бы победить проблему охлаждения и включить вентилятор полезной была эта статья: https://forum.armbian.com/topic/12936-how-to-control-fan-on-rockpro64/

Эта пригодилась для просмотра логов докера, когда сразу не завелся контейнер и были выявлены проблемы сети. https://docs.docker.com/config/containers/logging/

По конфигурации сети на роутере использовал эту статью: https://treolink.ru/probros-portov-na-routere-mikrotik/

Эту просто полистал, так как там используется тоже оборудование, что и в моём случае https://forum.storj.io/t/rockpro64-as-storage-node-questions/8763

У меня еще настроена сетевая папка и для этого использовал эту статью: https://help.ubuntu.com/community/How%20to%20Create%20a%20Network%20Share%20Via%20Samba%20Via%20CLI%20(Command-line%20interface/Linux%20Terminal)%20-%20Uncomplicated,%20Simple%20and%20Brief%20Way!

А здесь можно найти калькулятор расчетов дохода. https://forum.storj.io/t/earnings-calculator-update-2022-01-13-v11-0-0-detailed-earnings-info-and-health-status-of-your-node-including-vetting-progress/1794

Как включить ssh – если нужно конечно: https://linuxize.com/post/how-to-enable-ssh-on-ubuntu-18-04/

В целом этих статей достаточно для настройки. Может позже, что-то уточню. А пока желаю хороших доходов :))), но ждать их быстро и просто не рекомендую.

Из проблем:

Raid0 заглючил и отвалился, нода простояла день, рейтинг упал до 87%
Raid0 после перезагрузки работает в режиме “только чтение” – как-то решилось само

tail -f cat /var/log/syslog

Всем хорошего сислога))