Welcome to my personal place for love, peace and happiness 🤖

Later Ctrl + ↑

Небольшие итоги с арендой дисков в storj

Давно уже писал статью о создании ноды https://gavrilov.info/all/node-storj-created/.
Можно подвести некоторый итог. Одну ноду я потерял из за проблем с ssd кэшем для диска asustor.
Поставил две планки ssd m2 по 120гб для кэша, а он видимо не выдержал нагрузки. Где то в марте потерял одну планку, а через неделю другую. Понятное дело raid рассыпался и данные вместе с ним. Восстанавливать данные помогали ребята из https://rlab.ru, все сделали качественно, прочитали диски, скопировали данные. Но так как их очень много, процесс занял неделю примерно и около 60т руб. Папку с арендованными данными было решено похоронить т.к. ее восстановление заняло бы еще недели две, уж очень было много мелких файлов. Такие папки даже копировать очень сложно будет при миграции ноды. Я бы даже сказал практически невозможно.
В итоге одной ноды нет, был вынужден купить еще диск для копирования туда восстановленных данных и запускать вторую ноду сначала. Пришлось еще повозиться с восстановлением старой ноды и переборкой метаданных ее, но это все было зря т.к. ноду старую уже исключили из сети из за долгого отсутствия. За то я теперь умею перебирать биты базы нод, инфы для этого достаточно оказалось в сети.

Сейчас ноды работаю прекрасно, внимания не требуют, хотя раньше бывало отвлекали перегрузки ручные.
Общий занимаемый объем на скринах.

Денег приносят примерно по 10-20$ в месяц.

А последние дни курс storj заметно вырос и общая сумма составила 472$ за весь период.

Это за период 401 день и 9 часов) примерно выходит 1$ в день где-то.
Наполнение дисков еще активно идет, в итоге доход должен расти еще больше. 🤑

 No comments   2023   $$$   Storj

10 книг, которые необходимо прочитать до 30

10 книг, которые необходимо прочитать до 30

— «Маленькая жизнь», Ханья Янагихара
— «Не отпускай меня», Кадзуо Исигуро
— «Задача трех тел», Цысинь Лю
— «Марсианские хроники», Рэй Брэдбери
— «Заводной апельсин», Энтони Бёрджесс
— «На дороге», Джек Керуак
— «Хазарский словарь», Милорад Павич
— «Автостопом по Галактике», Дуглас Адамс
— «Имя розы», Умберто Эко
— «Сто лет одиночества», Габриэль Гарсиа Маркес

Друзья, ставьте 🔥, если хотите вторую часть!

Источник: Литератор

 No comments   2023   Books

Я тебя разлюблю и забуду – Андрей Вознесенский

Я тебя разлюблю и забуду

Я тебя разлюблю и забуду,
когда в пятницу будет среда,
когда вырастут розы повсюду,
голубые, как яйца дрозда

Когда мышь прокричит кукареку.
Когда дом постоит на трубе;
Когда съест колбаса человека
и когда я женюсь на тебе.

— Андрей Вознесенский

Источник: Литератор

 No comments   2023   Books

А это перспективная платформа для анализа – databend

https://databend.rs

Почти убийца snowflake :)

> bendsql --query='INSERT INTO test_books VALUES;' --format=csv --data=@- <books.csv
> bendsql \
    --query='INSERT INTO ontime VALUES;' \
    --format=csv \
    --format-opt="compression=gzip" \
    --format-opt="skip_header=1" \
    --set="presigned_url_disabled=1" \
    --data=@ontime.csv.gz

> bendsql \
    --query='REPLACE INTO sample VALUES;' \
    --format=csv \
    --format-opt="compression=auto" \
    --format-opt="skip_header=0" \
    --format-opt="field_delimiter=," \
    --format-opt="record_delimiter=\n" \
    --data="@sample.csv.xz"
SELECT *  FROM 's3://databend-toronto' 
(
 access_key_id => '<your-access-key-id>', 
 secret_access_key => '<your-secret-access-key>',
 endpoint_url => 'https://databend-toronto.s3.us-east-2.amazonaws.com',
 region => 'us-east-2',
 files => ('books.parquet')
);

Использует Datafusion в качестве движка.

Скачать можно тут: https://databend.rs/doc/deploy/deploying-databend
В платной версии есть расчетные колонки и маскирование данных, в остальном бесплатно.

Полезный фрэймворк datafusion – SQL Engine на базе Arrow

https://arrow.apache.org/datafusion/

$ datafusion-cli
DataFusion CLI v17.0.0
❯ select * from 'data.csv';
+---+---+
| a | b |
+---+---+
| 1 | 2 |
+---+---+
1 row in set. Query took 0.007 seconds.

А можно даже с s3 напрямую читать:

CREATE EXTERNAL TABLE test
STORED AS PARQUET
OPTIONS(
    'access_key_id' '******',
    'secret_access_key' '******',
    'region' 'us-east-2'
)
LOCATION 's3://bucket/path/file.parquet';
 No comments   2023   AI   Video
 No comments   2023   Travel

Ярмарка современного искусства blazar

Парочка интересных мне эпизодов с ярмарки

Крокодил 😎 крутой)
Пакет с птичками, очень реалистичный
Куда без Альфа)
Электронные рамки разобрали все как пирожки

 No comments   2023   art
 No comments   2023   art
Earlier Ctrl + ↓