bessonnica.org

Marych

Tue, 08 Sep 2020 01:14:00 +0300 last edited: Tue, 08 Sep 2020 19:59:00 +0300

Click to open/close

Это таки случилось. Я шлепнул базу хаба. Последний бекап за 25 августа. Залил этот бекап, за это время появилось несколько новых учеток\каналов, в каталоге они остались (я думал каталог тоже из базы берёт инфу, нет?) по факту их нет. Волосы рвать смысла нет, всё равно не вернуть, но как теперь подчистить следы этого песеца и начать с "чистого листа", с учетом того, что бекапа файлов за 25 августа как раз нет :-\

show all 28 comments

Tue, 08 Sep 2020 01:15:27 +0300

Забить и не париться.

Marych

Tue, 08 Sep 2020 01:19:17 +0300

@Max Kostikov но откуда берётся инфа в "каталоге"? Вся база старая, а в каталоге несуществующие учетки, напрягает. И что будет если создадут канал с тем же именем (и смогут ли это сделать) и не повлечет ли это ещё большего звездеца?

Tue, 08 Sep 2020 01:22:52 +0300

@Marych Есть специальные серверы каталога, насколько я помню (эту роль может взять на себя любая Hubzilla). Нет, никак не повлияет, потому что все ключи хранятся на сервере, где регистрируется канал (и на серверах, где есть его клоны). То есть будет одноимённый канал но который будет определяться как совершенно другой, новый, в части его прав доступа, контактов и т.п.

Marych

Tue, 08 Sep 2020 01:37:59 +0300

@Max Kostikov Совет я понял, но этот "не порядок" покоя теперь не даёт, плюс заметил странность в файлах, пропало слово "фотографии" в альбомах "фотографии обложки" и "фотографии профиля". Причем только у тех, у кого выбран русский язык. Как итог эти альбомы не открываются ( ручками только если дописать название).
Огромное желание клонировать канал и поднять всё с нуля, без поддомена. Давно хотел избавиться от hub на bessonnica, а тут такой случай. Останавливает только то, что я тут не один. Есть тут встроенная оповещалка всех сразу, что мол внимание граждане, сматывайте удочки, через n-времени капут?

Tue, 08 Sep 2020 01:57:30 +0300 last edited: Tue, 08 Sep 2020 01:59:15 +0300

@Marych Ну я не скажу что и как лучше. Легко домен сменить не получится, это точно.
Оповещалки, как таковой, нет. Я для этих целей всех автоматически при регистрации подписываю на основной канал хаба который создан как форум, так что все в потоке это имеют возможность увидеть так или иначе, и получить об этом оповещение по электронной почте.

UPD. Посмотрите на @Hubzilla Support Forum кстати, там как-то Майк объяснял как сменить домен с минимальными потерями, если не ошибаюсь.

Marych

Tue, 08 Sep 2020 02:03:42 +0300

@Max Kostikov да, я понимаю, что просто так не поменять. План был такой - клонировать канал куда-нибудь, сделать основным, поднять с нуля без субдомена, клонировать туда, сделать основным. По идее так должно получиться, если я ничего не упустил. Основная сложность дать время собрать манатки всем остальным. Раз оповещалки нет, то пожалуй просто сделаю рассылку, почтовые ящики то известны. Спасибо ещё раз, завтра всё обдумаю, сегодня руки уже опускаются, очень меня инцидент расстроил, говорила мне бабушка, не надо лезть в первом часу ночи в бд с не понятными целями.

Tue, 08 Sep 2020 02:10:02 +0300

@Marych

План был такой - клонировать канал куда-нибудь, сделать основным, поднять с нуля без субдомена, клонировать туда, сделать основным

Да, вроде бы, так должно сработать. Главное чтобы весь контент перенёсся. Но его, если что, можно через импорт-экспорт кусками подгрузить.

говорила мне бабушка, не надо лезть в первом часу ночи в бд с не понятными целями.

Ну да, как-то так. Или не коммить в репозиторий перед сном - есть хороший шанс до утра не уснуть

Marych

Tue, 08 Sep 2020 12:16:38 +0300

@Max Kostikov Нашел оповещалку, hubwall называется расширение. А вот с импортом плагином дела пока не очень, посты перенеслись, а фото почему-то частично, в некоторых постах наполовину, в некоторых вообще не перенеслись. Клонирование, которое пробовал до возни с плагином, сработало ещё хуже.

Tue, 08 Sep 2020 12:20:23 +0300 last edited: Tue, 08 Sep 2020 12:22:15 +0300

@Marych Там может быть проблема с таймаутом выполнения PHP на больших объёмах.
Синхронизация при клонировании делается только за ограниченный интервал предыдущих данных. По-моему, календари и записные книжки DAV не поддерживаются (проверьте, кстати).
В этой связи, конечно, полезно клонироваться сразу при создании канала.

Marych

Tue, 08 Sep 2020 12:56:11 +0300

@Max Kostikov у меня пустой календарь, не пользуюсь. Фото не критично, главное переносит, а фотки руками поправлю, не так много. Единственное, что напрягает - при создании каталога в "файлах", в названии которого более одного слова, отбрасываются все слова кроме последнего. Т.е. создаём "тестовый каталог", получаем (пробел)каталог. Зайти только введя в адресной строке правильное название, удалить никак. Думал, что где-то намудрил, но на свежей, пустой инсталяции абсолютно тоже самое. В логах ругается на

Click to open/close

count(): Parameter must be an array or an object that implements Countable in /www/bessonnica.org/include/acl_selectors.php on line 77" while reading response header from upstream, server: bessonnica.org, request: "GET /filestorage/marych/undefined/edit?_=1599558157087 HTTP/2.0"

Tue, 08 Sep 2020 13:01:29 +0300

@Marych

Т.е. создаём "тестовый каталог", получаем (пробел)каталог.

Видимо, баг. Откройте issue.
https://framagit.org/hubzilla/core/-/issues

Marych

Tue, 08 Sep 2020 13:03:25 +0300

@Max Kostikov но на других инстантах, на вашем например, нормально же всё. Думал проблема у меня.

Tue, 08 Sep 2020 13:07:04 +0300

@Marych Ну у меня девелоперская версия примерно полугодовой давности с исключительно моими последующими изменениями (они уже включены в основную ветку). Возможно уже и исправили. Или вообще это связано не с кодом Hubzilla, а чем то ещё.

searoso

Tue, 08 Sep 2020 13:28:06 +0300

Ипа-ать. Я когда создавал учётку, то долго так медитировал глядя на каталог Федявёрса: Дача или Бессоница -- что мне нравится больше. По параметрам всех остальных отсеял, а дальше оставалось гадать.

Правда, понимая, что вся эта роскошь иждивением вполне конкретных людей держится, то сразу же сделал два клона на больших серверах. =)

searoso

Tue, 08 Sep 2020 13:30:29 +0300

@Max Kostikov
А эспорт/импорт через файл переносит весь канал целиком? Я для себя сделал вывод, что клоны мне нужны на случай эксцесса (бах, и сервер исчез), а мигрировать лучше через выгрузку.

Или есть какие-то особенности?

Tue, 08 Sep 2020 13:39:52 +0300

@searoso

А эспорт/импорт через файл переносит весь канал целиком?

Да, должен. Но я ни разу не пользовался и не смотрел подробно код.
Пробуйте, пользуйтесь. Если что-то не так - открывайте issue.

Marych

Tue, 08 Sep 2020 13:53:59 +0300

@searoso ну, "бах и сервер исчез" не будет никогда, это кидалово, я сделаю оповещение, месяц дам на перенос, потом оставлю в выключенном состоянии и если объявятся "сони", то включу и можно будет всё забрать. Но данные за последние несколько дней в итоге похерились, это да, бекап нашелся за 3 сентября только:( Вообще сомневаюсь, что много кто бекапит каждый день, жирная она очень.

Когда включал хаб, то не особо задумывался над именем, ставил на "посмотреть", а хабзилла прижилась и я давно подумывал над переносом на основной домен и перенёс бы всех, не жалко, но это реально какой-то гемор, проще дать людям забрать\склонироваться и поднять с нуля.

В readme или хелпе или ещё где-то (перемешалось в голове всё уже) сегодня читал, что выгрузку могут осложнить включенные "чужие" протоколы. У меня перенеслись все настройки, тексты, лайки, комментарии, но затык возник с картинками, ~50% не сохранились. И файлы не переносятся.

searoso

Tue, 08 Sep 2020 13:59:52 +0300

@Max Kostikov

Пробуйте, пользуйтесь. Если что-то не так - открывайте issue.

Я так и делаю. Но вы же понимаете, что достаточно одного значительного ~~проёба~~ факапа чтобы многие пользователи, которые могли бы перейти, побоялись.

searoso

Tue, 08 Sep 2020 14:02:49 +0300

@Marych

"бах и сервер исчез" не будет никогда, это кидалово

Боже упаси вас обвинять в таком. Просто не над всем вы властны, а я не знаю подробности частной жизни своих администраторов. Пришли люди в масках, забрали технику, и никаких тебе оповещений; или пожар с наводнением, итд.

searoso

Tue, 08 Sep 2020 14:05:07 +0300

@Marych

проще дать людям забрать\склонироваться и поднять с нуля

кстати, вопрос: не хочет ли кто-то написать скрипт, который просто выгрузит все учётки =)
или такое технически невозможно без знания пароля пользователя? @Max Kostikov

Marych

Tue, 08 Sep 2020 14:11:04 +0300

@searoso при огромном желании, отсутствие пароля пользователя не должно быть проблемой. Первое что приходит в голову - почту пользователя можно спокойно заменить на что угодно и сбросить пароль, да и при восстановлении оного хабзилла новый пароль отсылает на почту обычным текстом. Собственно из-за таких вот лазеек решил, что чужим пользоваться не буду. А вот "законными" способами не знаю, не думаю, что реально.

Marych

Tue, 08 Sep 2020 14:12:08 +0300

@searoso у меня сервер в кладовке дома, при пожаре хабзилла будет волновать в последнюю очередь xD А вот бекапы хранятся у contabo и hetzner, если сдохнут оба сразу, то ой.

Tue, 08 Sep 2020 14:29:11 +0300

@searoso

кстати, вопрос: не хочет ли кто-то написать скрипт, который просто выгрузит все учётки =)

Выгрузить можно. И загрузить. Только при смене имени хоста удалённые сервера будут нафиг посылать из-за привязки цифровых подписей.
Ну и все связи пользователей будут утеряны, соответственно.

searoso

Tue, 08 Sep 2020 15:44:11 +0300

@Marych

из-за таких вот лазеек решил, что чужим пользоваться не буду

так один хрен, всё что тут пишешь расходится сразу на десятки хабов; и за их безопасностью и приватностью уже не уследишь
только если хочешь высокую анонимность и никто не знал откуда ты подключаешься, когда, и привязанную почту

по мне большое количество хабов и личные серверы больше важны для самой топологии; как я понял устройство Хабзиллы серверу начинает быть не очень хорошо когда там много учёток скапливается

searoso

Tue, 08 Sep 2020 15:46:11 +0300

@Max Kostikov

Только при смене имени хоста удалённые сервера будут нафиг посылать из-за привязки цифровых подписей.
Ну и все связи пользователей будут утеряны, соответственно.

Так я имел в виду не базу дампить, а честный экспорт каждого канала.

Tue, 08 Sep 2020 15:52:26 +0300

@searoso

Хабзиллы серверу начинает быть не очень хорошо когда там много учёток скапливается

Тут вопрос не в их количестве как таковом, а в росте нагрузки с увеличением пользователей чуть ли не в логарифмической прогрессии. Причиной тому, если говорить в общем, сама децентрализованная модель.
Оптимизация структуры базы и самого кода (а тут есть над чем поработать) эту проблему радикально не решают. Причём это справедливо для любой части Fediverse.

Tue, 08 Sep 2020 15:54:00 +0300

@searoso

Так я имел в виду не базу дампить, а честный экспорт каждого канала.

Такого варианта в обход аутентификации в интерфейсе не предусмотрено, хотя мало что мешает его реализовать.

Marych

Tue, 08 Sep 2020 15:54:45 +0300

@searoso в теории есть ещё "личные" записи, файлы опять же могут быть и т.д. А так да, расходится конечно.
не очень хорошо начинает быть из-за базы, даже на моём, крохотном инстанте с несколькими активными юзерами она огромная, не у каждого на сервере куча памяти.