Новый AllChan

По умолчанию показывается превью поста перед отправкой. То есть ты написал пост, после этого ты попадаешь на экран с превью и только если все ок то подтверждаешь. Ну и с возможностью это отключить, конечно же. В будущем сделаю, чтобы для новых юзеров показывалась краткая подсказка перед созданием первого поста.

Похуй.

А нахуя приложение, если есть dashchan?

>>52801
Как минимум поддержка iOS, как максимум заливка в маркет.

Кажется, в 2020 будет слишком много новых движков.

> Остальные идеи пока раскрывать не буду. Архитектуру раскрывать также не буду, исходники также вряд ли когда-то будут доступны.
Насчёт исходников я, пожалуй, соглашусь, а то много всяких левых со своими взглядами, которые вмешиваются или сохраняют к себе в архив. А с архитектурой: с одной стороны поддерживаю, но с другой – лично мне было сложно разбираться с нуля с, казалось бы, простым приложением без всяких гайдов и прочего, как и чего наворочено. Вики – конечно, класс, но сам принцип работы был непрозрачен (лол, приходилось намеренно бросать ошибки, чтобы смотреть stack trace, кто кого и откуда вызывает).
Рендер на клиенте – API-only, значит. Пуши – значит, ещё и pub/sub. Круто, чё, желаю успехов в этом нелёгком деле!

Алсо, что сподвигло вновь пилить, да ещё и третью по счёту итерацию движка?

>>52806
Архитектуру не хочу раскрывать, чтобы не упрощать жизнь дудосерам. Вкратце это cloudflare, kubernetes, рекапча v3 (для мобилки будет другой механизм), обновления по вебсокету, несколько уровней rate limit-ов.
По апи будет исчерпывающая документация с описаниями ошибок, без исходников не вижу смысла больше что-то раскрывать.
>что сподвигло
Свободное время было. Когда в следующий раз будет — не знаю.

Спасибо.

>>52807
Примерно понял почти ту же архитектуру, к которой шёл три года, лол.
Дерзай, думаю, с текущим опытом будет ещё круче, чем было прошлые два раза.
Оптимизируй только в конце, а не как некоторые...

>>52795
Changelog будет?

>>52815
Думаю детального не будет, это полный rewrite, так что только ключевые моменты.

>>52795
интересная идея

Пешу в епичном требе блеадь

Вебсокеты всё равно не прикроешь бесплатным тарифом cloudflare. Так что хуйня это всё.

>>53275
В случае атаки всегда можно временно отключить часть наиболее уязвимых функций. При этом сайт останется работоспособным. Рано или поздно атака прекратится, и можно будет все включить обратно.

Плюсую разраба, уж дохуя стало школия, которому лишь бы что-нибудь да уронить. Но достаточно сделать цену атаки больше цены защиты, как тут же всё прекращается.

Моё уважение, желаю терпения и усердия, чтоб поскорее разобраться с делами.

>>53278
Спасибо за добрые слова!

Меню поста вызывается долгим нажатием на нем. Пока что в меню только удаление.

Немного о механизме удаления: в приложении хранится ключ, генерируемый при первом запуске, при создании поста он передается на сервер, хешируется и сохраняется, а при удалении опять же отправляется этот код, хеш сравнивается с хешем поста и, если совпадают, то пост/тред удаляется. Короче как обычный пароль, только запоминать не надо, 21 век хуе-мое.

На досках сделал отображение только ОП-поста, т.к. на мобилках классический ОП-пост + 3 последних поста занимают половину экрана.

• Ссылки на посты открывают превью постов, можно переходить от одного превью к другому до бесконечности. Нажатие на прозрачный фон закрыывает последний пост в цепочке, нажатие на пост открывает меню перехода, долго нажатие на фон открывает меню с предложением закрыть всю цепочку превью.
• При переходе в посту, если он в другом треде/доске, открывается соответствующий тред/доска.
• Посты в тредах подгружаются по 50 штук. Если просто открыть тред, то это будут первые 50 постов, если перейти в тред к определенному посту, то подгрузятся 50 постов вокруг него (ну и сам пост, понятное дело).
• При пролистывании вниз/вверх подгружаются следующие (предыдущие) 50 постов.

Голосования по поводу нового аллчана будут тут: >>/rpg/97

>>53485
А можно сделать так, чтобы на мобилках был только ОП-пост, а на компах - " классический ОП-пост + 3 последних поста"? Или хотя бы один последний пост?

Просто очень непривычно это и да, хотелось бы видеть последний контент в треде, не заходя в него и не перебирая каждый тред.

>>53518
Да, это предусмотрено. Более того, я думаю сделать это в API опцией, чтобы можно было произвольное число последних постов запрашивать (в разумных пределах, типа штук до 5 например, чтобы слишком базу не нагружать).

>>53519
А тор-зеркало как у Тумбали будет?

>>53520
Насчет тора не знаю, i2p точно планируется, ну наверное и тор тоже.

>>53521
А вот это хорошая годная новость

анон зоонаблюдающий 35 живых борд в треде переката с Тумбача

заодно тест постюнха с Тора

Подчистил посты.

В этой теме я попрошу не разводить, простите за выражение, оффтоп, т.к. она служит источником информации, F.A.Q., называйте как угодно, по новому аллчану. Если хотите что-то более детально обсудить – проследуйте в /pr/, или хотя бы /s/.

Времени возиться с серунами у меня нет, поэтому те, до кого мысль выше плохо доходит, будут отправлены в бан. Я вас предупредил, потом не нойте о беспределе.

Если есть невыносимое желание что-то конструктивно обсудить, тогда вперед. Агрессивные вскукареки, с помощью которых вы компенсируете ваши собственные злобу и обиды, я читать не буду. Кого не устраивает – бегом дополнять статью на лурке про то какой тут ужасный админ. Скатертью по жопе и добро пожаловать отсюда.

Оптимизировал рендеринг тредов и постов, теперь вроде как не тормозит.

>>53604
Спасибо. Потестить в виртуалке можно хоть, запустится?

Можно увеличить размер файла до 25-30 мб или, чем чёрт не шутит, до тех же 40 мб? HD-вебмки и мп-4 длительностью в пару-тройку минут длительностью не покидать, потому что они часто 25-30 мб и весят.

>>53606
Поскольку я хочу хостить это все не под кроватью, то все упирается тупо в стоимость серверов. Я готов выделять некоторые средства, но не бесконечные. Вемками по 40 метров, если конечно сюда кто-то придет и будет их постить, моментально 100 гб набежит, а там и 200 и так далее. А хочется чтобы хотя бы пара серверов была, и файлы дублировались (на случай падения/дудоса/и т.п.), так что это все умножай на 2.

>>53605
Должно, чего бы ему не запуститься.

>>53607
А по 15 сейчас не набегает? Не думаю, что у аллчана настолько большая посещаемость, чтобы одними только вебмками набить 100 гб даже в месяц.

>>53609
В общем реквест принят к сведению, если будет возможность — сделаю.

>>53606
Жми лучше. Это твои проблемы как создателя/распространителя контента. Двухпроходное кодирование vp9, в самом медленном режиме, по калькулятору битрейта - и все поместится в 15мб.

>>53611
Я попробую vp9, но HD обычно никак не лезет. 25 мб, ну 20-22. 15 - вообще никак, только разрешение снижать, а вебмка после этого как говно выглядит, даже постить такое стыдно.

>>53612
Сколько минут? Для получения 15 мегабайт файла нужно:
1 минута - битрейт видео 1966kbps при битрейте аудио (opus) 80kbps
2 минуты битрейт видео 960kbps при битрейте аудио (opus) 64kbps
3 минуты битрейт видео 626kbps при битрейте аудио (opus) 56kbps

Кодирование производить со следующими настройками: 2-х проходное кодирование с пресетом "VerySlow". На пример, для HandBrake - пикрил.

Либо, создай bat для ffmpeg (его бинарник ffmpeg.exe https://www.gyan.dev/ffmpeg/builds/ffmpeg-release-full.7z скопируй в папку пользователя виндовс и c:\windows\system32):

@Echo off
for %%f in (*.mp4) do (
ffmpeg -y -i "%%~f" -c:v libvpx-vp9 -b:v 626k -r 24 -preset veryslow -pass 1 -an -f webm NUL
ffmpeg -y -i "%%~f" -c:v libvpx-vp9 -b:v 626k -r 24 -preset veryslow -pass 2 -c:a libopus -b:a 54k "%%~nf.webm"
)
PopD
Pause

Этот батник кодирует все найденные mp4 в vp9-webm в той папке куда ты его скопировал и запустил.
Можно скачать готовый и отредактировать блокнотом параметры:
https://files.catbox.moe/i2lla4.bat

Начинаю пилить веб-версию: https://dev.allchan.su/

Пока почти ничего нет, только криво-косо подгружается нулевая. Буду постепенно все прикручивать.

>>53620
Уже можно просматривать доски и треды, ну и файлы конечно же. Интерфейс со временем улучшу, пока задача сделать хоть как-то юзабельно и перенести все.

Сколько сейчас дней проходит до того, как тред с бамплимитом удаляется, если он без постинга? И через сколько будет удаляться на новом аллчане?

>>53632
Не удаляется. Наиболее старые треды с последней страницы переносятся в архив, их вытесняют новые треды. На новом аллчане архива не будет, треды будут неограниченного срока годности.

>>53604
>Свежая версия приложения Android: https://allchan.su/allchan-22f0fad3c4864b3598c692721c9c36f6-signed.apk
Скачал установил, поставил в Орботе (Orbot, Tor-прокси для моб. приложений) галочку, в итоге бесконечно крутящееся колесо на стартовой.

Так как для меня без Тора нет смысла в АИБ (на обычных форумчиках можно и через фэйки что-то обсудить), огорчился.

Перед тем как закрыть, обнаружил что предалгается зарегаться по мылу, а не по нынешнему паролю-хэшпассу. Из любопытства нажал на "Регистрацию", выяснил что нужен инвайт.

Админ, я правильно понимаю, что даже при имеющейся реге я не смогу постить через Тор?

>>53633
>На новом аллчане архива не будет, треды будут неограниченного срока годности.
Ты не разоришься на оплате хостенка?

>>53634
> Так как для меня без Тора нет смысла в АИБ
Смешно же. Ты там чего такого постишь, что так боишься засветить не то, что свой айпи, а даже арендованный сервер?
inb4: провайдер, пок-пок-пок
Для противодействию слежки провайдера используют иные комплексы средств, если что.

>>53636
>тебенечегоскрывать
Без комментариев, извини. Просто посмотри на часы. Там где-нибудь возможно будет цифра 2021.

>тыделаешьэтонетак
Научи как правильно.

>>53634
Рега – для админов/модераторов. Почта – чтобы можно было на нее выслать новый пароль (или код восстановления) в случае утери. Можно указать любую, даже несуществующую почту, это уже на свое усмотрение. Но, еще раз – это только для админов и модераторов.

Про тор будем думать тогда, когда все остальное будет готово (то есть когда приложение и сайт будут работать). Не изучал еще этот вопрос, поэтому не знаю, можно ли вообще технически гонять трафик в приложениях через тор, но подозреваю, что веб-сокеты в таком случае могут не работать, а значит никаких моментальных обновлений. Но могу ошибаться. Придет время – изучу этот момент и смогу ответить на вопросы и начать делать.

К слову, если есть опасения, что твои высказывания о питуне кто-то перехватит: на сервере нет и не будет каких-то долгоживущих логов, а IP пользователя не хранится в базе ни в каком виде. Связать чей-то IP с конкретным сообщением не получится, даже если придти и забрать сервер. Трафик идет только через SSL, что опять же практически исключает перехват.
>>53635
Поэтому я осторожно отношусь к увеличению размера/количества файлов. Если вопрос встанет слишком остро, буду искать решения (колокейшн, например).

>>53638
Через тор сокеты нормально работают (особенно если вдобавок сделать переподключение по событию online и/или по таймауту), а вот через ш2з всегда отваливаются, если туннель был перестроен (время жизни туннеля - до 11 минут).

>>53639
Автоматическое переподключение есть. Тогда странно, что через тор-прокси не работает. Логи бы какие-то (самому пока некогда этим заниматься).

>>53637
Мимо проходил, поэтому не знаю как "правильно". Лично я не вижу смысла именно в tor для домашнего использования - и медленно и лишнее внимание со стороны провайдера и контролирующих органов привлекается. (да, вы, все кто юзает tor - уже давно на карандаше, как подозрительные.)
Поэтому я сижу так: на роутере настроен vpn который "принадлежит" мне, с помощью Layer7 Микротик блокирует всё что только возможно кроме того что мне нужно, вырублены ненужные протоколы, сервера телеметрии, реклама, метрики и т.п. А уже на клиентах - ПК, планшет, телефон - стоят еще свои vpn - платные аккаунты впн-провайдеров, которые принадлежат не мне, а людям из гейропы и сшп, акки которых были взломаны (все это покупалось через tor через предоплаченную карту, купленую за крипту). Аккаунты проплачены на 2-3 года вперед - поэтому часто менять их не приходится.
К сети еще подключен старый ноут, который используется как файлопомойка с Plex-сервером для мультимедиа (с внешними hdd) и ко всему прочему этот ноут постоянно генерирует маскирующий трафик в обход всего напрямую через провайдера (по правилам роутера)- типа захода на одноклассники, вк, ютуб, твиттер, яндекс, и т.п. говно с помощью браузера + noisy + макрос.
Ну и в довершении, интернет у меня специфический - LTE через модем и симку, купленные онлайн (на хз чьи данные), 50-70 мб/с хватает мне на все(с учетом двух впн скорость режется конечно, но не сильно критично), безлимит. Модем перепрошит и генерирует случайные imei, подменяет серийники от разных телефонов и т.п.
А все просто начиналось как метод обхода блокировки сайтов РКН и резка рекламы...

>>53638
> Поэтому я осторожно отношусь к увеличению размера/количества файлов
Почему бы не использовать сторонние места для хранения файлов?
Есть решения типа:
https://github.com/danog/MadelineProto
https://github.com/xtrime-ru/TelegramApiServer
https://github.com/xtrime-ru/TelegramRSS
На всем этом вместе работает https://uploadgram.me/upload/
Ты тоже можешь вообще не хранить файлы на своем сервере, а выгружать их скриптом в аккаунты телеграмма, зареганые на несколько левых симок и скриптом же получать прямые ссылки на них для выдачи на страницу борды/приложения.
Есть похожие решения для хостинга файлов на гуглдрайве и т.п.
Тогда можно вообще снять любые ограничения на размеры и количества файлов, пускай хоть фильмы загружают если хотят.
Если даже не захочешь все это реализовывать, то точно обязательно разреши прикреплять файлы по прямым ссылкам без загрузки на свой сервер для тех кто хочет прикрепить что-то более тяжеловесное типо вебм более 15мб.

>>53642
Со сторонних сервисов файлы могут удалить. Я изначально хотел все это в облако типа gcs заливать, но по этой причине отказался. Я потом более подробно изучу ссылки, спасибо.

>>53645
Могут конечно и удалить если. Но из телеграмма - пока еще не удаляли, особенно при условии, что ты сам аккаунты себе заведешь на симки, к которым будешь иметь доступ. Так же - грузить можно не в личное облако, а в созданные чаты/каналы, а для надежности файлы дублируются между аккаунтами. Поэтому риск потери файлов - стремится к нулю.

>>53638
>на сервере нет и не будет каких-то долгоживущих логов
На новом движке тоже не будет логов?

>IP пользователя не хранится в базе ни в каком виде
А как тогда модерировать? Есть ещё какие-то "уники" вроде.

>Связать чей-то IP с конкретным сообщением не получится, даже если придти и забрать сервер.
Ну, придя и забрав сервер, можно посмотреть ойпи всех постеров. А поскольку их будет ровно 3,5 ну хорошо - 3,5 десятка или даже сотни, допустим - круг подозреваемых резко сузится. Отработать этот список ойпи не представит большого труда.

Если учесть что я придерживаюсь полит. взглядов за которые чекисты убивают без суда и следствия - вопросы осмысленные.

>>53641
>А уже на клиентах - ПК, планшет, телефон - стоят еще свои vpn - платные аккаунты впн-провайдеров, которые принадлежат не мне, а людям из гейропы и сшп, акки которых были взломаны (все это покупалось через tor через предоплаченную карту, купленую за крипту).
Красота какая.

>К сети еще подключен старый ноут, который используется как файлопомойка с Plex-сервером для мультимедиа (с внешними hdd) и ко всему прочему этот ноут постоянно генерирует маскирующий трафик в обход всего напрямую через провайдера (по правилам роутера)- типа захода на одноклассники, вк, ютуб, твиттер, яндекс, и т.п. говно с помощью браузера + noisy + макрос.
ЛЕПОТА!

>Ну и в довершении, интернет у меня специфический - LTE через модем и симку, купленные онлайн (на хз чьи данные), 50-70 мб/с хватает мне на все(с учетом двух впн скорость режется конечно, но не сильно критично), безлимит. Модем перепрошит и генерирует случайные imei, подменяет серийники от разных телефонов и т.п.
Анон моё почтение, вот это я понимаю - основательно подошёл к вопросу.

Буду очень благодарен если распишешь подрочности как всё это можно повторить в России, например в /с/

>>53653
Речь про новый движок, если что, не про тот который сейчас здесь.
IP не будут храниться, баны по IP не предусмотрены. Соображения насчет модерации есть.
Посмотреть список не получится, потому что его не будет. Плюс размещаться сервера физически будут не в этой странн.

>>53655
Мне всё больше нравится твоя доска, админ.

Как тебя называть чтоб тебе не обидно было?

>>53656
Ого, с Дашиной луковой прокси зашло сообщение, раньше не пускало.

Всё лучше и лучше.

>>53656
Поступай по совести, не ошибешься.

Погонял мобильное приложение, в этот тред на мобильной приложухе пост добавился, снимок

>>53674
Отклеился

И на Пораше тред создался (про хохлов)

А вот в БЭ чот не зашёл тред, снимок

Интересно. Потом по логам посмотрю.

>>53686
А, скорее всего лимит на скорость создания тредов сработал. Там должно быть уточнение у этой ошибки, но я забыл его прикрутить. 1 тред раз в 30 минут сейчас.

Поступают жалобы на то, что слово "лoли" в банлисте. Из-за этого невозможно написать в постах слова типа "вкoлoли", "лoлирoвать" и т.п.

>>53723
Слава богу что шотики разрешены)

>>53723
Господи, какие вы необучаемые, как проблемы этой борды относятся к теме треда? Одно время тут завелся какой-то еблан (ну или бот, хз), который постил постоянно цп. Приходилось как-то с ним бороться. Добавление ключевых слов в спам-лист помогло охладить его пыл процентов на 90. Периодически он находит новые хостинги для своего цопе, я их так же методично добавляю в спам-лист.

>>53728
>Господи, какие вы необучаемые, как проблемы этой борды относятся к теме треда?
Во-первых, это единственный тред от тебя и в котором ты отвечаешь, поэтому сюда удобно обращаться. Во-вторых, все проблемы и вопросы, которые не разрешатся здесь, переедут на новый аллчан в нетронутом виде, если об этом не сказать.

>>53729
>это единственный тред от тебя и в котором ты отвечаешь
Неправда, я везде отвечаю, если вопрос адресован админу и не сводится к "привет андрюшач как дела". Ну, ок, в недрах аниме-чатика может и не отвечу, да, но там было бы совсем глупо писать.
>все проблемы и вопросы, которые не разрешатся здесь, переедут на новый аллчан
Не переедут, потому что все переписывается полностью. На новом аллчане, скорее всего, в будущем будет так: админ/модер видит новые посты в отдельном месте, причем посты могут помечаться как потенциальный спам, чтобы было проще ориентироваться, а дальше он уже может их удалить. Возможно, будут некие условия, по которым пост будет считаться безусловным спамом и удаляться автоматически, но это еще очень-очень не скоро, т.к. такой алгоритм должен быть близок к идеальному, чтобы не было ложных срабатываний.

Поддержка картинок формата webp планируется на новом аллчане?

А то я смотрю этот формат всё чаще и чаще в интернете встречается.

>>53764
Подумаю. На маках только с последней версии поддерживается, это не очень хорошо, в остальном проблем не вижу.

>>53765
На яблоблядей похуй

>>53776
На нищебродов красноглазых и подавно.

Давно я тут не был, желаю удачи в развитии, жалко что тумбач умер

Есть какие-нибудь свежие вести о новом аллчане?

>>54085
Было (да и сейчас тоже) много работы, поэтому некогда бордой заниматься. Но вопрос решается.

Поиск (в очень сыром виде) и мелкие (незаметные) правки.
https://allchan.su/allchan-8717efe27e924bf0a3b1b54b53b0621c-signed.apk

Возможность полностью стереть данные (кнопка в настройках). Одно из средств защиты от майора.
https://allchan.su/allchan-8717efe27e924bf0a3b1b54b53b0621c-signed.apk

>В будущем аудио- и видеофайлы будут в порядке очереди конвертироваться в кросс-платформенные форматы и автоматически заменять исходные.
Сделано (с некоторыми улучшениями, а именно исходный файл будет оставаться). Когда будет запилена поддержка на сайте/в приложении, сначала сайт/приложение будут проверять, могут ли они открыть исходный файл, и если нет, будут использовать как резервный вариант сконвертированный универсальный файл.
Сейчас запустил конвертер, погоняю на имеющихся файлах, посмотрю, сколько времени занимает, чтобы понять, какое нужно будет железо. Сейчас генерируется вот такая команда:

ffmpeg -i /app/files/1430808290333.webm -y -acodec aac -b:a 192k -ac 2 -vcodec libx264 -filter:v pad=ceil(iw/2)*2:ceil(ih/2)*2 -crf 19 -preset slow /app/files/1430808290333-converted.mp4

Битрейт и количество каналов аудио берутся из метаданных исходного файла, если они есть, иначе выставляется некоторое значение по умолчанию (192k и 1 канал).
Знатоки, предлагайте свои улучшения. Формат будет именно mp4 h264, это не обсуждается, т.к. только он поддерживается на абсолютном большинстве платформ. У других форматов/кодеков есть проблемы с совместимостью.
Фильтр необходим для файлов с разрешениями, не кратных 2, то есть например 1280x721, т.к. данный формат поддерживает только четные значения разрешения. В случае нечетного разрешения фильтр добавляет полоску в 1 пиксель.

>>54184
А сервера под такие излишества хватит ли? Конвертация - довольно ресурсоёмкая операция, особенно если видео длинное.

>>54186
Смотря сколько постов с видео будет в день. Тестовый запуск как раз покажет производительность. Всегда можно пожертвовать качеством ради скорости, ведь лучше увидеть файл хоть как-то, чем вообще не иметь этой возможности, или скачивать чтобы открыть в стороннем приложении.

>>54187
Итак, за сутки обработано без малого 70% всех файлов (всего их около 15000). Постов всего 57000, значит, в среднем, за сутки обработались файлы для примерно 40000 постов. То есть, если за сутки будет 40000 новых постов, они успеют обработаться.
Это еще очень скромное железо, выделил 1.5 ядра от i3-3220 (3.30GHz). На Каком-нибудь 4-ядерном более-менее современном камушке можно и 100к постов (25к файлов) будет выжать.

Примечание: не все файлы реально конвертируются. Например, картинки пропускаются. Фактически сконвертировалось чуть менее 600 файлов (почти все – видео). Остальные файлы просто помечаются как не требующие конвертации.