В целях саморазвития пилю систему по сбору и систематизации контента. Практическая польза проекта стремится к нулю, зато образовательная зашкаливает
Приглашаю всех вкатывальщиков понаблюдать, а уже вкатившихся призываю к codereview
Код: https://github.com/honour2ch/octopus
Архитектура на пике
Однажды моя жопа сгорит от критики и я сделаю репозиторий приватным, но пока милости прошу
1. OrchestratorService хранит в себе все сущности, которыми можно управлять. Скорее всего я откажусь от него, так как был добавлен CommandService
2. CommandService - реализует паттерн команду, для управления разными частями проекта
3. Configurator - хранит в себе настройки различного плана
Вотчеры (watcher) мониторят контент на который настроены: тред на дваче, группу с тг, комменты к какой-нибудь записи и отправляют все в Main receiver, который обрабатывает как надо и складывает в базу. Все очень просто.
Почему бы Command server не заменить сервисной шиной на которую сядут все ватчеры и отказаться от оркестратора, а конфигуратор сделать ещё одним микросервисом который сидит на сервисной шине и настраивает ватчеры? Main Receiver лучше назвать ContentAggregator.
>Практическая польза
Следить за информационными трендами, выделять топики обсуждения и соотносить их с повесточкой, например.
Алсо, я бы взял для такого проекта golang, а для анализа прикрутил ML какой-нибудь и онтологии.
ОП, ахуенная тема, не бросай пилить. Объясни, как только ей пользоваться такому нубу как мне. Как собственно начать работу?
>сервисной шиной
Что-то вроде event bus? Какой это паттерн?
>Следить за информационными трендами, выделять топики обсуждения и соотносить их с повесточкой, например.
Согласен
>>256271866
Думал над этим, но взял то, чем владею лучше всего, чтобы не отвлекаться на чтение документации постоянно
>>256271875
Пока никак. В планах прикрутить интерфейс из которого все будет настраиваться кнопочка и интуитивно-понятными конфигами
Если хочешь вкатиться в разработку, то просто создавай проект на гитхабе и клонируй репу
>Какой это паттерн?
Это не паттёрн.
>Что-то вроде event bus?
Ну сейчас это будет RabbitMQ, наверное, либо другую шину чтобы броадкастить конфигурацию и запуск и остановку.
>Думал над этим
Хороший вариант изучить ГО.
Это исследовательский проект. В первую очередь ради практики. А дальше как пойдет
Он просто складывает данные в базу из разных источников, на этом всё.
Это на тайпскрипте написано что ли? Пиздец.
>Хороший вариант изучить ГО
Вряд ли мне за это заплатят. А вот скилл в ts вполне реально конвертируется в деньги у меня
>>256272264
А что не так?
Дело твоё. На TS лучше магазин очередной написать, толку больше. Для ТС тут только для UI место.
>>256272264
Ещё и под нодой запускается скорее всего.
Я просто пояснил что делается и всё.
>Это не паттёрн.
Нашел, все же это паттерн
>A message broker is an architectural pattern for message validation, transformation, and routing
Да, или запилю свой или буду использовать готовое решение
Хуйню на тайпскрипте не буду читать. Написал бы на нормальном языке - плюсах, джаве, шарпе, PHP на худой конец, а так не
>На TS лучше магазин очередной написать, толку больше. Для ТС тут только для UI место
Аргументы какие-то будут? Вполне нормально подходит для моей задачи, как мне кажется
О, а вот и адепты "нормальных ЯП" подъехали
Что тебе ревьювить, шиз, у тебя репо пустое, и картинка в вакууме.
>репо пустое
А вы точно программист?
OrchestratorService хранит в себе все сущности, которыми можно управлять
Это ServiceLocator что ли у тебя? Это антипаттерн, если что. Хоть одну книжку прочитал или статей нахватался из гугла?
Это так модно щас, и классы и интерфейсы и абстрактные в один файл пихать?
Таблетки пил сегодня, архитектор? Это что за диаграмма вообще? Не похоже на юмл даже. Мог бы в пейнте эту хуйню нарисовать лол даже
>Нашел, все же это паттерн
Сейчас наверное всё стало паттёрном, хех.
>запилю свой
Сразу фейл. Лучше взять готовое.
>>256272418
>Аргументы какие-то будут?
А у тебя аргументы за ТС есть?
>Вполне нормально подходит
Совершенно не подходит. Это всё сторона бэкенда который должен работать побыстрее и понативнее. Хотя сейчас и на ноде пишут всё.
>>256272672
>>256272619
Вот бы аргументы и предложения услышать
Почему у тебя сущность для хранения состояния называется не существительным, шиз? Конфигуратор - он что то конфигурирует, Configuration должен хранить данные. Конфигуратор больше похож на паттерн криатор какой нибудь. Нахуй ты все это сюда принес, зумер?
Ебать долбоеб
Один из них это незнание тобой языка UML 2.0
Окей. вот тебе аргумент, твоё говно будут читать только вронтендеры, которым нахуй твоя архитектура не нужна и которые клепают формочки, так что твой высер - просто пук в воду.
Предложения - потратить хотя бы пару месяцев на курение книг по архитектуре, типа серии architecting от microsoft, курение паттернов, SOLIDов, CQRS,UML и потом сюда свое говно нести, а не то, что ты за час в интернетике прочитал
Сажи зумерку
Ребят научите проектировать
>А у тебя аргументы за ТС есть?
Да: я его знаю лучше чем го
>Совершенно не подходит. Это всё сторона бэкенда который должен работать побыстрее и понативнее. Хотя сейчас и на ноде пишут всё.
Вот только какой бы быстрый код ты не написал, все упрется в скорость передачи данных. Никаких сложных вычислений не планируется делать на этапе сбора контента. Там тупа отправка данных в базу
>>256272791
Эти программисты сломались, несите следующих
>зумерку
Апелляция к возрасту - чеек
Я уже пгсник и так, а вот в АЙТИ только джунобэкендер :(
>- чеек
Ты еще и тиктокер, пиздец
Нет не только. Если что еще сказать?
Можешь примерный план выстраивания знаний по книгам предложить?
Больше сказать нечего. Держи до бамплимита, мб хоть 1 человек и заревьюит
>Видит во всем зумеров и тикток
Мы вам перезвоним
Апелляция к тиктоку - чеек
>Да: я его знаю лучше чем го
Это херовый аргумент.
>Вот только какой бы быстрый код ты не написал
Херня. У тебя проблема будет в базе данных, вот там будет пиздец.
>>256272947
Не охуел ли ты?
Гайдлайны и книги от майкрософта хороши, гугли и читай все подряд, потом любую книгу по UML, сделаешь пару сотен диаграмм, пару сотен учебных проектов, потом поговорим
>>256273138
Мне похуй, я уже на жирненьком месте сижу
>У тебя проблема будет в базе данных, вот там будет пиздец.
Конкретно о каких проблемах ты говоришь?
А разрешил.
Начинай с микрософтских, они толковые.
>Вот только какой бы быстрый код ты не написал, все упрется в скорость передачи данных.
А значит нужен язык с правильным канкаренси, где не будет упора в переключение потоков или карутин. Именно в этом плане GO и хорош.
>я уже на жирненьком месте сижу
Сейчас бы толстым очком гордиться
Ты напиши сначала что-то работающее, а потом приходи с проблемами, обсудим.
Ты можешь просто свою мысль продолжить? Ты начал про проблемы с базой рассказывать, но не закончил, друг
>плюсах
Когда решаешь не задачу, а пердолишься.
>PHP на худой конец
Слишком худой конец.
>оп придумал "проект" и делает - его хуесосят
Тебе надо пройти через это самому или ты ничему не научишься.
Так жидко слиться уметь надо, лол. Ты это, в следующий раз просто промолчи лучше
Видно, что пост написал додик, который о ЯП шарит по мемам
Его никто не хуесосил. Он спросил совет по архитектуре, ему его дали. Если ему не нравится что-то, он не делает.
Это бессильная злоба неосиляторов. Аргументы максимум нерелейтед, кроме нескольких постов
Дегенерат.
1) У фронтенд проектов тоже есть своя архитектура, при проебе которой фронт придется переписывать нахуй, ибо каждое изменение будет требовать в 2-3 раза больше времени.
2) Бэк тоже очень успешно и достаточно часто пишется на тайпскрипте.
Как же у бэкеров в башке насрано, пиздец. Никогда не слышал таких предьяв в сторону бэкеров со стороны фронтов, при том, что сложность выполняемой работы примерно равна и варьируется от задачи к задаче, фронт может быть и гораздо крудошлепства
фулстек
Ну ладно, сучка. Я в следующий раз тебе ничего подсказывать не будут и решать проблемы с базами ты будешь сам.
>ему его дали
>пук-среньк ну ты эта язык не тот выбрал и не то наделал вообще там работать не будет переписывай на пхп
Так ОП - хуйло тупое, которое пришло сюда хвастаться "знаниями". Накинул несколько терминов на английском и решил, что готов выёбываться перед двачерами.
Ты и так ничего не подсказал, лол. Все взаимодействие с базой - это суть биндинги сишных библиотек. Какие ты там проблемы увидел?
Увидишь всё сам когда напишешь что-то рабочее.
> Что-то сложнее рулетки или фап-треда = выёбываться
Ебать дебил, нахуй ты сюда пишешь тогда?
мимо
Как же ты горишь, лол)
Ебать фронтомакаку порвало
>1)
Двачну.
>2)
Только когда неосиляторы называют себя фулстаками. Нода это тестсервачок написать фронтенду, а не прод строить.
Курсив внизу поста читать умеешь, крудошлепина?
>что-то сложнее
ОП-хуй, не семени. Охуеть сложность, накопипастить несколько листенеров и рассовать их по контейнерам.
> а не прод строить
Еще один адепт "правильных технологий"
Сглотни кончи хуйло безрукое, фул ты только по собственному мнению, естественно ошибочное.
>нода
>сервачок
Чего?
Это и есть суть твоего недовольства?
Так если это не сложно, то где в ОПе хвастовство и т.д.?
> не семени
У тебя проблемы, чел. Гет хелп
> Нода это тестсервачок написать фронтенду, а не прод строить.
Именно по этому существуют мощные жс фреймворки типа nest.js, ага
Жавамакак не смог аргументировать свое мнение и перешел на оскорбления, спешите видеть
Да не, он прав. Только в фронте решаются задачи как часто подгружать, что кэшировать, как отображать, что подключать чтобы размер js был не 200мб. Там много заморочек, а вот квалификация программистов невелика зачастую.
И в чём он не прав?
Это в контексте того, что никто долго не заходит. У тебя рил проблемы, если не можешь сарказм
Сейчас бы бисер перед свиньями метать.
Нода это игрушечная технология. На неё можно что-то накидать, но для серьёзных нагрузок она не годиться и с интеропабилити у неё херово.
Микроскоп это игрушечная технология: ни гвоздь не забить, ни ямы выкопать. Он просто не предназначен для такой нагрузки
Риторика та же. Ты знаешь суть моей претензии, поэтому явно читал ветку, но почему-то "не отвечал". Но сейчас ответил с галкой. Неприятно, когда семенство разоблачают?
Как же тебе больно, лол
Это всё весело пока ты сам не начинаешь платить за ноду, а работаешь наймитом который предлагает сделать на ноде.
Насколько мощные? Как на питоне мощные?
Чел, хватит абстрактных фраз. Давай ты просто назовешь узкое место в приложении и расскажешь почему другой ЯП его решит лучше чем TS
Ты бы хоть точки в конце предложений начал ставить. Палишься.
Ну как минимум это интерпретатор JS.
Кажется, как будто предложение не законченно. Что интерпретатор JS? Узкое место? А в чем оно заключается?
Ты не очень умный, да? Не знаешь чем программа на TS хуже того же Go?
Похоже, ты тоже этого не знаешь, лол
что тут сложного? у тебя там 0 кода, каталоги пустые. например, тесты. где? ну понятно, что их нет, потому что кода нет. но нахрена тпустой каталог? к чему тред, объясни. вот тут реально сложно, не понимаю
Зато ты это скоро узнаешь чсвшный ты мудачёк.
Оп! Подловил!
>>256272092
Ну хз даже. Архитектура говно, сделай на обсервере и обработку на ecs.
Код не смотрел, нихуя не понимаю в чужом коде.
>чсвшный ты мудачёк
Ор
>ecs
А это нахуя?
Просто берешь поднимаешь генсервер и агентами хуяришь задачи на граб контента в параллели.
Вся задача - 1 модуль сервера + Х модулей агента + обвязка на дб.
Элексиро-господин
Рабочего кода нет, какой-то скелет для программы. Жизнеспособна архитектура или нет только практика покажет, пиши свои вотчеры, подключай базу данных, запускай всё это, потом уже оценивай.
>Зачем для этой задачи вообще архитектура?
Его задача как раз в разработке архитектуры и её реализации, а не конечный продукт.
Хз, узнал недавно о ECS, DOD и сую евойно во все дыры. Неплох выходит тащемта. Если есть данные для обработки, лол, а так конечно хуево выходит.
Ну да, в этом и суть процесса разработки, лол
>Просто берешь поднимаешь генсервер и агентами хуяришь задачи на граб контента в параллели.
>Элексиро-господин
Так ты уже работаешь в архитектуре. В других яызыках приходится выебываться.
поаткрывай эти папочки. половина пустая. в остальной половите - полтора файлика с кодом на 10-100 строчек, где всё к тому же вперемешку (интерфейсы, классы и тд). ты так и не ответил, к чему это?
>к чему это?
В ОП посте написал
Тупой ОП ГО не сможет осилить, а ты его пытаешься элексиром подгрузить. Он же даже запустить ничего не сможет.
что ты написал? "давайте делать!" и какую-то квазиблок-схему. что делать?! почему readme не заполненен? где тэмплэйты пуллреквестов? как оформлять? где список задач? где нормальная блок-схема хотя бы? где список инструментов? я реально тебя не понимаю, что вообще ты хочешь
> а так конечно хуево выходит.
Хотя ладно, не так уж и хуево выходит. Можно сказать выходит лучше, хотя и не без проблем. Проблемы решил обсервером.
Ты все еще здесь, шиз? Ты же знал, что спор о том какой ЯП лучше-хуже - это маркер специалиста низкого уровня?
>я реально тебя не понимаю
Но ведь ты все понял, лол. Даже перечислил чего не хватает
Специалист высокого уровня выбирает язык под задачу, а не задачу под язык.
В данном случае тайпскрипт просто нахуй не нужен и даже вреден.
>В данном случае тайпскрипт просто нахуй не нужен и даже вреден.
Просто напоминаю, что ни одного аргумента по делу от тебя так и не было, лол
Я больше тебе скажу, тот хер, эдиксироёб, прав, элексир подошёл бы тут лучше всего.
тупица. вот я такой хочу присоединиться к опенсорсу. и что мне далть? ты реально тормоз?!
Так ты тоже ни одно аргумента за ТС не привёл, лол
Так что ты хочешь, чтобы за тебя кто-то весь код написал и репу оформил?
Лучше всего подходит тот инструмент, которым ты владеешь. На элексире, не зная подводных, я напишу еще хуже
>>256275805
Во-первых: не гореть с хуйни. Нет ничего хуже, чем работать над чем-то вместе с такими токсами
>>256275808
Основной аргумент - это то, что я владею этим инструментом
>>256275841
Я хотел сказать, что ты и так все правильно понял. Нет, я не хочу чтобы ты за меня мою работу делал. Если я хотел этого, то так и написал бы
боже, какой же ты дегенерат, я хереею. ничего удивительного, это же /b
Njrc? cgjr
>Во-первых: не гореть с хуйни. Нет ничего хуже, чем работать над чем-то вместе с такими токсами
ты не видишь что тебе пишут. вернее, не понимаешь. это какая-то форма аутизма, или вообще слабоумие. вот что я пытался за эти три сообщения у тебя выяснить, по-твоему?
Ты - тот додик, который с ГО все носится тут? Если нет, то покажи свои сообщения, разберем по фактам
нет я про ГО вообще не писал. он ничем ни хуже ни лучше Элексира (о котором упоминалось, но не мною) ни другой технологии. вообще пофиг на чём. в другом дело: в том, что для человека, который хочет присоединиться к разработке вообще ноль информации. у тебя не оформлен репозиторий ВОООБЩЕ никак. куда ты зазываешгь? к чему это всё?
Так я вроде услышал тебя, даже согласился. Лучше расскажи, как после правильного оформления проекта избежать таких токсичных анонов, как ты
@netstalking3
Это не архитектура, а хуй на блюде. Еще и тайпскрипт блять ааааа
Аргументы есть?
Ты пидор
>как после правильного оформления проекта избежать таких токсичных анонов, как ты
повисить свой уровень образования, очевидно. тогда люди поумнее не будут злиться на идиота, который натирается к ним в компашку
Вот это чсв)) Люди поумнее не горят с такой ерунды
>Вотчеры (watcher) мониторят контент на который настроены: тред на дваче, группу с тг, комменты к какой-нибудь записи и отправляют все в Main receiver, который обрабатывает как надо и складывает в базу. Все очень просто.
Непонятно нахера нужны все эти OrchestratorService и CommandService. Какой-то энтерпрайз головного мозга.
А как управлять вотчерами?
Ху вотч вотчерс?
Что-то типа воркера, который смотрит туда, куда я ему покажу и следит за обновлением. Как только дождался его, бежит класть его в main reciever, который нужныб образом кладет в базу. Вообще, я согласен, это не нужно и намного проще просто перезапустить его с новыми параметрами, чем что-то там на лету конфигурировать