---
tags:
- 'NDE'
---

# Стек и сервисы

## Cтек

Предполагаемый стек приложения

- Python 3.10
- Sentry
- Pydantic
- Dramatiq
- RabbitMQ Broker
- Postgres
- SqlAlchemy
- Alembic
- Redis

Упаковка

- Docker

## Сервисы

### Сбор контента

Прошли отбор, выбраны для старта

- __Newscatcher__
- Выбран для **старта** работы, позволяет сразу получать полные тексты статей
- [[Newscatcherapi.com]]

### Публикация материалов

Документация к API блога (CMS Ghost)

- <https://ghost.org/docs/admin-api/>
- <https://ghost.org/docs/admin-api/javascript/>

### Работа с CAPTCHA

- AntiCaptcha <https://anti-captcha.com> `API`

### Работа с текстом

#### NLP Cloud : Определение веса, ключевых слов

- Сервис нейросети : парафразинг, суммаризация текста, классификация, выделение ключевых слов
- <https://nlpcloud.com/#plans> `API`
- <https://github.com/nlpcloud/nlpcloud-python>
- <https://nlpcloud.com/nlp-text-summarization-api.html>
- <https://nlpcloud.com/nlp-paraphrasing-gpt-j-api.html>
- <https://docs.nlpcloud.com/#keywords-and-keyphrases-extraction>
- <https://docs.nlpcloud.com/#classification>

#### WordAI

- Синонимизация и уникализация контента

## Библиотеки

### Работа с изображениями

- Scikit <https://scikit-image.org/> `Python`
- <https://github.com/scikit-image/skimage-demos/blob/main/dither.py>
- <https://scipython.com/blog/floyd-steinberg-dithering/>

### Работа с HTML

- Newspaper <https://github.com/codelucas/newspaper> `Python` `12k Stars`
- Beautiful Soup 4

## Ghost

Шаблоны для блогов, с которыми будет работать система

- <https://github.com/TryGhost/Headline>
- <https://github.com/TryGhost/Casper>