Сегодня Node.js и пишем простой парсер этого форума в разделе "Новые сообщения", заголовки сообщений отправляем в telegram-bot.
Окружение:
- Какой то ноутбук на Windows 11 с WSL Ubuntu 20.04
- Node.js 18.15.0
- 2 банки пива по 0,5л
1. Подключаем необходимые модули:
JavaScript:
const TelegramBot = require('node-telegram-bot-api');
const request = require('request');
const cheerio = require('cheerio');
Модуль node-telegram-bot-api используется для создания Telegram бота, модуль request - для выполнения HTTP запросов, а модуль cheerio - для парсинга HTML.
2. Создаем экземпляр Telegram бота:
JavaScript:
const bot = new TelegramBot(process.env.TELEGRAM_BOT_TOKEN, { polling: true });
В конструкторе передаем токен нашего Telegram бота, который берем из переменной окружения TELEGRAM_BOT_TOKEN, и опции { polling: true }, чтобы бот начал получать обновления через long-polling.
3. Определяем URL страницы, которую будем парсить:
JavaScript:
const url = 'https://ludomah.com/whats-new/posts/';
Мы будем парсить список новых постов на сайте
https://ludomah.com/whats-new/posts/.
4. Обрабатываем входящие сообщения бота:
JavaScript:
bot.on('message', (msg) => {
const chatId = msg.chat.id;
bot.sendMessage(chatId, 'Выберите действие:', {
reply_markup: {
inline_keyboard: [
[
{ text: 'Получить названия постов', callback_data: 'get_titles' },
],
],
},
});
});
Мы используем событие 'message', чтобы бот отвечал на входящие сообщения. В этом примере мы просто отправляем сообщение с встроенной клавиатурой, содержащей одну кнопку "Получить названия постов".
5. Обрабатываем нажатия на кнопки встроенной клавиатуры:
JavaScript:
bot.on('callback_query', (callbackQuery) => {
const chatId = callbackQuery.message.chat.id;
const action = callbackQuery.data;
switch (action) {
case 'get_titles':
request(url, function (error, response, html) {
if (!error && response.statusCode == 200) {
const $ = cheerio.load(html);
const titles = $('.structItem-title')
.map((i, el) => $(el).text().trim().replace(/"/g, ''))
.get();
bot.sendMessage(chatId, `Названия статей:\n\n${titles.join('\n')}`);
} else {
bot.sendMessage(chatId, 'Произошла ошибка при загрузке данных');
}
});
break;
}
});
Мы используем событие 'callback_query', чтобы реагировать на нажатия на кнопки встроенной клавиатуры.
Как результат получаем:
Дополнительно:
Token API прячем в ту же директорию где и сам app.js в .env, если используем git, то незабываем добавлять в gitignore этот файл.
Деплоим через Docker или на тот же Heroku или на сервер(кому как удобнее), у меня локально на ноуте работало.
p.s. Буду всякую подобную хрень тут размещать, от делать нечего, затрагивать разные области программирования, полный fullstack). Что то стоящее заливать на Github.
Прошу не флудить
