Pobieranie informacji ze stron internetowych discord bot

Question

Cześć ponownie,

tym razem przychodzę z pytaniem w jaki sposób pobrać informacje z różnych stron internetowych.

np. mamy tę stronę: http://metar.vatsim.net/metar.php?id=epgd i chciałbym, żeby wszystko z tej strony (nie jest tam tego dużo) wyświetlało się w wiadomości do użytkownika bota.

Przepraszam, jeżeli jest to błahe pytanie, ale szukałem tego w internecie i nie mogłem znaleźć(chyba, że źle szukałem)

Pozdrawiam

Answer 1

Możesz użyć dowolnej biblioteki do obsługi zapytań HTTP w Node np. node-fetch lub axios. Pobierz sobie tą stronę (szczegóły znajdziesz w dokumentacjach podlinkowanych bibliotek), i - w zależności, czy potrzebujesz wydobyć ze strony konkretne informacje, czy zadowala Cię całość danych - sparsuj ją do postaci DOM (przy użyciu np. jsdom) i przy użyciu metod DOM-owych pokroju querySelector oraz propertisów typu textContent, odczytaj to czego potrzebujesz.

Comments

zmieniłem format pliku na .mjs wywaliło błąd, require nie jest dostępny, zmieniłem na import. tylko niestety teraz wywaliło: Cannot read property 'FLAGS' of undefined i zupełnie nie wiem na co to zmienić

---

Zamień

const {Client, Intents, MessageEmbed} = require("discord.js")

na

import * as Discord from "discord.js";
console.log('Discord:', !!Discord, ' /intents:', Discord.Intents);

i daj znać, co pokaże konsola.

---

TypeError [ERR_UNKNOWN_FILE_EXTENSION]: Unknown file extension ".json" for C:\Users\cichy\Desktop\chartsBot\config.json

czyżby był jakiś format mjson? ;)

---

Ojej, a skąd nagle odwołanie do jakiegoś pliku konfiguracyjnego?

Dobra... :) Myślę że łatwiej Ci będzie, jeśli po prostu użyjesz async IIFE i require, tak jak miałeś na początku oraz przywróć rozszerzenie z .mjs do .js. Możesz od biedy nawet cały kod owinąć w to IIFE (razem z importami przez require na górze). Tylko pamiętaj, że zmienne utworzone w funkcji nie będą widoczne poza nią, bo ona jest asynchroniczna - mógłbyś niby zadeklarować result z fetch przed IIFE, w IIFE to ustawić i poza IIFE poczekać setTimeout-em lub robić inne hacki, ale to nie ma sensu i będzie z tym więcej problemów niż pożytku.

Zapisz po prostu:

const {Client, Intents, MessageEmbed} = require("discord.js")
const client = new Client({ intents: [Intents.FLAGS.GUILDS, Intents.FLAGS.GUILD_MESSAGES]})
const config = require("./config.json")
const fetch = require("node-fetch")

;(async () => {
  const result = await fetch('http://metar.vatsim.net/metar.php?id=epgd')
    .then(res => res.text())
    .then(text => {
      console.log('text:', text);
      return text;
    })
    
  console.log('result:', result);
   
  client.login(config.token)
})();

 

---

też myślę, że to będzie lepszy pomysł. Bardzo Ci dziękuję i jestem dozgonnie wdzięczny! Mam u Ciebie dług. :)