• Vítejte na XBMC-Kodi.cz
  • Česko-slovenská komunita fanoušků XBMC/Kodi
Vítejte návštevníku! Přihlášení Registrace


Hodnocení tématu:
  • 0 Hlas(ů) - 0 Průměr
  • 1
  • 2
  • 3
  • 4
  • 5
"šmírování" webů
#1
caw,
Je možnost ukládat informace z internetu (např. chmi.cz nebo lavdis.cz…). Jedná se mi o pár konkrétních údajů které se zde neukládají do historie a tak bych chtěl mít vlastní historii…jedná se opravdu jen o čísla tak by v tom snad nemusel být problém ale jako úplný začátečník nevím zda to vůbec jde nebo jak na to…
Děkuji za jakýkoliv podmět.
Ondra
 
Citovat
#2
@curilus Tak lidi tu už měli různé požadavky, ale něco takového ještě ne. Ono to sem až tak moc ani nepatří. Kodi je především mediální aplikace. Ty věci jako počasí apod. jsou spíše jen takový tradiční doplňek.

Ale zaujalo mě to, protože pro jedno povodí právě dokončujeme dodávku SCADA systému pro dispečink. Realizovat by to jistě šlo. Musel by se vytvořit addon, který by ty weby parsoval, data z nich ukládal do databáze a pak je v nějakém jednoduchém seznamu zobrazoval. Pro zobrazování by se daly využít "seznamy" Kodi, případně formátovaný textový soubor, ale jinak by vše ostatní asi byla práce na zelené louce. Vzhledem k obecné potřebě (kdo ještě další by něco takového využil?) to ale nevidím reálné. Leda, že by ses toho ujal sám.
 
Citovat
#3
Vyskúšaj jeden z "Web Scraperov":
https://luminati.io
https://listly.io
https://www.parsehub.com
http://www.contentgrabber.com
 
Citovat
#4
Client: Je mi jasné že to nebude uplně jednoduché ale nehledal bych v tom vědu. Jde mi opravdu jen o pár údajů ktere by se pak zapsali do nějaké tabulky....tak využití by to mělo asi pro více lidí, ale bedu to jen čistě pro sebe abych "byl" o kousek dál (více informací) než ostatní...a nechce se mi x-krát denně opisovat hodhoty ze stranek. Jednodušší mi příjde to naprogramovat a zautomatizovat...

[nicko: Děkuji za podmět a určitě se v tom pohrabu...to bude asi to co hledám...budu mít večer co dělat Big Grin
 
Citovat
#5
@curilus No, věda to rozhodně žádná nebude. Já teď tak trochu podobný problém řeším. Plánuji parsovat RSS data, vytvářet z nich seznam aktuálních zpráv se zobrazením krátkého textu a náhledu obrázku s možností spuštění web browseru, který zobrazí zdrojovou stránku. V tvém případě to bude podobné (až na to spuštění web browseru). Ty odkazy od @nicko mohou pomoci odkrýt strukturu dat, ale parsování bych nechal na pythonu. Možná ještě lepší řešení by bylo, odchytit komunikaci se zdroji dat (určitě to budou mít řešené způsobem client/server) a řešit to přímo cílenými requesty na zdrojová data.

BTW Nepoužívej citace, to je proti pravidlům.
 
Citovat
#6
A proč, @cirilus-i, ten podivný název evokující dohled NCS služeb?
Neměl bys jej změnit na "sklízení" webů, "dolování" webů ..?

Také doufám, že následující jste si načetli https://creativecommons.org/licenses/by-nc-nd/3.0/cz/
 
Citovat
#7
meda: mám to čistě pro svoje účely tak to bude asi každému ukradené jelikož to nikde nebude publikovat ani nijak prezentovat...
A s tím názvem bych si asi starosti nedělal jelikož nemám v plánu žádne zneužívání těchto dat...
 
Citovat
#8
@Client tak to uvidíme kam se dostanu...jsem v tomto úplný začátečník tak to bude na spousty hodin a googlit. Ale jinde tyto informace neseženu tak se nic jiného asi dělat nedá.
 
Citovat
#9
Ešte pridávam jednu zaujímavú stránku - visualping.io, ktorá ťa upozorní o zmenách vykonaných v určených častiach na monitorovanej stránke.
 
Citovat
#10
nicko@ tak to také projedu...t´eď jsem neměl moc čas ale povedlo se mi na najít par dost zajímavých věcí kdzž jsem na podmět @Clienta@ zkusil hledat PARSOVANI webu...
zde je pár odkazu kde se teď snažím dostat více informací...
https://pc.poradna.net/articles/1736704-...ogramovani
https://www.youtube.com/watch?v=nBaBQDh5SOs
https://www.youtube.com/watch?v=07Bm03b0Yhs
http://www.abclinuxu.cz/poradna/linux/show/104353
a asi nejvíc se mi líbí toto:
https://kapler.cz/jednoduchy-automaticky...ps-script/
tak teď ještě nějaký čas na zkoušku
 
Citovat
  


Přejít na fórum:


Prochází: 2 host(ů)