Tulosten ja kertoimien automaattinen haku netistä?
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Tulosten ja kertoimien automaattinen haku netistä?
Onko kuinka helppo lähteä koodaamaan suht yksinkertaista ohjelmaa, jolla saisi haettua tulokset ja 1x2-kertoimet (keskiarvo tai korkeimmat kertoimet) tekstitiedostoon haluttuun muotoon? Ja mistä voisi lähteä liikkeelle ja millä kielellä tämä olisi helppo toteuttaa? Joko tuolta Oddsportal.comista tai Betexplorer.comista, kun niistä löytyy moniin/kaikkiin jääkiekkosarjoihin datat. Olisiko jotain hyvää sivustoa, mistä lähteä liikkeelle opiskelemaan?
Toinen vaihtoehto on, jos joltain löytyy valmiina jo moinen ohjelma ja olisi halukas tuon jakamaan vaikka pientä korvausta vastaan. Ja jos tuollainen löytyy, niin mielellään koodit mukana, niin pääsee tarvittaessa muokkaamaan sitä. Kun ei nuo nettisivut tunnu kovin pitkään olevan samanlaisia vaan päivityksiä tulee usein ja varmaan niitä hyödyntävät ohjelmat tarvitsevat koodiin muokkauksia myös.
- 911
- Jäsen
- Viestit: 195
- Liittynyt: 19.01.2018, 14:28
-
Tuotto: +86.26 yks.
Palautus%: 104.53%
Panosten ka: 2.36 yks.
Vetoja: 807
- Pisteitä: 210
- Paikkakunta: Luis Suarezin etuhampaat
Re: Tulosten ja kertoimien automaattinen haku netistä?
Tuollainen https://www.webharvy.com/articles/scrap ... ortal.html saattaisi auttaa. Eikä tuo nyt kovin kalliskaan ole.jone kirjoitti: ↑09.01.2020, 11:34
Toinen vaihtoehto on, jos joltain löytyy valmiina jo moinen ohjelma ja olisi halukas tuon jakamaan vaikka pientä korvausta vastaan. Ja jos tuollainen löytyy, niin mielellään koodit mukana, niin pääsee tarvittaessa muokkaamaan sitä. Kun ei nuo nettisivut tunnu kovin pitkään olevan samanlaisia vaan päivityksiä tulee usein ja varmaan niitä hyödyntävät ohjelmat tarvitsevat koodiin muokkauksia myös.
Minikommentit
09.01.2020 12:21 <jone> Kiitos, pitää tutustua paremmin, kun ehtii.
-
HR Juz
- Jäsen
- Viestit: 2433
- Liittynyt: 17.08.2006, 14:59
-
Tuotto: +755.32 yks.
Palautus%: 102.12%
Panosten ka: 7.33 yks.
Vetoja: 4853
- Pisteitä: 8681
Re: Tulosten ja kertoimien automaattinen haku netistä?
On se helppoa, uskoisin että saat väsättyä itse. (Jos oot kuitenkin oman softankin onnistunut C:llä koodaamaan niin tuollainen on helpompaa). Varsinkin jos haluat keskiarvon ja korkeimman closesta etkä esim avauksia/päivän sisäistä korkeinta kerrointa. Noihin pitää feikkihiirellä aktivoida ne kerroinliikkeet esim molemmissa noista sivuista. Mutta kaikki noi datat mitkä tuossa sivulla suoraan näkyy löytyy sieltä lähdekoodista. Jos esim klikkaat jotain kerrointa hiiren oikealla chromessa ja valitset inspect niin näet tarkemmin. Jos et siis yhtään tiedä mistä kyse niin ideana että tuo lähdekoodi ladataan sivulta ja sieltä etsitään halutut html-elementit ja otetaan tiedot talteen.jone kirjoitti: ↑09.01.2020, 11:34Onko kuinka helppo lähteä koodaamaan suht yksinkertaista ohjelmaa, jolla saisi haettua tulokset ja 1x2-kertoimet (keskiarvo tai korkeimmat kertoimet) tekstitiedostoon haluttuun muotoon? Ja mistä voisi lähteä liikkeelle ja millä kielellä tämä olisi helppo toteuttaa? Joko tuolta Oddsportal.comista tai Betexplorer.comista, kun niistä löytyy moniin/kaikkiin jääkiekkosarjoihin datat. Olisiko jotain hyvää sivustoa, mistä lähteä liikkeelle opiskelemaan?
Henkkoht suosittelen tuollaiseen jotain Python/R Scriptiä. Varmaan C-taustalla voi Python olla helpompi. Sitä on helppo muokata ja ajaa komentoriviltä tai suoraan IDE:stä. Oon ite oddsportalia pythonilla screipannut, mut ei suoraan tollaseen löydy koodeja. Lähinnä kun pitäis tietää et mitä haluat hakea. Täähän siis onnnistuu hyvin silleen et haet vaikka kaikki päivän tai liigan tai minkä tahansa otteluiden linkit (ne löytyy kanssa lähdekoodista) ja sit looppaat nuo läpi tms.
Mutta tällainen onnistuu kyllä kaikilla kielillä. Tarvitset jonkin html-parser -paketin (+ ehkä jonkin millä sen lähdekoodin lataat). C# voi olla paremmat kirjastot tähän mutta uskoisin että onnistuu myös ++. Varmaan paras opetusmateriaali löytyy youtubesta. Sinne vaan {kieli} web scraping. Tarvittaessa 'html' mukaan.
Toinen vaihtoehto on tietenkin lukea suoraan Pinnyn APIa. Mut tietenkin jos haluat noi muutkin bookkerit mukaan niin ei riitä. Mut siihen sekä R että Python valmiit kirjastot (Python ei tosin ainakaan 'virallinen'). Ja onnistuu tuon APIn lukeminen tietty muillakin kielillä.
Minikommentit
09.01.2020 14:13 <E.Clipperton> Ite käytän pythonin requests ja beautiful soup kirjastoja tämmöseen
09.01.2020 14:15 <E.Clipperton> Anaconda distribuution spyder IDEssä pyöritän. Mut varmasti hoituu monella tapaa
09.01.2020 14:58 <TheSavageSam> PERLillä pystyy kanssa hyvin tekee tommosen webscrapperin
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Re: Tulosten ja kertoimien automaattinen haku netistä?
Viimeksi, kun noihin datan hakuihin yritin tutustua joku pari vuotta sitten, vaikutti turhan hankalalta päästä alkuun. Ehkä ei tullut etsittyä oikeasta paikasta apuja. Eipä kyllä tullut silloin mieleen etsiä apuja Youtubesta. Pitää tutkia löytyisikö noista apuja ja tällä kertaa yrittää vähän paremmin perehtyä aiheeseen. Tuo nykyinen ohjelmani on C#-kielellä tehty (aiemmin C++), joten pitänee ensin tutkia nuo, jos saisi tuohon ohjelmaan lisäiltyä suoraan noi datan haut.
Niin ja se mitä haen on yksinkertaisuudessaan helpoin toteuttaa niin, että haetaan yksittäisen sarjan (jääkiekko) kuluvan kauden ottelut tuloksineen ja 1x2-kertoimineen (keskiarvo tai korkeimmat) ja toki päivämäärät myös. Ja nämä sitten parseroidaan haluttuun muotoon. Ja tämä on siis päivittäin toistuva toiminto, jotta pysyy data ajantasalla. Toki muitakin tapoja olisi tuo toteuttaa, mutta varmaan helpoin noin.
Minikommentit
09.01.2020 17:11 <Richie> Itsellä käytössä Python + Selenium. Käytän myös Excel + VBA yhdistelmää hakemaan
09.01.2020 17:12 <Richie> noita päätöskertoimia. Jos esimerkkikoodi tosta VBA:sta kiinnostaa niin laita yv
09.01.2020 17:27 <E.Clipperton> Seleniumia joutuu tosiaan välillä käyttämään.
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Re: Tulosten ja kertoimien automaattinen haku netistä?
Minikommentit
- hk_
- Jäsen
- Viestit: 1161
- Liittynyt: 07.02.2013, 13:13
-
Tuotto: -170.10 yks.
Palautus%: 98.07%
Panosten ka: 2.01 yks.
Vetoja: 4384
- Pisteitä: 6783
- Viesti:
Re: Tulosten ja kertoimien automaattinen haku netistä?
Samoja havaintoja. Seleniumilla kun hakee niin jää jumiin 30+ sekunniksi yksittäiseen otteluun. Ei niin kriittinen toiminto itselleni, mutta jos löydän ylimääräistä aikaa niin katson mikä siinä jumittaa.jone kirjoitti: ↑24.04.2022, 15:17Hakeeko kukaan kerroindataa oddsportalista ohjelmallisesti? Itse haen kertoimia oddsportalista kirjautuneena, mutta nyt ollut muutaman päivän ongelmana hitaus. Aamupäivällä kertoimien haku on toiminut normaalisti, mutta päiväsaikaan/illalla kertoimien haku on ollut tuhottoman hidasta. Tänäänkin onnistui eka ajo aamupäivällä, mutta nyt päivällä ei taas tunnu toimivan. Selaimella ei tunnu olevan mitään tökkimistä havaittavissa, joten onkohan oddsportalin päästä jotain rajoituksia lyöty käyttöön? Itsellä ei ole nyt aikaa alkaa koodailemalla testaamaan, että löytyisikö jotain bugia tai muuta. Auttaisi ainakin tietää, että onko muilla samoja ongelmia.
www.eastsidesportsanalysis.com | www.twitter.com/hkairavuo
Minikommentit
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Re: Tulosten ja kertoimien automaattinen haku netistä?
Okei, ei sitten ole vain mulla vika. Mun koodaustaidoilla vian etsimiseen menee todennäköisesti aika kauan, jos nyt semmoisen sattuisin löytämään. Tosi kiva, jos löydät aikaa tuohon. Itselle tuo on hyvinkin kriittinen toiminto automatiikan kannalta. Toki manuaalisesti pystyy käymään ottelut läpi ja lätkässä onneksi jo aika vähän matseja päivittäin.
Minikommentit
- hk_
- Jäsen
- Viestit: 1161
- Liittynyt: 07.02.2013, 13:13
-
Tuotto: -170.10 yks.
Palautus%: 98.07%
Panosten ka: 2.01 yks.
Vetoja: 4384
- Pisteitä: 6783
- Viesti:
Re: Tulosten ja kertoimien automaattinen haku netistä?
www.eastsidesportsanalysis.com | www.twitter.com/hkairavuo
Minikommentit
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Re: Tulosten ja kertoimien automaattinen haku netistä?
Jeps, mun väsäämä ohjelma on sen verran tehottomasti tehty, että saattaa mennä yhden isomman sarjan vetojen etsiskelyyn jo tunti/tunteja. Nopeammin saa manuaalisesti käytyä kaikki ottelut läpi. Pitäisi jossain vaiheessa koittaa optimoida tuota, mutta ajanpuute/osaaminen/motivaatio rajoittaa tuota vahvasti.
PS. tänään taas on toiminut normaalisti näin aamupäivästä.
Minikommentit
- hk_
- Jäsen
- Viestit: 1161
- Liittynyt: 07.02.2013, 13:13
-
Tuotto: -170.10 yks.
Palautus%: 98.07%
Panosten ka: 2.01 yks.
Vetoja: 4384
- Pisteitä: 6783
- Viesti:
Re: Tulosten ja kertoimien automaattinen haku netistä?
Ensin haen kaikkien otteluiden linkit ja sen jälkeen availen otteluiden sivut ja haen Pinnclen päätöskertoimet.
https://www.oddsportal.com/hockey/usa/nhl/results/#/
Jos haluat voin jakaa koodin (Excel VBA + Selenium).
www.eastsidesportsanalysis.com | www.twitter.com/hkairavuo
Minikommentit
25.04.2022 13:00 <Muikkuz> Ihan naurattaa, kun ite just teen kerroinvertailua niin, että tietokoneen
25.04.2022 13:01 <Muikkuz> ruudulla on Veikkauksen kertoimia ja tabletilla toisen yhtiön kertoimia. Siitä
25.04.2022 13:01 <Muikkuz> tabletillä pihistän rivi kerrallaan ja vertailen.
25.04.2022 13:24 <hk_> Paljon jännempää tuolla tavalla.
25.04.2022 13:24 <hk_> Tulokset kuuluu ainakin tarkistaa teksti-tv:stä "pihistämällä" :)
-
jone
- Jäsen
- Viestit: 2539
- Liittynyt: 14.01.2003, 16:19
-
Tuotto: +70.36 yks.
Palautus%: 101.35%
Panosten ka: 4.01 yks.
Vetoja: 1300
- Pisteitä: 2223
- Paikkakunta: Hollola
Re: Tulosten ja kertoimien automaattinen haku netistä?
Samaan tyyliin mäkin haen noita kertoimia, joskin käytössä eri kieli (c#).hk_ kirjoitti: ↑25.04.2022, 12:01Minulla menee parhaimmillaan ehkä 1min ison sarjan yhden päivän ottelujen kertoimien hakuun (ML/1x2 + totals).
Ensin haen kaikkien otteluiden linkit ja sen jälkeen availen otteluiden sivut ja haen Pinnclen päätöskertoimet.
Jos haluat voin jakaa koodin (Excel VBA + Selenium).
Kiitoksia tarjouksesta, mutta ehkä menen omalla ohjelmalla, kun siinä kaikki muukin toiminnallisuus mukana. Ei mullakaan siis tunteja mene normaalisti, vaan ehkä semmoinen yhteensä ½ - 1 tunti(a) saattaa mennä melkein kaikkien lätkäsarjojen lataukseen ja todennäköisyyksien laskentaan. Nyt meni 10min ja mukana 14 sarjaa. Ainakin yksi kehitysidea tuohon nopeuteen olisi, mutta toteutus sitten joskus.
Minikommentit
- hk_
- Jäsen
- Viestit: 1161
- Liittynyt: 07.02.2013, 13:13
-
Tuotto: -170.10 yks.
Palautus%: 98.07%
Panosten ka: 2.01 yks.
Vetoja: 4384
- Pisteitä: 6783
- Viesti:
Re: Tulosten ja kertoimien automaattinen haku netistä?
www.eastsidesportsanalysis.com | www.twitter.com/hkairavuo
Minikommentit
-
Dangler
- Jäsen
- Viestit: 203
- Liittynyt: 26.06.2021, 13:11
-
Tuotto: +0.62 yks.
Palautus%: 100.48%
Panosten ka: 0.49 yks.
Vetoja: 259
- Pisteitä: 71
Re: Tulosten ja kertoimien automaattinen haku netistä?
Minua kiinnostaisi kokeilla tuota, jos haluat jakaa?hk_ kirjoitti: ↑25.04.2022, 12:01Minulla menee parhaimmillaan ehkä 1min ison sarjan yhden päivän ottelujen kertoimien hakuun (ML/1x2 + totals).
Ensin haen kaikkien otteluiden linkit ja sen jälkeen availen otteluiden sivut ja haen Pinnclen päätöskertoimet.
Jos haluat voin jakaa koodin (Excel VBA + Selenium).
Minikommentit
- hk_
- Jäsen
- Viestit: 1161
- Liittynyt: 07.02.2013, 13:13
-
Tuotto: -170.10 yks.
Palautus%: 98.07%
Panosten ka: 2.01 yks.
Vetoja: 4384
- Pisteitä: 6783
- Viesti:
Re: Tulosten ja kertoimien automaattinen haku netistä?
Tuolta voi ladata. Joudut varmasti tutustumaan koodiin jotta pääset kärryille.
Vaatii Seleniumin jotta toimii => https://www.selenium.dev/downloads/
www.eastsidesportsanalysis.com | www.twitter.com/hkairavuo
Minikommentit
-
Tappi
- Jäsen
- Viestit: 381
- Liittynyt: 27.03.2014, 13:05
-
Tuotto: +0.73 yks.
Palautus%: 100.02%
Panosten ka: 3.17 yks.
Vetoja: 1003
- Pisteitä: 402
Minikommentit