Mate nekdo zkusenost s finetuningem GPT-2? Mam tu cca 20M text, pres ktery bych chtel GPT-2 preucit a nasledne pouzivat na generovani textu. Zatim pouzivam skvely python wrapper gpt-2-simple, ale momentalne bojuji s HW. Mam tu 2070, na ktere (pres Docker) provozuju Tensorflow, ale jsem schopen pouzit jen zakladni 124M model. Uz 355M model je znacne nestabilni, protoze se mi nevejde do VRAM.

Premyslel jsem, ze bych zkusil finetuning nekde v Cloudu, nejspis na Google Compute Engine, ale ty ceny jsou dost krvave (Za Teslu T4 chteji asi $300). Mate s tim nekdo prakticke zkusenosti?

MART1NKA: jo, Morphoditu jsem taky zkoušel :)

SOPTIK: To je skvele! Diky :-)

CUCHULAIN: Jee potešil si :). Lematizér češtiny sa dá vyriešiť nástrojom of ÚFALu, ktorý tiež dodáva Geneea. Na komerčné účely najľahšou cestou so mnou v pošte. http://ufal.mff.cuni.cz/morphodita Má ale jednu vadu, je to robené na prehistorickom korpuse. Ak to má byť language independent, môžeme poskytnúť konzultáciu.

KYRKYJ: Potrebuju na jedne siti naucit X datasetu, zajima me jenom co nejvetsi variabilita.

JINX: ImageNet je největší dostupný dataset na klasifikaci, je to standart. Záleží o co se pokoušíš / co tvůj model má umět. Pokud je to klasifikace na co největším datasetu, tak nic lepšího než ImageNet neseženeš, pokud máš nějaký jiný cíl, tak záleží co konkrétně chceš.

Mate nekdo tip na podobne kvalitni dataset jako MS-COCO ale vhodny pro klasifikaci? (Zkousim ImageNet ale ty obrazky se mi moc nelibi).

Ahoj, snazim se najit nejaky zpusob, jak ziskat informace o tiskovych zpravach, ktere mi dorazi emailem a napadla me cesta ML, se kterym ale nemam moc zkusenosti. Cilem je zjistit nasledujici:

• ktere spolecnosti se tiskova zprava tyka
• produkt/sluzba/udalost ktere se tyka
• rozdeleni prichozi zpravy na casti, ze kterych se bezne sklada (nazev, obsah, informace o spolecnosti, kontakty pro novinare atd), ale v kazdem emailu je to trochu jinak

Co jsem se snazil googlit, tak jako nejzajimavejsi mi prisla sluzba Amazon Comprehend, protoze jsem vyvojar, ktery nema moc zkusenosti s ML. Bohuzel ale neni dostupna pro cestinu, takze predpokladam, ze budu muset jit do ML a napadlo me, ze bych se tu zeptal, jestli by me nekdo nemohl nasmerovat kudy se vydat?:) Diky

JINX: Trochu necekane tam budu, tak by bylo fajn se s nekym potkat

PJOTRIK: Byl jsem tam minuly rok a letos to asi vynecham. Proc se ptas?

má tu prosím někdo zkušenosti s n-gramovými modely? potřeboval bych poradit s iplementací Kneser-Nay smoothing.
klidně do pošty.

Nemel by nekdo zajem o koupi AWS Deep Racer? Ofiko v prodeji od brezna 2019, ale vyhral jsem v soutezi dev kousek a nemam pro nej prakticke vyuziti.

ZONICEK: Záleží na viac faktoroch. Ak vieš trošku robiť s pythonom, môžem poprípade poskytnúť nejaké vzorové notebooky na sentiment. Napíš mi do pošty. Chcela by som nejaké zmysluplné dáta a je možnosť, ak máš teda čas a nepotrebuješ to zajtra, že by som ti to urobila za symbolickú cenu v rámci vlastného vzdelávania.