HTML

Precognox

precognox_logo_190.jpg

A blog készítői a Precognox Kft. keretein belül fejlesztenek intelligens, nyelvészeti alapokra épülő keresési, szövegbányászati, big data és gépi tanulás megoldásokat.

Ha a blogon olvasható tartalmak kapcsán, vagy témáink alapján úgy gondolod megoldhatjuk problémáidat, lépj velünk kapcsolatba a keresovilag@precognox.com címen.

Star Wars text mining

visualizing_star_wars_movie_scripts_precognox.jpgA long time ago, in a galaxy far, far away data analysts were talking about the upcoming new Star Wars movie. One of them has never seen any eposide of the two trilogies before, so they decided to make the movie more accessible to this poor fellow. See more...

Facebook oldaldoboz

Meetup ajánló

Blog figyelése (RSS)

 Add hozzá az RSS olvasódhoz

Ha levélben szeretnél értesülni az új cikkekről:

opendata.hu

opendatahu45.jpg

Az opendata.hu egy ingyenes és nyilvános magyar adatkatalógus. Az oldalt önkéntesek és civil szervezetek hozták létre azzal a céllal, hogy megteremtsék az első magyar nyílt adatokat, adatbázisokat gyűjtő weblapot. Az oldalra szabadon feltölthetőek, rendszerezhetőek szerzői jogvédelem alatt nem álló, nyilvános, illetve közérdekű adatok.

Az opendata.hu oldalt a Magyar OpenData Alapítvány/Egyesület hivatalos megalakulásáig - lelkes önkéntesek segítségével a
K-Monitor Közhasznú Egyesület (K-Monitor) működteti, az üzemeltetést a Precognox végzi.

Főbb témák

adatok (12) adatújságírás (16) adatvizualizáció (14) alternatív (6) alternatív keresőfelület (24) beszédtechnológia (13) big data (44) bing (14) CEU (6) clustering (6) conTEXT (7) dashboard (6) data science (8) deep learning (12) egészség (7) egészség kereső (7) előadás (7) emócióelemzés (29) Facebook (9) facebook (8) gépi tanulás (8) google (57) Google (23) gyűlöletbeszéd (7) hackathon (9) hálózatelemzés (14) internetes keresés (26) internet hungary (6) képkereső (8) keresés (57) kereséselmélet (7) keresés jövője (55) keresés problémái (38) keresők összehasonlítása (9) keresőoptimalizálás (6) kereső szándéka (11) kereső tanfolyam (9) kereső teszt (15) kognitív nyelvészet (12) konferencia (34) könyvajánló (18) korpusznyelvészet (12) közösségi keresés (8) közösségi média (6) különleges keresők (7) kutatás (6) LDA (9) lda (9) live (13) magyar kereső (9) marketing (8) meetup (38) mesterséges intelligencia (9) metafora (6) mobil (37) mobil keresés (17) Neticle (8) NLP meetup (17) Nuance (9) nyelv (6) nyelvészet (27) nyelvtechnológia (68) open data (11) open knowledge (7) politikai blogok (22) Precognox (41) Precognox Labs (14) Python (11) R (19) spam (6) statisztika (10) számítógépes nyelvészet (6) szemantikus keresés (16) szemantikus kereső (9) szentimentelemzés (31) szövegbányászat (14) tartalomelemzés (50) tartalomjegyzék (6) tematikus kereső (19) twitter (15) Twitter (18) vertikális kereső (9) vizualizáció (11) yahoo (26) Címkefelhő

A blog tartalmai CC licenc alá tartoznak

Creative Commons License
Kereső Világ by Precognox Kft. is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.
Based on a work at http://kereses.blog.hu/.
Permissions beyond the scope of this license may be available at http://precognox.com/.

A Kereső Világ blogon közölt tartalmak a Precognox Kft. tulajdonát képezik. A tartalom újraközléséhez, amennyiben nem kereskedelmi céllal történik, külön engedély nem szükséges, ha linkeled az eredeti tartalmat és feltünteted a tulajdonos nevét is (valahogy így: Ez az írás a Precognox Kft. Kereső Világ blogján jelent meg). Minden más esetben fordulj hozzánk, a zoltan.varju(kukac)precognox.com címre írt levéllel.

Creative Commons License

Nevezd meg! - Ne add el! - Ne változtasd!

 

Látens jelentések és a szemantikai tér workshop

2017.05.31. 12:21 Szerző: zoltanvarju Címkék: előadás workshop tartalomelemzés

Ma az MTA-ELTE- Peripato Összehasonlító Társadalmi Dinamika Kutatócsoport által szervezett Látens jelentések és a szemantikai tér A közéleti-politikai diskurzus empirikus vizsgálata című workshopon veszünk részt.

spangenberg_schule_des_aristoteles.jpg

Izgatottan várjuk, hogy megtudjuk, milyen módszerekkel és eszközökkel dolgoznak a társadalomtudósok amikor tartalomelemzéssel foglalkoznak - ebből mindig sokat szoktunk tanulni. Mi a blogunkon már korábban bemutatott projektjeinkről fogunk beszélni, reméljük hasznára válhatnak valakinek és visszajelzéseket is kapunk. Slideok alább!

A Kereső Világ a precognox_logo_190.jpg Precognox szakmai blogja A Precognox intelligens, nyelvészeti alapokra építő keresési, szövegbányászati és big data megoldások fejlesztője.

Szólj hozzá! • Kövess Facebookon • Iratkozz fel értesítőre

Topik modellek és word2vec

2017.05.30. 07:18 Szerző: zoltanvarju Címkék: tartalomelemzés lda topik modellek deep learning word2vec lda2vec

Egy korpuszunkon kipróbáltuk az lda2vec algoritmust, mert már nem bírtuk tovább. Jelentjük, nem is olyan rossz az eredmény! Itt meg is lehet nézni!

lblbanner.png

Christopher E. Moody Mixing Dirichlet Topic Models and Word Embeddings to Make lda2vec tanulmányát megjelenése óta imádjuk és párszor már használtuk is az általa implementált változatát. Most egy kicsit belekontárkodtunk a kódba (pl. Chainer helyett mi Keras-t használunk), hogy a tüntetések, és a CEU-ügy kapcsán megjelent cikkeket tartalmazó korpuszunkat elemezhessük.

De miért?

Itt már megírtuk, hogy az LDA két külön topikba pakolta az jobb- és baloldali lapokban ugyanazon témában megjelenő cikkeket. A korpuszon trénelt word2vec modell azonban azt mutatja, hogy az eltérő kifejezések, mint pl. CEU és a Soros-egyetem nagyon hasonló helyet foglalnak el a szemantikai térben. Nem gondoljuk, hogy az LDA rossz, mert a két eltérő narratíva bezavarta. Ellenben arra voltunk kíváncsiak, hogy a word embeddings-re alapozott topik modell képes-e ezen túllépni. Számításunk bejött! Habár még sokat kell pofozni a modellen, de a prototípusra kapott pyldaviz vizu megtekinthető itt.

lda2vec.png

A Kereső Világ a precognox_logo_190.jpg Precognox szakmai blogja A Precognox intelligens, nyelvészeti alapokra építő keresési, szövegbányászati és big data megoldások fejlesztője.

Szólj hozzá! • Kövess Facebookon • Iratkozz fel értesítőre

Túl a szófelhőkön - szövegvizualizációs gyakorlatok @ NLP meetup

2017.05.25. 12:54 Szerző: zoltanvarju Címkék: előadás meetup adatvizualizáció NLP meetup szövegvizualizáció

Ma az NLP meetupon adunk elő szövegvizualizációs projektjeinkről. A nyesten már írtunk témánkról, a blogon pedig az adatvizualizáció címke alatt megtaláljátok összes jó és rossz próbálkozásunkat. Itt pedig a slideokat!

Kapcsolódó anyagok:

 

logo9_final.jpg

A Kereső Világ a precognox_logo_190.jpg Precognox szakmai blogja A Precognox intelligens, nyelvészeti alapokra építő keresési, szövegbányászati és big data megoldások fejlesztője.

Szólj hozzá! • Kövess Facebookon • Iratkozz fel értesítőre

The Data Deluge, How Big Data Is Changing Our Life, Presentation @ Futurology Forum

2017.05.22. 11:00 Szerző: zoltanvarju Címkék: előadás big data AI

Ma  Magyar Országos Közjegyzői Kamar Futurology Forum-án adunk elő.

A Kereső Világ a precognox_logo_190.jpg Precognox szakmai blogja A Precognox intelligens, nyelvészeti alapokra építő keresési, szövegbányászati és big data megoldások fejlesztője.

Szólj hozzá! • Kövess Facebookon • Iratkozz fel értesítőre

Mennyit ér a kecód? Medián négyzetméter árak vizualizálva!

2017.05.19. 08:15 Szerző: zoltanvarju Címkék: ingatlan adatbányászat crawling adatvizualizáció QGIS threejs

Arra voltunk kíváncsiak, hogy állnak a négyzetméter árak a magyar ingatlanpiacon. Legyűjtöttünk majdnem 200,000 hirdetést, kiszedtük belőlük a lényeget és egy 3D vizun mutatjuk az adatokat itt.

housing.png

Hogy?

A gyűjtés során figyeltünk arra, hogy ne sértsük a felhasználási feltételeket és tiszteletben tartottuk minden robots.txt kérését, a crawler nem merészkedett oda, ahol nem látják szívesen. A crawler Pythonban készült, az adattisztításhoz is maradtunk ennél a nyelvnél, mert szeretjük. A térkép QGIS-ben készült, OpenStreetMap shapefile-ok felhasználásával. A threejs 3D vizut a qgis2threejs plugin segítségével generáltuk, a generált kódba kicsit belekontárkodtunk kézzel.

Miért?

A Precognox kereséssel foglalkozik, ennek része a spatial search - ami mostanában nagyon menő. Az ingatlanokkal kapcsolatos adatok tökéletesek kísérletezésre. A jövőben ezért kicsit többet fogunk foglalkozni ezzel a területtel és még arra is kísérletet teszünk, hogy a képfeldolgozással is összekössük.

 

 

A Kereső Világ a precognox_logo_190.jpg Precognox szakmai blogja A Precognox intelligens, nyelvészeti alapokra építő keresési, szövegbányászati és big data megoldások fejlesztője.

Szólj hozzá! • Kövess Facebookon • Iratkozz fel értesítőre