lovit/textmining_dataset lovit/textmining_dataset

  • Stars
    star
    38
  • Rank 706,870 (Top 14 %)
  • Language
    Python
  • Created almost 6 years ago
  • Updated almost 5 years ago
Twitter logo Share LinkedIn logo Share Facebook logo Share
lovit/textmining_dataset
github

lovit

Reviews

There are no reviews yet. Be the first to send feedback to the community and the maintainers!

Repository Details

텍스트마이닝 실습을 위한 데이터셋 핸들러

More Repositories

1

soynlp

한국어 자연어처리를 위한 파이썬 라이브러리입니다. 단어 추출/ 토크나이저 / 품사판별/ 전처리의 기능을 제공합니다.
Python
941
star
2

KR-WordRank

비지도학습 방법으로 한국어 텍스트에서 단어/키워드를 자동으로 추출하는 라이브러리입니다
Python
353
star
3

textmining-tutorial

(한국어) 텍스트 마이닝을 위한 공부거리들
Jupyter Notebook
203
star
4

soyspacing

띄어쓰기 오류 교정 라이브러리입니다. CRF 와 같은 머신러닝 알고리즘이 아닌, 직관적인 접근법으로 띄어쓰기를 교정합니다.
Python
145
star
5

customized_konlpy

Customized KoNLPy - Korean Natural Language Processing Toolkit KoNLPy wrapping code
Python
126
star
6

textrank

Implementation TextRank and related utils
Python
85
star
7

KoBERTScore

BERTScore for Korean
Python
73
star
8

fastcampus_textml_blogs

패스트캠퍼스, 자연어처리를 위한 머신러닝, 수업관련 포스트 입니다.
70
star
9

huggingface_konlpy

Training Transformers of Huggingface with KoNLPy
Jupyter Notebook
68
star
10

WordPieceModel

Word Piece Model python light version with functions tokenize/save/load
Python
66
star
11

namuwikitext

Wikitext format dataset of Namuwiki (Most famous Korean wikipedia)
Python
50
star
12

soy

Python
50
star
13

naver_news_search_scraper

검색어 기준으로 네이버뉴스와 댓글을 수집하는 파이썬 코드
Python
43
star
14

korean_lemmatizer

한국어 용언 분석기 (원형 복원, 용언 형태소 분석)
Python
41
star
15

python_ml4nlp

패스트캠퍼스 자연어처리를 위한 머신러닝 실습 자료실
Jupyter Notebook
40
star
16

soykeyword

Python library for keyword extraction
Python
39
star
17

clustering4docs

Clustering algorithm library. Implemented spherical kmeans
Python
37
star
18

sejong_corpus_cleaner

세종 말뭉치 데이터를 정제하기 위한 utils
Python
36
star
19

naver_movie_scraper

네이버 영화 정보 및 사용자 작성 영화평/평점 데이터 수집기
Python
29
star
20

kmrd

Synthetic dataset for recommender system created from Naver Movie rating system
Python
24
star
21

levenshtein_finder

Similar string search in Levenshtein distance
Python
22
star
22

python_ml_intro

패스트캠퍼스, 파이썬을 이용한 머신러닝 입문 실습 코드
Jupyter Notebook
21
star
23

python_ml4tm

패스트캠퍼스 텍스트마이닝을 위한 머신러닝 실습 자료실
Jupyter Notebook
20
star
24

kowikitext

Python
19
star
25

petitions_dataset

청와대 국민청원 게시판으로부터 수집된 데이터
Python
17
star
26

synthetic_dataset

Synthetic data generator for machine learning
Python
16
star
27

petitions_archive

청와대 국민청원 데이터 아카이브
15
star
28

petitions_scraper

청와대 국민청원 게시판의 데이터를 수집하는 스크래퍼
Python
15
star
29

pycrfsuite_spacing

python-crfsuite를 이용한 한국어 띄어쓰기 교정기
Python
14
star
30

sejong_corpus

세종말뭉치 가공데이터 Repository
Jupyter Notebook
13
star
31

crf_postagger

Korean Part-of-Speech Tagger using Conditional Random Field (CRF)
Python
12
star
32

kmeans_to_pyLDAvis

Visualizing k-means using pyLDAvis
Python
11
star
33

komoran3py

Komoran 3 in Python
Python
11
star
34

hmm_postagger

Korean Morphological Analyzer using Hidden Markov Model (HMM)
Python
10
star
35

flask_api_tutorial

Flask 로 API 를 만들기 위한 튜토리얼
Python
10
star
36

kmeans_ensemble

Python k-means ensemble package & tutorials
Python
9
star
37

text_embedding

Inferring vector of unseen words
Python
7
star
38

archive_carblog_analysis

Carblog dataset (github.com/lovit/carblog_dataset) 의 분석 코드입니다
Python
6
star
39

joint_visualization_of_words_and_docs

(Demo) Joint visualization for representation of words and docs trained from Doc2Vec
Python
6
star
40

ppomppu_scraper

뽐뿌게시판 본문, 제목, 스크래퍼
Python
6
star
41

text-dedup

Python package for memory-friendly text de-duplication
Python
6
star
42

open-review2

구관이 명관인 데이터마이닝 알고리즘들
5
star
43

pagerank

PageRank
Jupyter Notebook
5
star
44

topic_embedding

Embedding words to topic space
Python
5
star
45

ekmeans

Epsilon constrained k-means for document clustering with noise removal
Python
5
star
46

sharing_korean_dictionary

다양한 분야의 한국어 part of speech tagging / named entity recognition 용 사전을 공유하기 위한repository입니다
Python
4
star
47

rnnspace

Space Correction using Character-level Recurrent Neural Network (RNN, LSTM, GRU, etc)
Python
4
star
48

lovit.github.io

HTML
4
star
49

washingtonpost_scraper

Washington Post Search Scraper
Python
3
star
50

archive_clustering_visualization

Visualize clustering result
Jupyter Notebook
3
star
51

korean-wikis-handler

한국어 위키피디아, 나무위키 데이터 핸들링
Jupyter Notebook
3
star
52

soygraph

Graph similarity & ranking algorithms
Python
3
star
53

python_upload_webserver

Flask, Waitress based file upload webserver
Python
3
star
54

sec.gov_scrapper

Scrapping code for www.sec.gov
Jupyter Notebook
2
star
55

ie_openseminar_1_from_text_to_doc2vec_tsne

Openseminar #1 From scraping to Word2vec, Doc2Vec visualization with t-SNE
Jupyter Notebook
2
star
56

s3-log-parser

AWS S3 access log parser
Python
2
star
57

fastcosine

Approximiated nearest neighbor search for sparse vector
Python
2
star
58

korean_autumn_hmm

"한국의 봄 가을은 짧아지고 있는가? 김동현, 신하용, 대한산업공학회지 2013" 논문의 재현
2
star
59

latex_sample

Latex 으로 문서 작업을 하고, git 으로 버전관리를 하는 것을 설명하기 위한 sample repository 입니다.
TeX
1
star
60

python-stopwatch

Python stopwatch
Python
1
star
61

simple_ner

Simple NER Extraction
Jupyter Notebook
1
star
62

bag-of-concepts

Python
1
star
63

crs_downloader

Python
1
star
64

reddit_scraper

Reddit scraper. Get latest posts from Reddit
Python
1
star
65

wilsoncenter_scraper

Wilsoncenter web page scraper
Python
1
star
66

s3log_monitor

S3 log monitor
Python
1
star
67

network_based_nearest_neighbors

Network-based Nearest Neighbor Indexer
Python
1
star
68

lda_significance_rank

LDA 모델의 junk topic, words 탐색기
Python
1
star
69

imdb_scraper

Python
1
star
70

easy_wikitext

Wikitext dataset handler
Python
1
star
71

google_scholar_citation_keywords

Google scholar citation keyword
Jupyter Notebook
1
star
72

archive_acl2019review

Python
1
star
73

wsj_scraper

Scrapping thumbnails of search result in WSJ
Python
1
star