-
2019년 이후 사실상 관리가 되지 않았습니다. 19년도 당시에는 구현하고 싶은 것들은 많았지만 제 실력이 부족하여 기획했던 것들 중 많은 부분을 구현하지 못했습니다.
그리고 2024년까지 5년의 시간이 흐르는 사이에 NLP 에서는 많은 발전이 이뤄졌었습니다. 그 사이에 시기의 흐름에 맞춰 추가하고 싶은 기능들이 많았는데, 그 역시 현업이 바쁘다는 이유로…
lovit updated
6 months ago
-
``` bash
Python 3.7.4 (default, May 29 2020, 10:08:52)
[Clang 10.0.1 (clang-1001.0.46.4)] on darwin
Type "help", "copyright", "credits" or "license" for more information.
>>> from soynlp.utils imp…
-
```python
from soynlp.noun import NewsNounExtractor
noun_extractor = NewsNounExtractor()
```
위와 같이 실행 시 아래와 같은 메시지가 출력됩니다.
`local variable 'f' referenced before assignment`
사용환경은 python3.8입니다
-
source activate my_env
conda install packageName
-
```python
from soynlp.vectorizer import sent_to_word_contexts_matrix
x, idx2vocab = sent_to_word_contexts_matrix(
corpus,
windows=3,
min_tf=10,
tokenizer=tokenizer, # (default)…
-
안녕하세요 본 모델을 통해 자연어처리 해보려고 있습니다ㅎㅎ
일단 좋은 모델 제공해주셔서 너무 감사드립니다
다름이 아니라 kcELECTRA 파인튠 colab코드를 우분투 환경에서 ipython으로 똑같이 따라해보는데
def clean(self, x):
emojis = ''.join(emoji.UNICODE_EMOJI.keys())…
-
Soynlp를 `pip 9.0.1 from /Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/site-packages (python 2.7)` 가지고 설치를 시도했더니 description 모듈을 인식하지 못하는 문제가 발생해서 설치가 제대로 진행되지 않습니다. 혹시 해결해주실수 있나요?
-
## 토크나이저 관련 논의
* Komoran
* Okt
* Mecab
* Else?
-
안녕하세요,
한국어 텍스트 분석을 하고 싶어서 찾아왔습니다.
좋은 패키지 감사합니다.
nounextractor-v2_usage.ipynb 튜토리얼을 따라하고 있는데요,
세번째 셀
"%%time
noun_extractor = LRNounExtractor_v2(verbose=True, extract_compound=True)
noun_extra…
-
# haystack
- https://github.com/jinmang2/haystack/commit/f0fb95827d621748a8934185002313950f3b9bc9
```shell
pip install transformers datasets wandb tokenizers
git clone https://github.com/deepset-a…