FlairでELMoをEmbeddingとして使う
from flair.data import Corpusfrom flair.embeddings import TokenEmbeddings, WordEmbeddings, StackedEmbeddingsfrom flair.d ...
Flairのtag_dictionaryをハードコーディングで入力
datapath = "/path/to/BIO" # train.tsv, test.tsv, devel.tsvが入っているフォルダcorpus: Corpus = loadCorpus(datapath)tag_type = "ner ...
BERT is Not an Interlingua and the Bias of Tokenization, DeepLo@EMNLP-IJCNLP 2019
多言語BERTの、語彙の問題(closed vocabulary problem)を言語学の系統樹にマッピングし、言語学者が作成したものと比較
結果、サブワードか、単語か、文字レベルの分割方法で得られる系統樹の形に違いが現 ...
Cloud9にSSH接続を追加 [AWS]
AWSのCloud9のCreate environmentで、Create a new EC2 Instance for environment (direct access)により、ダイレクトに環境を作った後でも、SSH接続をコマン ...
SSL証明書の自動更新で失敗した事例集
証明書の自動更新ができていなかったため、手動で更新の事例
AWS lightsailで証明書の自動更新設定。legoというツールを使って更新
ワイルドカード証明書の自動更新。IAMを作成し、DNS認証を行うシェ ...
Lightsailで立てたWordPressのSSL証明書を3か月おきに手動更新する業を背負ってしまった人へ[Letsencrypt][更新]
AWS lightsailで作成したwordpressインスタンス上で certbot renew を実行すると、以下のようなエラーが発生する。
Attempting to renew cert (vasteelab.com) ...Holoplay serviceのアンインストール方法
looking glassをインストールするときについてきた、Holoplay serviceというアプリが、macのツールバーにずっと表示されて邪魔だったので削除してみた。
検索から”holoplayR ...
How to create vocab.txt ? [BERT][ELECTRA][Tokenizers]
pip install tokenizersfrom tokenizers import BertWordPieceTokenizerfrom glob import globimport jsontxt_path = '/path/to/ ...
現在使っているPythonのPYTHON PATHを調べる
Cloud9やSpyderなどのIDEを使っていると、PYTHON PATHを求められることがあるので、これを調べる方法を紹介
調べる方法は簡単で、現在使っているpythonで以下を入力するだけ
python -m ...