Python

Thumbnail of post image 041

スクリプトに一行挿入する.この場合,変数hogeに括弧内以外の文字列が入っているときにエラーをだす.

assert hoge in ("hogeA", "hogeB", "hogeC")

Python

Thumbnail of post image 157

個人的に,入出力をdocoptを記述し,コンフィグ情報はyamlを使って引数として取り込むのが好きなので,そのスクリプトについてメモしておく.decoptの記述では,空行を設けることが重要なので,必要以上に詰めて書かないこと. ...

ELECTRA,Google Cloud Platform,Tensorflow

Thumbnail of post image 091

GCP経由でTPUを利用することによって,ELECTRAの事前学習を実行する方法を紹介.

必要なサービスCompute Engine
Cloud TPU
Cloud Storage
手順Cloud Shell ...

Google Cloud Platform

Thumbnail of post image 133

前提条件既にGoogle Cloud Platformでプロジェクトを作成されていること
AWS S3にアクセスするためのセキュリティキーをもっていること
設定ファイルの生成と編集

まずは以下のコマンドでオプション変更を行う ...

Google Cloud Platform

Thumbnail of post image 149

GCPでインスタンスをたてるまでの手順を紹介.

Compute Engineでインスタンスの作成

Compute EngineはAWSでいうところのEC2インスタンスにあたり,機械学習のアプリケーションを動かすためのサーバー ...

AWS,EC2

Thumbnail of post image 042

AWS EC2を使っていると以下のように”insufficient capacity”エラーがでて起動が失敗することがある.

これは,AWSにおけるインスタンスの容量が上限に達したことが原因で発生す ...

Uncategorized

Thumbnail of post image 019

一言で説明すると,フォン・ノイマン・ボトルネックを大幅に軽減したことで計算効率が改善されている,という説明になる.

詳しい仕組みはわかっていないため,今後調査していく.

本記事では,大まかな説明が載っているサイ ...

Flair,Python

Thumbnail of post image 068

FlairでNERを実施した際,training.logというのが出力されるのだが,これにはmicro F1は載っているが,micro recallとprecisionは載っていない.このため,ログファイルからTP, FP, FNを読 ...

Python

Thumbnail of post image 078

生データを処理しているとよく遭遇する複数のスペースを含む文章.

2つ以上のスペースを1つにしたいときは以下のコマンド

' '.join(mystring.split())