AWS

Thumbnail of post image 089

AWSのマネジメントコンソールにログインすると、リージョンがバージニア北部などに設定されていることがある。これを毎回東京に変更するのは面倒なので、下記よりデフォルトの設定を変更しよう。

統一された設定>全般設定より設定可能 ...

Python,PyTorch

Thumbnail of post image 184

乱数を発生させる前にtorch.manual_seedを置く

# 直前に置くtorch.manual_seed(42)nn.Parameter(torch.randn(1, 50 + 1, 768))>>Parameter co ...

Transformer

Thumbnail of post image 165

Huggingfaceで下記コマンドを実行すると、ViTの最終層のベクトルが得られる

model = ViTModel.from_pretrained('google/vit-base-patch32-224-in21k', o ...

MeCab

Thumbnail of post image 132

バージョンによって読み込み方が異なるため,注意が必要

新しいバージョンでの読み込み方

from flair.tokenization import JapaneseTokenizertokenizer = Japan ...

Python

Thumbnail of post image 013

models = for BenchmarkModel in models: runs = [] model_name = BenchmarkModel.__name__.replace('Model', '')

PyTorch

Thumbnail of post image 194
from torch.autograd import Variable# Function to save the modeldef saveModel(): path = "./myFirstModel.pth" torch.save(m ...

Uncategorized

Thumbnail of post image 011

基本的には以下のAWSドキュメントに従うことになる.本記事では以下より実行コマンドを抜粋する形で手順を紹介.

Certbotをインストールするまでsudo apt-get updatesudo apt-get install s ...

BERT,PyTorch,Transformer

Thumbnail of post image 135

AI SHIFT様が作成されたブログ記事が分かりやすかったので、筆者としての解釈を自分用メモとして残すことにする。

Kaggleで学んだBERTをfine-tuningする際のTips①〜学習効率化編〜 | 株式会社AI ...

Stock

Thumbnail of post image 023

投資をしていると,株価だけではなく,雇用統計やガソリン価格などを観察したいと思うことがあるだろう.そんなときはセントルイス連邦準備銀行の研究部門によって維持されている経済指標データ閲覧サイトFREDを使うと良い.

本記事で ...

JAX

Thumbnail of post image 071

Pytorchだと.cuda()などでGPUを使うのだが、JAXの場合はpipインストール時にcudaのバージョンを指定することでGPUを使うことができる。

環境にインストールされているCUDAのバージョンが10.02の場 ...