要約 Mermaidで会話フロー図を作るとそれを読み込んで対話botを構築してくれるスクリプトを作った。さらに、出来上がった対話 bot を AWS lambda + Slack API 構成で Slack 上で動くようにした。 要約 出来上がった品 経緯 技術要素 出来上がった品 slack上…
要約 冬休みに AWS を勉強していて実践してみたくなったので簡単なアプリを作ることにした.作ったのは自分のホームページの管理アプリ.読んだ本や映画の感想を一覧にしているのだが,シンプルにhtml直書きのソースゆえ,いちいち手打ちで <tr> とか書かなきゃ</tr>…
あまりに暇なのでこっちに引っ越してからの生活環境をまとめてみることにした.折角色々考えて生活しやすいように家具とかを揃えたので,誰かの参考になったら嬉しい. 立地 住居 部屋は10畳くらい(ただし収納多め) グリル付きキッチン 宅配ボックス 家具 …
要約 pyrouge を入れるのに手間取ったのでメモ pyrouge とは文書要約タスクで利用される評価指標である ROUGE を Python で計算するモジュールです.今回は Docker で環境構築しております. 最初に答えを述べておくと,以下の Dockerfile で pyrouge がイン…
要約 PyTorch でマルチ GPU してみたけど,色々ハマったので記録に残しておく.データ並列もモデル並列(?)もやった. メインターゲット PyTorch ユーザ GPU 並列したい人 要約 メインターゲット 前提知識 並列化したコード モデル 主なコンポーネント 補…
PyCharm で flask プロジェクトを作って,PyCharm 上で実行したら,スクリプトで指定している設定が反映されなくて困った. 経緯 flask プロジェクトを作成 スクリプトを編集 実行 & 問題発生 真相 対処 真面目な対処法 雑な対処法 あとがき . 経緯 flask プ…
経緯 PyTorch で画像系の学習をするときに, RandomFlip や RandomCrop をよく使う.最近研究関連で,オブジェクト位置,セグメンテーション,画像を順に生成していく既存モデルを構築しており,それらのデータでランダムな部分を統一する必要があった.なか…
経緯 研究室のお金でディープラーニング分散学習ハッカソンに参加してきました. www.cc.u-tokyo.ac.jp 東京大学情報基盤センターが主催する、マルチGPUを使った学習のハンズオン。申し込みは締め切られているが、資料が公開されており分散学習の仕組みと課…
経緯 lab メンが某会議への論文投稿でハマっていたのをみんなで解決した.ググってもなかなかドンピシャの解決にたどり着けなかったので記事に残す. 経緯 想定する読者 発生した問題 対処 あとがき 想定する読者 論文の投稿を dvi + eps 形式で行うように指…
経緯 研究の一環で Amazon Mechanical Turk (MTurk) を使う機会があった.日本語のドキュメントや記事が少なく,ところどころ苦戦したので,使用感などをメモっておく. 私が参考にした大変よくまとまった資料を以下に紹介する.MTurk を使うための資料とし…
経緯 サマーインターンで2ヶ月間,株式会社レトリバ様(以下敬称を略させていただきます)にお邪魔し,製品開発の職業体験をさせていただいたのでその記録です. retrieva.jp 想定する読者 来年以降インターン時期になるNLPer レトリバに興味がある人 レトリ…
経緯 授業でランダムフォレストを使ってみる課題が出たが,いまいち feature_importances_ の算出方法がわからずモニョったので調べてみた. 想定する読者 sklearn を使う人 決定木がなんとなくわかる人 ランダムフォレストが主に分類に用いられるアルゴリズ…
経緯 系列ラベリングの代表的な手法として HMM と CRF はそれぞれ聞いたことあるし概要は本を読んでわかったつもりになっているけど,どうもそれらの違いがわからないなぁ...と思ってちょっと調べてみた.意外と日本語の記事が見つからず,英語の記事でいい…