Entries from 2019-01-01 to 1 year

ローカルマシン(mac)にJuliaをインストールしてJupyter notebookで使えるようにするまでの手順

Installation of Julia (mac) Download and execute the installation file from: https://julialang.org/downloads/ Add the path to the PATH reference: https://en.wikibooks.org/wiki/Introducing_Julia/Getting_started $ PATH="/Applications/Julia-1…

”Approximating Interactive Human Evaluation with Self-Play for Open-Domain Dialog Systems"

https://arxiv.org/pdf/1906.09308.pdf 章立て Introduction Related work Knowledge distillation for sentiment and semantic regularization Interactive evaluation methodologies Experiments Conclusions 概要 "対話システムで、発話に対する人間の評…

[論文紹介]“What is your data worth? Equitable Valuation of Data"

https://arxiv.org/pdf/1904.02868.pdf 概要 教師あり機械学習を各データポイントによる共同作業と見なす。各データポイントはプレイヤーであり、学習アルゴリズムを通して共同して予測スコアの向上を目指す。ゲーム理論で提案されたシャープレイ値を用いて…

論文紹介: "R-TRANSFORMER: RECURRENT NEURAL NETWORK ENHANCED TRANSFORMER"

https://arxiv.org/pdf/1907.05572.pdf 概要 Globalな情報はTransformerのSelf-Attentionで、Localな情報をRNNで取得するという手法の提案。Transformerは大域的な情報に強いものの局所情報はposition embeddingという限られた情報に依存しているため、これ…

論文紹介: "Towards Automated Machine Learning: Evaluation and Comparison of AutoML Approaches and Tools"

下記論文の紹介 https://arxiv.org/pdf/1908.05557.pdf 概要 Auto-MLを実現する各種ツールの機能と、様々なデータセットに対するパフォーマンスを調査したサーベイ。 手法 各種データセットを独自の指標に基づいてセグメント分けして様々な比較をした。各種…

神戸市データサイエンティスト募集要項(完全転載)

下記ページの完全転載です。消される前に永久保存です。EBPM分野のデータサイエンティストの業務内容や待遇のベンチマークとして参考にしてください。 www.city.kobe.lg.jp 記者資料提供(令和元年6月26日) 企画調整局産学連携ラボ データサイエンティスト…

ARIMAXの使い方

モチベーション 職場でいきなり時系列モデルのPOCをやることになり、時系列分析初心者だったので大変な思いをした。exogenousやら外生変数やら何だかおどろおどろしい用語が出てきて怖気付きそうだったがPythonなら一発だった。Python愛がここでも深まった。…

docker containerはdocker imageの写像である

前提知識 docker containerはdocker imageの写像である 作業はdocker containerの中に入って行うのであってdocker imageの中で行うのではない docker imageからdocker containerを作り、docker containerの中に入って作業をするのであって、docker imageの中…

RNN or from front to back time series reading

The structure of RNN shows that the previous node connects to the current node. This connection is drawn in 2-dimension such that the previous node sits in the left side and the current node sits in the right side. However, when you see th…

How can you trim the file size of ipynb which is so big that your kernel cannot open it?

I was working on multi-variate regression analysis. There were over 80 explanatory variables so I used the AIC (Akaike information criterion) with step function in order to reduce these. BTW, the AIC step function does not exist in Python …