係り受け解析器の学習機能

もう少し自然言語処理の意味理解よりのことをちゃんと勉強してみようと思う今日この頃。のやったことメモ_φ(･_･今回は、係り受け解析器のうち、CaboChaとJ.DepP の学習機能を動かしてみたのでその辺の備忘メモ準備 CaboChaは既にインストール済み。モデル…

2015-11-15

Python requests SSLError: EOF occurred in violation of protocol

Python エラーメモ

とあるs付きのAPIにリクエストを投げた時に発生したエラー_φ(･_･ python 2.7.10 opelssl 1.0.1e requests 2.8.1 In [21]: r = requests.get(url) --------------------------------------------------------------------------- SSLError Traceback (most re…

2015-11-04

MeCabのドメイン適応（再学習）

MeCab 自然言語処理

MeCabのドメイン適応（再学習）すぐ忘れるので、他にも記事たくさんあるけど、なんとなく備忘メモ（手順だけ）。 MeCab: オリジナル辞書/コーパスからのパラメータ推定まず、MeCabがGoogle Project Hostingから消えてた。。。今はGooglドライブからもろもろ…

2015-10-10

ApacheアクセスログをElasticsearchへ流す

Elasticsearch Fluentd

Elasticsearchはdockerコンテナで用意、Apache側は落ちてたwordpressのコンテナにtd-agentをインストールしてテスト td-agent 0.12.12 Elasticsearch 1.7.1 td-agent のインストール curl -L https://toolbelt.treasuredata.com/sh/install-ubuntu-trusty-td…

2015-09-27

RDBのデータをELKで集計・可視化する

Elasticsearch Logstash

たまにくる「これの件数教えて」とか「Kibana見て」にしたいとりあえずとっかかりとして、MySQLからElasticsearchにデータもってって、Aggregationを触ってみる MySQL入力からElasticsearch出力とか基本的なSQLの集計クエリをどう置き換えるかとかあたりの…

2015-09-13

MacBook AirのPython環境メモ

環境メモ Python

７月ぐらいから、pyenv、pyenv-virtualenv 使うように変更、その時のメモ1 ) install pyenv $ brew install pyenv $ echo 'eval "$(pyenv init -)"' >> ~/.bash_profile $ exec -l $SHELL2 ) install 2.7.10 ＃普通にpyenv install 2.7.10 だとzlib extensio…

2015-08-30

Sparkコンテナ（勉強用）

Spark

Sparkの勉強するのに、また手元の開発環境ごちゃごちゃになるのは困るのでDockerコンテナを作ってみた話。hiropppe/docker-spark-yarngithub.com初め探してsequenceiqのとかあったけど、Dockerのマルチコンテナでのクラスタの組み方とかも勉強したかったので…