今手元に仮想通貨関係のInfluencerたちの発したtweetとBTC価格のデータセットがあるのですが，ここからBTC価格に影響のありそうなtweetを抽出し，さらにwweetからBTC価格の上下を当てる，，なんてことを研究で行っています． 一旦はeventstudyでBTC価格に影…

入江開発室って知ってますか？最近twitterなどで徐々に認知度が上がっている開発者向けのオンラインサロンです camp-fire.jp 色んなプロジェクトが並行して走っていて，サロンメンバーは好きなプロジェクトに参加できるようになっています． このオンライン…

pickleの代わりにdillをつかうとセッション情報を保存できるらしい． qiita.com

webビデオ会議のシステムを作ってみた Web Conferencing System

コーパスとテキストマイング http://amzn.asia/2IbDzDK の読書メモ モデルの評価の基礎的な流れは以下のとおりです． 1.訓練データからモデルを学習する 2.評価データの説明変数をモデルに入力し評価データの目的変数の値を推測する． 3.実際の評価データの…

コーパスとテキストマイング http://amzn.asia/2IbDzDK の読書メモ モデルの評価の基礎的な流れは以下のとおりです． 1.訓練データからモデルを学習する 2.評価データの説明変数をモデルに入力し評価データの目的変数の値を推測する． 3.実際の評価データの…

コーパスとテキストマイニングより引用 --------------------------------------------------------------------------------------------------- Bollenら(2011)は，２００８年２月２８日から１１月２８日の9,853,493個のtwitterのテキストを分析し，米国の…

シンプルなテーマだが，あまり情報がなかったので調べてみた．なんらかテキスト集合からBag Of Words，つまり（単語ID, 出現回数）の集合を作る方法はよく情報提供がなされている． よく提供されている方法としてgensimのcorporaを使ったものがあるが，そこ…

awsなどのサーバーにssh接続した上で時間のかかる処理をしている場合， 基本的にパソコンをwifi環境から外してしまうとssh接続が途切れる． １０時間ぐらいかかるプログラムを回していて終電にぶちあたってしまったときなどは大変だ． そういうときの対策を…

という場合のの対処法 結論から言えば 以下のように site-packagesのパスを調べて sys.pathに追加してあげればOK!! #ライブラリのパスを設定 import sys sys.path.append("/home/ubuntu/anaconda3/lib/python3.6/site-packages") site-packagesのパスは使っ…

import MeCab#mecab = MeCab.Tagger(' -d /usr/local/lib/mecab/dic/mecab-ipadic-neologd')mecab = MeCab.Tagger('mecabrc -u expert.dic') import re from bs4 import BeautifulSoup from urllib.request import urlopen # ストップワードを定義def make_s…

[Python] PandasのDataFrameの行を反復処理する方法は？ rows | CODE Q&A [日本語] こちらのサイトを参考にした． 1.行をSeriesとして取り出す方法 DataFrame.iterrows()を使う 例 for row in df.iterrows(): print("c1 :",row["c1"],"c2 :",row["c2"]) 2.行…