yomitech

【Python】自然言語処理でラーメン屋を分類してみる

はじめに こんにちは、コピペデータサイエンティストです。 3年ぐらい前に「ラーメンと自然言語処理( 長くなったので3行でまとめると Web上に転がっている口コミとか紹介文を

LDAによるトピックモデル with gensim ~ Qiitaのタグからユーザーの嗜好を考える ~

はじめに この記事では pythonのライブラリの gensimの中のLDAのモデルを使ってフォローされたQiitaタグの関係からユーザーの嗜好を考えてみようということをやってみます。 トピックモデルやgensimを実際にデータと共に使ってみることでどんなものか見てみることを目的とします。これを入り口にしてトピックモデルを実際に使ってみたり、詳しく勉強をはじめるきっかけとなれば幸いです。 LDAの…

自然言語処理による文書分類の基礎の基礎、トピックモデルを学ぶ

自然言語においても、最近は生ビールを頼む感覚で「とりあえずディープラーニング」となることが多いです。実際ディープラーニングは高精度を記録できることが多いですが、実はその精度は基礎的なモデルでも記録できたり、あげく負けるようなこともあったりします。 研究機関として名高いDeepMindの発表した論文でも、こうした事態がありました。 文章を読み、理解する機能の獲得に向けて-Machine Compre…

PyCon2017に参加したときに調べたこと

とりあえず調べたWebページだけ共有します。後から資料をつけたりコメントつけたりしていきます。 Day1 野球を科学する技術〜Pythonを用いた統計ライブラリ作成と分析基盤構築 | PyCon JP 2017 in TOKYO( <script async class="speakerdeck-embed" data-id="a40e62b5a44b4e23af37a07c8e84b2f6" d…

コロナ社「統計的パターン認識と判別分析」本のレビュー

はじめに 　コロナ社から出版された「統計的パターン認識と判別分析」本のレビューです。ここ数年の間で機械学習の有用性が産業界で大きく認識され、機械学習を用いたサービスが様々とでてきました。この書籍では、機械学習の入門書として、トラディショナルな統計的パターン認識の手法について述べられてます。この書籍で取り上げられた手法の一覧を列挙します。 <a href=" width="150" alt="統計的…