今週のQiita技術書まとめ
2023年6月11日配信
大規模言語モデル(LLM)とそれまでの技術の流れを入門用にまとめた
大規模言語モデル系があまりに研究が早く、かといってインパクトから考えると無視もできずフォローするために自分用にまとめました。 すでに多数の良記事がありますが、入門用にしては細かすぎて俯瞰ができない、概要すぎて次に進めない記事が多かったので、入門から次に進むステップまでとして書いてみました。(あとMermaidで手軽に作図できるとのことでその練習用!) 技術の流れ - ざっくりとした流れ merma…
大規模言語モデルは新たな知能か
対話型サービスChatGPTは驚きをもって迎えられ、IT企業間で類似サービスをめぐる激しい開発競争が起こりつつある。それらを支える大規模言語モデルとはどのような仕組みなのか。何が可能となり、どんな影響が考えられるのか。人の言語獲得の謎も解き明かすのか。新たな知能の正負両面をみつめ、今後の付き合い方を考える。 ■著者からのメッセージ 本書では大規模言語モデルの可能性と課題、その仕組みを一般の方に向けて書きました。また最新の研究成果にもとづいて現時点でわかっている知見や将来の展望もまとめています。 本書では大規模言語モデルのもつ大きな可能性とともに、考えられるリスクについても述...
ディープラーニングによる自然言語処理
【基礎から最先端のBERTまで、ディープラーニングによる自然言語処理をコードを動かしながら楽しく学ぶ】 ディープラーニングによる自然言語処理の基礎から応用までコードを動かしながら学べる書籍です。文書分類、評判分析、固有表現認識の3つの実践的なタスクを通じて、ディープラーニングによる自然言語処理を理論と実装の双方の側面から学ぶことができます。 ■基礎から最先端のBERTまでを解説 ディープラーニングのモデルとして、bag-of-embeddings、CNN、LSTM、BERTの4つを解説しています。 基礎的なモデルから最先端のBERTまでを一冊で学べます。 ■Pythonライブラリ「...
機械学習エンジニアのためのTransformers
Hugging Faceの開発者による解説書! 「Hugging Face Transformers」を使った自然言語処理の解説書。2017年の登場以来、Transformerと呼ばれるアーキテクチャを使った大規模なモデルが急速に普及しています。本書では、Hugging Faceの開発者らが、「Hugging Face Transformers」を使って、これらの大規模モデルを学習しスケールする方法をわかりやすく紹介します。テキスト分類、固有表現認識、テキスト生成、要約、質問応答といったタスクだけでなく、蒸留、量子化、枝刈り、ONNX Runtimeといったモデルの高速化技術、ラベル付き...
Transformerによる自然言語処理
機械翻訳,音声テキスト変換といった技術の基となる自然言語処理。その最有力手法である深層学習モデルTransformerの利用について基礎から応用までを詳説。〔内容〕アーキテクチャの紹介/事前訓練/機械翻訳/ニュースの分析。
実践 自然言語処理
さまざまな自然言語処理タスクを実装し実際のビジネスシーンへ適用する! 自然言語処理(Natural Language Processing:NLP)の本格的な実践書。過去10年間で起きたブレークスルーにより、NLPは小売、医療、金融、法律など、さまざまな分野での利用が増えてきました。急速に利用が拡大する中で、産業界でNLPを使ったシステムを構築するのに必要な知識を学べる講座や書籍は不足していました。本書を読むことで、NLPの要素技術やSNS、Eコマース、医療、金融といった具体的なビジネスへの適用方法に加えて、NLPシステムを開発するためのベストプラクティスを詳しく学べます。
自然言語処理のための深層学習
自然言語処理におけるニューラルネットワーク技術を「ニューラルネットワークまずありき」ではなく,これまでの様々な方法論と比較し,それらとの位置関係を丁寧に説明している。 従来の機械学習技術から説き起こして,ニューラルネットワーク技術の利点や特徴を明らかにしながら,その導入を行い,言語処理の基盤技術となったニューラルネットワークによる言語モデルと単語埋め込み(ニューラルネットワークを用いた単語の意味表現)について,その背景や応用を含めてわかりやすく説明している。 特に単語埋め込みについては,その様々な利用方法を詳しく紹介しており,言語処理の様々な問題に深層学習を活用する方法について取り上...
キャリアビジョンを考え、自分の市場価値を高める重要性
はじめに 本記事はこちらのキャンペーンの参加記事となります。 参考記事にも選ばれました。 私が思うキャリアの考え方について書いてみました。 内容が良ければぜひ「♡ いいね!」を教えていただければ幸いです。
世界一やさしい「やりたいこと」の見つけ方 人生のモヤモヤから解放される自己理解メソッド
「何かやりたいけれど、何をやればいいか分からない」 そんなエネルギーを持て余してしまっているあなたの人生が変わります。 「やりたいこと探し専門プログラム」を開発した著者が教える初めての本。 やりたいことは運命的に出会うものではなく、体系立てて論理的に見つけるもの。 やりたいことの見つけ方が3STEPで体系立てて理解できる、自己理解の教科書です。 はじめに 第1章:やりたいこと探しを妨げる5つの間違い 第2章:なぜ「やりたいことが分からず迷い続けてしまう」のか? 第3章:「やりたいこと探しを最速で終わらせる公式」自己理解メソッド 第4章:人生を導くコンパス「大事なこと」を見つける 第5...
pathlib,tkinter,osを使って伝言メモ作成のプログラムとアプリを作ってみた!
今回は前回、前々回と同じテキストを参考に、電話を受け取った際の伝言メモ作成のプログラムを作ってみました。まずはコマンドラインに必要事項を入力する基本的なプログラムから紹介し、その次に拡張版として、アプリから必要事項を入力するタイプのプログラムを紹介していきます。参考にした書籍はこちら 最初にコマンドラインから入力する、プロトタイプから紹介していきます。 このプログラムを実行すると、上図のよう…
Pythonでチャレンジするプログラミング入門 --もう挫折しない!10の壁を越えてプログラマーになろう
プログラミング言語Pythonを使ってプログラミングに挑戦する本です。プログラミング初心者向けの勉強会の運営にかかわっている著者ふたりが、そこで学んだ初心者がつまずくポイントを「10の壁」として定義し、各章でそれを乗り越える構成にしています。初心者に加え、一度プログラミングに挫折した「再」入門者も対象に、やさしく解説しています。 <10の壁> 学習継続力の壁/PCスキルの壁/環境構築の壁/変数の壁/組み立て方の壁/練習から実用の壁/読みやすいコードの壁/アイデア実現の壁/完成の壁/プログラマーらしさの壁
日本統計学会公式認定 統計検定準1級対応 統計学実践ワークブック
統計検定準1級試験対応の公式テキスト。 出題範囲となっているさまざまな統計学及び機械学習のトピックについて、実践的な例題を解きながら学ぶことができる。 頻出項目に重点をおき、項目ごとに解説と例題を示した。 統計検定準1級で出題されるトピックは非常に広範にわたるため、さまざまな統計的手法の辞典としても役立つ。 【 目 次 】 1 事象と確率 2 確率分布と母関数 3 分布の特性値 4 変数変換 5 離散型分布 6 連続型分布と標本分布 7 極限定理,漸近理論 8 統計的推定の基礎 9 区間推定 10 検定の基礎と検定法の導出 11 正規分布に関する検定 12 一般の分布に関する検定法 1...
基礎から学ぶ統計学
「統計学を理解したい」と真面目に考える人へ.統計がわからない. . .と挫折したことがある人へ. 10年を越える学生との試行錯誤が生んだ,学部を問わない“統計学の基礎”が身につく,新しい入門書. ▽3つの特色 ●図を多用する ●実践的な手法を中心に学ぶ ●数学のハードルを下げる 3つの特色と講義経験に基づく構成・展開で,初学者のつまずくポイントに,ていねいに伴走します. ▽扱う範囲 ●t検定 ●分散分析 ●多重比較 ●相関分析 ●単回帰分析 など,仮説検定の論理,母平均に対する統計解析,2変数の関係までを扱い,基本的な統計手法の計算の原理を,直感で,しっかり理解できるところまで導...
日本統計学会公式認定 統計検定 2級 公式問題集[2018〜2021年]
大学基礎課程(1・2年次学部共通)の統計学の知識の習得度と活用のための理解度を問います。2018年6月・11月、2019年6月・11月、2021年6月に出題された問題と解説を収録!
新装改訂版 現代数理統計学
多くの読者から親しまれてきた定評あるテキストの新装改訂版. 数理統計学の基礎的な概念,標準的な理論を数学的説明だけでなく言葉で丁寧に解説する.さらに,広範にわたる話題を一貫した視点でとらえることにより統一的・俯瞰的な理解へ導く. このたびの改訂では読者の学習の便宜をはかり,新たに40題の練習問題を追加するとともに,問題解答例をサポートサイトにて公開する. 統計検定®1級試験に向けた学習にも好適. 【統計検定®推薦図書】 ※ 本書は,1991年11月に創文社より刊行されたものを新たに組み直し増補改訂した新版です. ※ 統計検定®は一般財団法人統計質保証推進協会の登録商標です. 第1章 前...
日本統計学会公式認定 統計検定 準1級 公式問題集
本書では、準1級試験が開始された2015年から2021年の全6回分の紙媒体の試験問題を全問収録・解説しています(2020年は実施なし)。 2021年から開始されたCBT(コンピュータテスト)の試験問題は公表されておりませんが、出題範囲や難易度の点から、本書で対策していただけるようになっております。
【Vim】実践Vimの実践 【第4章 ビジュアルモード】
Introduction 実践Vimをまとめるシリーズの第 4 章です。 第 1 章:ドットコマンド 第 2 章:ノーマルモード 第 3 章:挿入モード
イキってAWS SAAを英語受験した話
2023年5月にAWS 認定ソリューションアーキテクトアソシエイト試験を英語で受験してなんとか合格することができたので、どのように勉強したのかを紹介します。 AWS SAAとは AWS SAAはAWS認定資格^1の一つで、取得するとAWSに関する幅広い知識を持っていることを客観的に示すことができる認定資格です。 ^1: AWS認定には他にもいくつか種類があり、SAAはアソシエイトレベルとなります。…
【図解】同次変換行列による順運動学の解法【Python / ロボティクスの辞書】
この記事の他にも,ロボティクスの辞書( に様々なロボティクスに関する記事をまとめていますので、よろしければそちらもご覧ください! - 事前に必要な知識(見ておいた方が良い記事) - 順運動学の概要( - 三角関数による順運動学の解法( 前回までは、三角関数による順運動学の解法を紹介しました。
実践 ロボット制御
ロボットを自分の思ったように動かすー制御するためには、われわれは何を知ればよいのか? 本書は、ロボット制御の知識を体系的に解説するものです。 ロボット制御に関する従来型の教科書は、ロボットの運動学や動力学を数学的に一般化する、理論的な側面 が強いものが主流でした。制御工学や機械力学に基づく一ジャンルとしてのロボット工学があり、その視点からロボット制御を解説していたとも言えます。 ところで近年では、ロボット工学(ロボティクス)はほかの分野から独立して、一つの学問・技術分野として十分に形成されています。そのため、制御工学や機械力学の知識を取り込みながらも、ロボティクスとして包括的・実践的な教...