こんにちは、安部です。 最近急に、暖かさを通り越して暑いぐらいになってきましたが、皆さまいかがお過ごしでしょうか。 季節外れかなとも思いつつ、もう半袖で過ごしたいくらいの気候ですね。 さて、今回は、OpenAIのAssistants APIの使い方を紹介していきます。 題材は「PDFを和訳して要約してもらう」としました。 これはWeb版のChatGPTでも単にPDFファイルを添付して依頼すればできますが、APIの使い方を示すサンプルとしてはちょうどよいと思います。 最新情報については以下の公式ドキュメントをご覧ください。 https://platform.openai.com/docs/assistants/overview https://platform.openai.com/docs/api-reference/assistants それでは早速、Assistants APIの使い方
これは二段構えの構成を持っています。この二段構えを正確に検出し、テキストを理解することが望ましいです。 Unstructuredを使うPythonのライブラリであるUnstructuredを試してみましょう。 参考記事 導入は非常に簡単です。 pip install 'unstructured[pdf]' 実装も簡単です。 解析コード： from unstructured.partition.pdf import partition_pdf pdf_elements = partition_pdf("pdf/7_71_5.pdf") 表示コード： for structure in pdf_elements: print(structure) 結果： 残念ながら、2段組のカラムを正確に検出することはできませんでした。 Grobidを使うGrobidは、peS2oというオープンアクセス論文のコ
年末年始はこの本を読んでいた。 GitLabに学ぶ 世界最先端のリモート組織のつくりかた ドキュメントの活用でオフィスなしでも最大の成果を出すグローバル企業のしくみ 作者:千田 和央翔泳社Amazon コピーコントロールがない電子書籍が買える場合はなるべくKindleよりもそちらを買うことにしている。 翔泳社は自前でPDF版を売っていて、しかもしばしば40%オフといった大幅値引きのセールを行なっているので、今回はそこで買った。 www.seshop.com オライリーや技術評論社の電子書籍はePubが取得できる場合が多くて、基本はGoogle Play Booksのアップロード機能を使い、Kindleでも読める本の場合はSend to Kindleを使っている。 しかしKindleやGoogle Play Booksは、PDFの目次が表示できないので使いづらい。Acrobatか、iPadで
「個人情報の保護に関する法律についてのガイドライン」 に関するＱ＆Ａ 平成 29 年２月 16 日 （令和３年９月 10 日更新） 個人情報保護委員会 目次- 1 - 「個人情報の保護に関する法律についてのガイドライン」 に関するＱ＆Ａ 目次 １ ガイドライン（通則編）..................................................... 1 Ｑ１－１ 「特定の個人を識別することができる」とは、どのような意味ですか。. 1 Ｑ１－２ ガイドライン（通則編）では、氏名のみでも個人情報に該当するとされてい ますが、同姓同名の人もあり、他の情報がなく氏名だけのデータでも個人情 報といえますか。 ................................................. 1 Ｑ１－３ 住所や電話番号だけで個人情報に該当しますか。.....
データ活用は過度な期待を超え、徐々にビジネスパーソンの基礎的なノウハウとして定着し始めています。データサイエンティストでなくとも、データ分析の基礎的な考え方やその手法について学びたいという方は多いはず。 皆さんは、2021年3月に初学者向けの入門書『データ分析のための統計学入門 原著第4版』日本語版pdfが何と無料で公開されたのをご存じでしょうか？ 同書籍は以下のリンクから、閲覧可能です。 http://www.kunitomo-lab.sakura.ne.jp/2021-3-3Open(S).pdf 本記事では同書を書評し、データ活用・統計学初学者におすすめの使い方をレクチャーします。 『データ分析のための統計学入門』の内容は？ 何が学べる？ 『データ分析のための統計学入門』は米国のNPO OpenIntroが発行した書籍で、Mine Cetinkaya-Rundel、David M D
R&D チームの徳田（@dakuton）です。 過去何回か、Tech Blog記事にてPDFやOCR、自然言語処理に関する手法を紹介してきましたが、今回もそちらに関連する内容です。 過去記事 tech-blog.optim.co.jp tech-blog.optim.co.jp tech-blog.optim.co.jp やりたいこと PDFからテキストを抽出する際に含まれる、中途半端な位置にある改行を除去することが目的です。 シンプルな方法としては、句点(。)の位置をもとに改行する方法ですが、今回はspaCy(とGiNZA)を併用した場合にどうなるかを試してみることにします。 テストデータ 今回は、下記記事のPDFを使用しました。 財務省「ファイナンス」令和３年2月号 の「ポストコロナ時代を形作る、コロナ禍で生まれるDX（デジタルトランスフォーメーション)」 1 メディア掲載情報: 財務
audience: who is this book for how to read this book special thanks technical editor the author what this book is about what this book is not debug comments operators parenthesis brackets references variables constants types invoke function declaration VS function expression named function expressions scope private and nested scope context global context method context invoking a function via call
これは PHP Advent Calendar 2015 21日目の記事です。 Thinreports for PHP については、まだ alpha 版だったときに下記 Qiita エントリーでも紹介していましたが、先日 0.8.0 正式版をリリースしたので PHP7 でのサンプルコードや、alpha 版からの変更点などを含め、改めて紹介したいと思います。 qiita.com Thinreports for PHP とは まず、Thinreports （シンレポーツ）について説明する必要があります。 Thinreports Thinreports は、2010年ごろオープンソースとしてリリースされた、Ruby 向けの帳票・PDFツールです。下記のような特徴があります。 国産 OSS レイアウトデザインツール Thinreports Editor と、レイアウトファイルを読み込んで PDF
PDFのファイル構造を理解すると、テキストエディタでも直接PDFファイルを作ることができるようになります。このエントリーではPDFファイルの基礎要素を説明し、簡単なPDFファイルを例にしてファイル構造を説明します。更に、テキストを渡すとPDFファイルを吐いてくれる簡単なプログラムや、PDFを読み込んで簡単な解析をするプログラムを書いてみます。 目次 目次 まえがき オブジェクト 間接参照 ファイル構造 Hello, world! ヘッダ トレーラ 相互参照テーブル 本体 PDFを生成するプログラム 日本語の扱い方 日本語を含むPDFを生成するプログラム グラフィックス PDFを読むプログラム あとがき まえがき 1990年代前半、アドビシステムズは、どのプラットフォームやデバイスでも文書を確実に表示・共有できることを目的としてPDFファイルフォーマットを開発しました。 PDFの表示ソフト
Python編に続いて，Rubyから利用できるオープンソースのPDF出力ライブラリをできるだけ集めてみました。 PDFに対して分割・結合などの加工を行うためのライブラリは含めていません。 記述に漏れや誤りがあれば訂正しますので，ご指摘ください。 ざっと見た限りでは，Haru Free PDF Library か Prawn がよさそうに見えました。 © Graph-S｜写真素材 PIXTA The Ruby PDF Tools 主な特徴 pure Rubyで記述されたPDFライブラリ PDF::Writerと color-tools の２つのサブプロジェクトに分かれている。 PDF::Writer は以前 pdf-writer と呼ばれていたもの？ 日本語パッチをあてれば日本語PDFも作成可能 配布場所http://ruby-pdf.rubyforge.org/ Haru Free PDF
IBM Instana Observabilityで、障害検知精度を高め、原因調査に要する時間を削減しました。 事例を読む Instanaとは 最新情報 EYとApptio、企業のテクノロジー支出の可視化と管理のための共創ソリューションを提供開始 Metal X®の新規サービス「日次共通納期管理表サービス」の提供開始 山形銀行の炭素会計プラットフォーム(Persefoni)導入を三井住友銀行と日本IBMが支援 ServiceNowをアプリケーション基盤として活用したローコード開発の技術者を育成し、地域ビジネスの活性化を推進する「IBM地域ServiceNow人財育成プログラム」を提供開始 日本IBM とIIJが協業し、地域金融機関向けに「分散基盤共同プラットフォーム」を提供開始 三菱UFJ銀行、IIJとの協業により、既存の枠組みを超え、地域金融機関向けに新たに「金融ハイブリッドクラウド・プ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
