justtextは、HTMLから記事本文や主要なテキストのみを抽出するコマンドラインのツールです。
ウェブサイトをクロールしたあとに、そのHTMLから記事本文や主要なテキストのみを抽出すると、大規模言語モデルに与えやすくなります。
$ npm install --global @kokiito0926/justtextcurlなどで取得したHTMLをパイプでjusttextに流し込みます。
$ curl -sSL https://example.com/ | justtext-
Notifications
You must be signed in to change notification settings - Fork 0
HTMLから記事本文や主要なテキストのみを抽出するコマンドラインのツールです。
License
kokiito0926/justtext
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
HTMLから記事本文や主要なテキストのみを抽出するコマンドラインのツールです。
Topics
Resources
License
Stars
Watchers
Forks
Releases
No releases published