AWS CloudSearch でサイト内検索
イシュー
- できるか
参考
- Elasticsearch Service と CloudSearch どっちを選べば良いの？ ｜ Developers.IO
- Amazon CloudSearch で検索機能を実現 – 構築編 | カプセルクラウド(CapsuleCloud)テックブログ
- CloudSearch使った時につまづいたところ パート2 - フレクトのHeroku Lab
- https://docs.aws.amazon.com/ja_jp/cloudsearch/latest/developerguide/controlling-search-results.html
- よくわかるAmazon CloudSearchに行ってきました #cloudsearch ｜ Developers.IO
- Apache Nutch でクローリング
- AWS上にサーバレスな汎用クローラを展開するぞ。 - 超平面あのにのに
- https://docs.aws.amazon.com/ja_jp/cloudsearch/latest/developerguide/preparing-data.html
- WebサイトをスクレイピングするWebクローラー20選 - Qiita
- デキる人は知っている！Webスクレイピング用のソフト30選 - Qiita
- Crawl, Code, Search: Elastic Site Search and Elastic App Search | Elastic Blog
- Elastic Site Search
- オープンソース全文検索サーバー Fess
- Fess
Fess
- 全文検索サーバ Fess 〜 全文検索システム構築時の悩みどころ
- 【連載】簡単導入! OSS全文検索サーバFess入門 [1] 全文検索サーバFessを導入しよう｜業務アプリケーション｜IT製品の事例・解説記事
- 全文検索システムFessを用いた検索システム構築入門
- Fessでかんたん全文検索サーバー - Qiita
- FESSで検索ないし更新のエイリアスを別のインデックスを付け替える – 或る阿呆の記
- 【連載】簡単導入! OSS全文検索サーバFess入門 [12] 仮想ホスト機能の使い方｜開発ソフトウェア｜IT製品の事例・解説記事
- オープンソース全文検索サーバー Fess
Fess x Docker
- 全文検索サーバー Fess を Docker で動かす - Qiita
- docker pullが手軽
docker pull codelibs/fess:latest docker run -d -p 8080:8080 --name fess codelibs/fess:latest docker ps （で、コンテナID確認、ここではabortしてた） docker start （コンテナIDを使ってスタートしてみる）
で起動できた
- Docker ComposeでFessとElasticsearchのコンテナを一気に作成＆起動 - Qiita
- GitHub - codelibs/docker-fess: Docker files for Fess
- docker-fess ほぼ公式
- with kibanaとかいくつか起動オプションのサンプルあり
- Enterprise Search Server: Fess
- ここにマニュアルある
- Installation
- 初期パスワードはここ
- ユーザー
- fessマニュアル
Fess x Aws Marketplace
- AWS Marketplace: N2 Search
- AWS Marketplaceを使って、環境セットアップをお手軽に！ | 「ポテパンスタイル」
- AWS Marketplace編～AMI紹介～｜商用ソフトウェア アプリケーション AMI オープンソース BIツール | ナレコムAWSレシピ
Fess x DockerCompose
Fess Customize
ElasticCloud x AWS
- ElasticCloudからAmazon Elasticsearch Serviceへの移行して良かったこと大変だったこと – inamuu.com
- ElasticCloud の料金はAWSの請求にまとめてくれることもできるらしい
ECS
Fargateの設定
- AmazonECS / Fargate 本番運用のための構築とデプロイ方法まとめ - Qiita
- 「それコンテナにする意味あんの？」迷える子羊に捧げるコンテナ環境徹底比較 #cmdevio2019 ｜ Developers.IO
CloudSearch x Apache Nutch
- Nutch - Dev - Tutorial : Index the web with AWS CloudSearch
- DigitalPebble's Blog: Index the web with AWS CloudSearch
- nutch/src/plugin/indexer-cloudsearch at master · apache/nutch · GitHub
- JAWSUG Osaka S3 CloudSearch
- Amazon CloudSearch にドキュメントを取りこむ Lambda 関数 s32cs のご紹介 - 酒日記 はてな支店
- Amazon CloudSearchを簡易の検索用DBとして気軽に使う【事例・プログラミング不要】 - 株式会社クイックのWebサービス開発blog
- GitHub - codelibs/fess: Fess is very powerful and easily deployable Enterprise Search Server.
CloudSearch の料金
Elastic Site Search
AWS Fargate
AWS Glue
- https://docs.aws.amazon.com/ja_jp/glue/latest/dg/what-is-glue.html
- AWS GlueでS3に入っているデータを加工してみた – サーバーワークスエンジニアブログ
AWS Batch
クローラー
CloudSearch x pdf
- Searching PDF content – AWS CloudSearch | Thoughts
- elasticsearch経由でPDFの中身のテキストを抜き出す話 - Qiita
- ElasticsearchでPDF, MSOfficeファイルの全文検索 - tom__bo’s Blog
- Elasticsearch 6.2.3 で Ingest Attachment Processor Plugin を使って添付ファイルをインデクシングする - Qiita
- 出遅れたけど Amazon CloudSearch のアップデートと日本語ユーザー辞書を試してみる。 - よしだのブログ
- 第15回 Solr勉強会 #SolrJP Amazon CloudSearch Deep Dive
- Solr の PostTool を使い倒せ！？ - Qiita
RDS 全文検索
Solr x postTool
- 「第７章」Apache SolrのSampleプログラム実行 - Qiita
- Post Tool | Apache Solr Reference Guide 6.6
- Apache Solr - Downloads
- Amazon CloudSearchのクライアントプログラミング | shinodogg.com
Fluentdによるクローリングができないか
- 「よくわかるAmazon #CloudSearch 」に行ってきました！-@johtaniの日記 3rd | @johtani's blog 3rd edition
- 【AWS】はじめてのCloudSearch／ElasticMapReduceでCSV形式に変換したログをCloudSearchで検索する ｜ Developers.IO
- ログ収集系の個人的まとめ - Qiita
