#cloudsearch

In the age of developing information technologies most of us deal with lots of data. At the same time, we often encounter a frustrating problem: searching for a document we know we have, but not finding it. Or spending an important amount of time to search for an email, file and other content across our computers storage devices, and Cloud Services. This is not only frustrating, but also time-consuming and surely Expensive.  This is a common problem, and it results in the following statistics: businesses are losing up to $5,700 per worker annually.

CybervoreQuery™ is a new kind of desktop search tool working with Microsoft Outlook®. This file search software comes with the following benefits:

-          It quickly finds up to 400% more content

-          It’s an easy Outlook add-in helping to manage all your content

-          It helps to organize all your content without opening multiple programs

-          It has a focused search saving time across your PC, storage devices, and localized cloud services

If you buy it now you will benefit even more, because you’ll get your 40% discount!

AWS 推出 Amazon Elasticsearch Service

AWS 推出了 Amazon Elasticsearch Service，也就是把 Elasticsearch (現在叫做 Elastic) 包裝起來的服務：「New – Amazon Elasticsearch Service」。 並不是所有 EC2 的 instance 種類都支援 (像是 m4.* 系列就不支援)，不過也算夠多了，然後安裝時也包括了 Kibana： 另外一個比較重要的整合是可以把 CloudWatch 的資料倒進去，於是舊可以在 Kibana 裡面看這些數據了： 旁邊的 Amazon CloudSearch 哭哭了…

AWS CloudSearch allows you to search indexed data. It's pretty simpel to use. First use the console to create the index fields, their types etc. Then upload your data (in XML / JSON / CSV etc). Head over to their documentation for more details.

The purpose of this post is to point out one gotcha that is not mentioned in the docs. When you create the index fields say field1, field2, field3, the uploaded document will typically contain data corresponding to those indexed fields. They need not contain all the fields mentioned in the index. i.e. the JSON doc may contain only field1, field2 for one record, field1, field2, field3 for the next and so on.

However, the JSON doc *cannot* contain any field that is not in the list of indexes you created. If you do, you will get a very cryptic error message. i.e. your JSON record cannot contain a field4 as it is not part of the indexes you created on the AWS console.

My uploaded document had one extra field which was not there in my indexes and it kept giving me some wierd error message. When I got rid of it, it worked !

Amazon CloudSearch: AWS が提供する検索サービス。ユーザーによるインスタンスの管理が必要なく、クラウドて完全に管理されている。

ドキュメントをインデックスするためのドキュメントサービスとインデックスされたドキュメントを検索するためのサーチサービスから構成されている。

各種サービスのアクセス制御は、アクセスもとのIPアドレスを使用する。

リクエスト側と、ドキュメント側の利用条件に応じて自動的にインスタンスが拡張・縮小されるすごい仕組み。

現在、複数のリージョンでリリースされているが、東京リージョンまだリリースされていない。

まだ、日本語に対応していないため、日本語を検索したい場合は事前にトークナイズされたドキュメントをインデックスし、検索時にも同じ形態素解析エンジンでクエリをトークナイズする。

ストップワードや類義語などのテキストオプションは、ドキュメントサイドの辞書のため、追加変更時は再インデックスする必要がある。

I wasn't able to find IAM related documentation on AWS CloudSearch but was able to figure out how to give full permission for a user on CloudSearch. Here it is;