- 現在表示しているページ
- 日々是作譜 » API » AWSは1クエリで4000件までしか取得できない
AWSは1クエリで4000件までしか取得できない
AmazonのAWSの書籍データベースを利用したWebサービスを作ろう!ということで、AWSをいじっていろいろと実験しました。
Webサービス側で検索やアクセスする度に、AWSにアクセスして商品データを引っ張ってきて、加工して出力ってかなり非効率的だし、検索性も悪いので、全部クロールしてデータベースにためることはできないかと、かなり無謀な実験をしたのですが・・・。
表題の通り、検索1クエリにつき4000件までしか取得できない仕様になっているようです。
そらそうだ。無制限だったらDB根こそぎコピーできちゃうもんね。
でも、検索性とか拡張性を考えると、クロールしてデータベースに溜め込みたい。何か良い方法はないものか・・・。
Google AdSense
関連エントリー
コメント投稿
トラックバック
このエントリーのトラックバックURL:
http://mt.hiroyukiarai.jp/mt-tb.cgi/24
検索
Google AdSense
最近のエントリー
- [MediaWiki]Google Adsenseを導入
- PHPのヒアドキュメント
- [MediaWiki]htaccessでShortURLを実現する
- [MediaWiki]ファイルのアップロードを有効にする
- [MediaWiki]sitemap.xmlを簡単生成「Google Sitemap Extension」
- [bbPress]会員サイト構築に使えるプラグイン5種
- [WordPress]会員サイト構築に使えるプラグイン9種
- [MediaWiki]Google Analyticsを設置
- [MediaWiki]ロゴ、faviconの変更
- twitterクライアント「pocket*」は、followerの数が多ければ多いほど使い勝手が悪くなる
カテゴリー



