
お世話になります。
いきなりですが長文失礼いたします。
現在、みなさんもご存知のアマゾン(amazon.co.jp)上の文字をキーワードとして集める作業を行っております。
これをスクレイピングなどを使い作業の自動化を行いたいのですが、
すでにこういう機能のツールがあったりしないか、
作るとしたらどれぐらいの規模でできるのかなどを知りたいです。
やっていることとしましては、
アマゾンのカテゴリー一覧(http://www.amazon.co.jp/gp/site-directory/)のカテゴリーを一つずつ掘っていき、キーワードの組み合わせを作っていっています。
例)
ベビー・おもちゃ・ホビー
→楽器
→ギター
→エレキギター
→ストラトキャスタータイプ
→ブランド名
と掘っていき、この場合の最終成果物としてのキーワードは
「ストラトキャスター ブランド名」 (間にスペース)
としています。
できればこの間に以下のようなキーワードを生成したいと思っております。
・楽器 ギター
・エレキ ギター
・ギター ストラトキャスター
・商品名 エレキギター
etc...
その他のカテゴリーでは、商品の種類別以外にも機能別でも種別が分かれるので、
それらの文字情報も拾ってきて、キーワードの生成を行いたいです。
例)
ホーム&キッチン・ペット・DIY
→キッチン家電
→冷蔵庫・冷凍庫
→冷蔵庫
のページにある「機能・特徴」の除菌、脱臭 など。
最終的にはそれらの文字情報を組み合わせ、
キーワードを生成したいと思っております。
特に2単語にこだわってもおらず、3単語になるものは3単語に組み合わせたり、
さらに多い単語数のものも欲しいと思っております。
欲をいえば、それらの単語の並び順も全パターンに並び替えてくれたりする機能があれば最高です。
例)
ギター ストラトキャスター
ストラトキャスター ギター
冷蔵庫 消臭 TOSHIBA
冷蔵庫 TOSHIBA 消臭
消臭 冷蔵庫 TOSHIBA
消臭 TOSHIBA 冷蔵庫
TOSHIBA 冷蔵庫 消臭
TOSHIBA 消臭 冷蔵庫
最終的には、アマゾン上の全商品を検索で出してこれるキーワードのリストを作成したいと思っております。
分かりにくい質問で申し訳ございませんが、みなさんの知恵を貸していただけませんか?
No.2ベストアンサー
- 回答日時:
多大なアクセスで実害が有ったと判断するのはAmazon様なので、こちらで判断しても意味無いです。
遮断するのも、訴えるのも向こうの判断だけで行えますので、こっちの都合は関係ないですからね。
規約に明確に書いていなくても、どう処理するかはAmazonの判断です。
確実に言えるのは、普通の人間がページにアクセスする程度のアクセス程度であれば、業務妨害には問われないでしょう。
規約に書いてあるのは、こちらのサーバーに負荷をかけて勝手に情報を持って行くな!ってことを難しく書いてあるだけですから。
あと紐付けされたアカウント(アソシエイトやAmazonProductAPI)がある場合は、アカウント削除の恐れは高いです。
No.1
- 回答日時:
Amazonは規約でクローリングやスクレイピングを禁止しているので、破った場合には軽くてアクセス禁止でしょうか。
ひどい場合は法的手段も問わないと思いますよ。
【引用】
この利用許可には、アマゾンサービスまたはそのコンテンツの転売および商業目的での利用、製品リスト、解説、価格などの収集と利用、アマゾンサービスまたはそのコンテンツの二次的利用、他社のために行うアカウント情報のダウンロードとコピー、データマイニング、ロボットなどのデータ収集・抽出ツールの使用は、一切含まれません。
http://www.amazon.co.jp/gp/help/customer/display …
ご回答どうもありがとうございます!
やはり、こういう類のものは大体は禁止されていますよね…。
利用規約には目を通していなかったので、挙げてくださり、どうもありがとうございます。
ですが、利用規約を読む限り、許可はされてないけれども、禁止もされてないかなぁと。
(まぁしないに越したことはないですが)
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
関連するカテゴリからQ&Aを探す
おすすめ情報
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
この電池が欲しいのですが
-
アマゾンで親にばれずに購入す...
-
1階と2階で話せる物が欲しい お...
-
母の誕生日にお酒を送りたい。...
-
【画像あり】ファミマのキャラ...
-
PCを立ち上げ時いつも同じ画像...
-
友達の家のfire stickでアマプ...
-
Amazonの予約の確実性
-
おすすめのメッセンジャーバッ...
-
iPad 初期設定エラー iPad not ...
-
アマゾンの薬はなぜ安いんです...
-
Microsoft365にAccessってあり...
-
Amazonからのメールが迷惑メー...
-
おすすめフタナリ作家
-
Amazonにログインできない
-
初めまして! 相談なんですが、...
-
身に覚えの無い認証コード
-
ヤマト運輸の「ご不在連絡票」...
-
対象/対象外に最も適した英語を...
-
アマゾン PCパーツ初期不良...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
アマゾンで親にばれずに購入す...
-
この電池が欲しいのですが
-
アマゾンでイヤホンを買ったの...
-
1階と2階で話せる物が欲しい お...
-
初めまして! 相談なんですが、...
-
友達の家のfire stickでアマプ...
-
Microsoft365にAccessってあり...
-
Amazonとか楽天でテンガ買った...
-
ヤマト運輸の「ご不在連絡票」...
-
職場で机に物を置く音が煩い…対...
-
何者かが自分のPCでAmazonの商...
-
母の誕生日にお酒を送りたい。...
-
レディースのLサイズと、メンズ...
-
水酸化ナトリウムって何処に売...
-
身に覚えの無い認証コード
-
iPad 初期設定エラー iPad not ...
-
今Amazonってお盆休みで荷物届...
-
アマゾンの薬はなぜ安いんです...
-
マクドナルドのスタッフが着て...
-
アマゾンと楽天、同一店、同一...
おすすめ情報