お世話になります。
いきなりですが長文失礼いたします。
現在、みなさんもご存知のアマゾン(amazon.co.jp)上の文字をキーワードとして集める作業を行っております。
これをスクレイピングなどを使い作業の自動化を行いたいのですが、
すでにこういう機能のツールがあったりしないか、
作るとしたらどれぐらいの規模でできるのかなどを知りたいです。
やっていることとしましては、
アマゾンのカテゴリー一覧(http://www.amazon.co.jp/gp/site-directory/)のカテゴリーを一つずつ掘っていき、キーワードの組み合わせを作っていっています。
例)
ベビー・おもちゃ・ホビー
→楽器
→ギター
→エレキギター
→ストラトキャスタータイプ
→ブランド名
と掘っていき、この場合の最終成果物としてのキーワードは
「ストラトキャスター ブランド名」 (間にスペース)
としています。
できればこの間に以下のようなキーワードを生成したいと思っております。
・楽器 ギター
・エレキ ギター
・ギター ストラトキャスター
・商品名 エレキギター
etc...
その他のカテゴリーでは、商品の種類別以外にも機能別でも種別が分かれるので、
それらの文字情報も拾ってきて、キーワードの生成を行いたいです。
例)
ホーム&キッチン・ペット・DIY
→キッチン家電
→冷蔵庫・冷凍庫
→冷蔵庫
のページにある「機能・特徴」の除菌、脱臭 など。
最終的にはそれらの文字情報を組み合わせ、
キーワードを生成したいと思っております。
特に2単語にこだわってもおらず、3単語になるものは3単語に組み合わせたり、
さらに多い単語数のものも欲しいと思っております。
欲をいえば、それらの単語の並び順も全パターンに並び替えてくれたりする機能があれば最高です。
例)
ギター ストラトキャスター
ストラトキャスター ギター
冷蔵庫 消臭 TOSHIBA
冷蔵庫 TOSHIBA 消臭
消臭 冷蔵庫 TOSHIBA
消臭 TOSHIBA 冷蔵庫
TOSHIBA 冷蔵庫 消臭
TOSHIBA 消臭 冷蔵庫
最終的には、アマゾン上の全商品を検索で出してこれるキーワードのリストを作成したいと思っております。
分かりにくい質問で申し訳ございませんが、みなさんの知恵を貸していただけませんか?
No.2ベストアンサー
- 回答日時:
多大なアクセスで実害が有ったと判断するのはAmazon様なので、こちらで判断しても意味無いです。
遮断するのも、訴えるのも向こうの判断だけで行えますので、こっちの都合は関係ないですからね。
規約に明確に書いていなくても、どう処理するかはAmazonの判断です。
確実に言えるのは、普通の人間がページにアクセスする程度のアクセス程度であれば、業務妨害には問われないでしょう。
規約に書いてあるのは、こちらのサーバーに負荷をかけて勝手に情報を持って行くな!ってことを難しく書いてあるだけですから。
あと紐付けされたアカウント(アソシエイトやAmazonProductAPI)がある場合は、アカウント削除の恐れは高いです。
No.1
- 回答日時:
Amazonは規約でクローリングやスクレイピングを禁止しているので、破った場合には軽くてアクセス禁止でしょうか。
ひどい場合は法的手段も問わないと思いますよ。
【引用】
この利用許可には、アマゾンサービスまたはそのコンテンツの転売および商業目的での利用、製品リスト、解説、価格などの収集と利用、アマゾンサービスまたはそのコンテンツの二次的利用、他社のために行うアカウント情報のダウンロードとコピー、データマイニング、ロボットなどのデータ収集・抽出ツールの使用は、一切含まれません。
http://www.amazon.co.jp/gp/help/customer/display …
ご回答どうもありがとうございます!
やはり、こういう類のものは大体は禁止されていますよね…。
利用規約には目を通していなかったので、挙げてくださり、どうもありがとうございます。
ですが、利用規約を読む限り、許可はされてないけれども、禁止もされてないかなぁと。
(まぁしないに越したことはないですが)
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- 冷蔵庫・炊飯器 パナソニックの2006年の冷蔵庫 10年以上梅の冷蔵庫は電気代を食うのでしょうか 最近の冷蔵庫にすれ 5 2023/02/10 19:40
- 冷蔵庫・炊飯器 冷蔵庫とそのためのコンセントの位置について 3 2022/04/04 14:28
- 冷蔵庫・炊飯器 冷蔵庫の電気を消したい 6 2022/04/23 20:49
- 食べ物・食材 昨日買ったブリのアラの臭みについて 2 2022/07/09 12:19
- 食べ物・食材 冷蔵した鶏肉(消費期限内)が臭いです 1 2022/08/12 15:16
- 冷蔵庫・炊飯器 冷蔵庫のドアがフレンチドアではなく右・左開きタイプのドアでも、転居先でも問題なく使えるかどうか 7 2022/07/21 09:39
- 冷蔵庫・炊飯器 冷蔵庫なしの生活を1年ほどしていますが、不便に思うことがあります。 5 2023/08/08 16:23
- 冷蔵庫・炊飯器 【家庭用冷蔵庫メーカーは冷蔵庫に10万円以上もする進化と改良を続けているはずなのに、家 7 2023/06/23 17:43
- 食べ物・食材 氷点下以上の冷蔵保存で溶けてしまった冷凍食品をどうすべきか 3 2023/07/06 19:31
- 高校 図書館や学習プラザでは消しゴム禁止にしませんか? 5 2023/05/08 18:36
関連するカテゴリからQ&Aを探す
おすすめ情報
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
身に覚えの無い認証コード
-
Amazonとか楽天でテンガ買った...
-
アマゾンで親にばれずに購入す...
-
アマゾンでイヤホンを買ったの...
-
1階と2階で話せる物が欲しい お...
-
ヤマト運輸の「ご不在連絡票」...
-
アマゾンの薬はなぜ安いんです...
-
【画像あり】ファミマのキャラ...
-
Microsoft365にAccessってあり...
-
フィリピンの友達にギフトカー...
-
スプレッドシートのハイパーリ...
-
Amazonのタブレット
-
サイ・トンブリ
-
保育園で運動会の練習が始まり...
-
「やってみないと分からない」...
-
母の誕生日にお酒を送りたい。...
-
裁縫セットのバックのみを購入...
-
アマゾン倉庫で働いています。 ...
-
Amazonオーディオブックのやり...
-
Kindle Paperwhiteでbookliveの...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
身に覚えの無い認証コード
-
アマゾンでイヤホンを買ったの...
-
アマゾンの薬はなぜ安いんです...
-
Amazonとか楽天でテンガ買った...
-
Microsoft365にAccessってあり...
-
1階と2階で話せる物が欲しい お...
-
【画像あり】ファミマのキャラ...
-
アマゾンで親にばれずに購入す...
-
職場で机に物を置く音が煩い…対...
-
アマゾン倉庫で働いています。 ...
-
iPad 初期設定エラー iPad not ...
-
アマゾンと楽天、同一店、同一...
-
何者かが自分のPCでAmazonの商...
-
ヤマト運輸の「ご不在連絡票」...
-
友達の家のfire stickでアマプ...
-
ネットショッピングの購入履歴...
-
定価より安いのは何故?
-
レンタル落ちのDVD購入したこと...
-
Kindle Paperwhiteでbookliveの...
-
アマゾンマーケットプレイスに...
おすすめ情報