検索サイトのロボットが定期的に巡回して、サイトを拾って(という表現があっているかは分かりませんが…)ゆく、と聞きますが、そういったロボットが収集してゆくのはhtml/htm形式のものだけなのでしょうか。
例えば、サイト内に「申込書はこちらからダウンロードしてください」等で、エクセルの表にリンクしている場合がありますよね。このエクセルの表なども巡回のロボットに収集されるのですか。
ご存知の方教えてください。よろしくお願いします。

このQ&Aに関連する最新のQ&A

A 回答 (3件)

検索ロボットは、リンクをたどってページを拾ってゆきます。

そのサイトの全ての
ファイルが見えているわけではありません。

検索ロボットは、検索のためにファイルを拾ってゆくわけですから、その内容が
理解できないファイルは、リンクが張ってあっても読み飛ばします。

ですから、エクセルの表が理解できるロボットがあれば、それも収集の対象にする
のですが、まだ、そういうロボットを私は知りませんが、技術的には可能です。

No.1 の方が書かれているとおり、Google では PDF ファイルも検索の対象に
なっていますが、それは、Google の検索ロボットが PDF のファイルの内容も
理解できるようになっているからです。

また、CGI のように動的なページも検索対象として引っかかるケースがあります。
先に書いたように、ロボットはリンクをたどります。なので、CGI の出力を
リンク先として記載しているページがあれば、ロボットはそれを対象にします。
その CGI の出力は html なので、ロボットは理解可能ですから。

試しに、"oshiete1 a-kuma" をキーに検索をしてみました(→参考URL)。
PHP の動的な出力のページでも引っかかりますよね。

参考URL:http://www.google.com/search?num=100&hl=ja&q=osh …
    • good
    • 0
この回答へのお礼

早速の解答感謝いたします。
「技術的には可能だが、今のところそういったロボットは無いと思う」という
ことですね。大変よく分かりました。
私的な会の名簿をエクセルで作って、リンクしていいものかどうか迷っていた為に
質問させていただいたので、このような答えで安心しました。
どうもありがとうございました。

お礼日時:2001/11/13 10:16

「HTML形式だけではありませんがエクセルの表はダメです」という答えになります。


巡回ロボットが拾えるのは、基本的に
・静的なドキュメントで
・テキスト形式のファイル
です。
したがってCGIやSSI、PHPなどのサーバサイドプログラムでそのつど動的に生成されるファイル(たとえばこの教えて!gooのような)は検索に引っかかりませんし、
エクセルの.xlsファイルのようにバイナリエンコードされたファイルも検索できません。

その一方で、HTMLではない素のテキストファイルが置いてあると検索に引っかかります。
.txtや.csvなど、拡張子にかかわらずASCIIテキストで記述されているファイルは引っかかるようです。
    • good
    • 0
この回答へのお礼

早速のお返事ありがとうございます。
ロボットが拾う/拾わないファイルの違いが、(ほんの初歩かもしれませんが)
うっすらと分かったように思います。本当に初心者で今まで何も知らなかった
のでとてもありがたいです。

お礼日時:2001/11/13 10:12

実際に自分で色々検索してみると分かると王のですが、


htmlだけではなく、pdfファイルなんかも検索に引っかかっていますね。

ただ、excelファイルと言うのは見たこと無いです。
圧縮ファイルなどもですが。

ダウンロードしてくださいの場合は、圧縮ファイルにしてみてはどうでしょうか?
    • good
    • 0
この回答へのお礼

早速のお返事ありがとうございます。
検索にかかるのはhtml形式だけでないというのは初めて知りました。
勉強になりました。

今まで、解凍は何度もしたことがあるのですが、圧縮はまだ
やってみたことがありません。これを機に挑戦してみたいと思います。

お礼日時:2001/11/13 10:10

このQ&Aに関連する人気のQ&A

お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!

このQ&Aを見た人が検索しているワード

このQ&Aと関連する良く見られている質問

Q【ロボットの未来の話】 いずれ人間はロボットに生産競争で負ける? ロボットの方が正しい答えを導き出す

【ロボットの未来の話】

いずれ人間はロボットに生産競争で負ける?

ロボットの方が正しい答えを導き出すのに長けている。

人間はヒューマンエラーが多いので天才ロボットには勝てない。

ロボットに仕事が無くなる職種リストが出ているが人間の全員がクビになるわけではない。

いま1000人働いているのが10人で済むという話である。

よって990人が解雇されて職を失うのを仕事が無くなると言っているだけだ。

溶接でも人間が溶接の動きをロボットに取り込む人がいるが腕が良い溶接工が1人いればあとは999人分の溶接のプロが溶接した全く同じ動きをしてくれる。

だから職人や技術者は職に着けるのは1人しかいないので仕事が無くなるという表現より仕事が奪われる職種リストと言った方が良い。

自分が1000人中1番上手いベテラン技術者でなければ路頭に迷う。

溶接工は言う。そのときの気温や湿度で溶接の仕方が変わると。

だったら毎日1人のベテラン技術者が毎日登録すれば良い。

1日に何度も変わるならそのたびに登録すれば良い。

全く問題ないのだ。

ただ次の登録する技術者不足が起こるがどの会社も教育してないので他社からスカウトするわけである。

1000人分の給料を稼ぐ登録技術者なので他社の給料の2倍払ってスカウトしても安いのである。

でもそういう他社からヘッドハンティングしてくる経営手法を取ってると技術者はさらに技術の極みに行けなくなるのでスカウト時で技術は頭打ちになる。

最悪、定年退職したベテラン技術者を雇ってその人に登録をやってもらっても良いがこれだと3代で終わる。


その60年後にはロボットも人間に習わなくても過去のビッグデータで出来るようになっているだろう。

そのときが本当にその職業が無くなる日である。

ロボットが1番得意な分野は経営診断だったりするので経営者が1番に必要なくなる職業だったりする。

ロボットがいる未来ってどうなっているんだろう?

ロボットの方が金融業であら稼ぎ出来る時代になったらみんな金融業をやるでしょ。

で誰も生産しなくなる。

お金があっちいったりこっちに来たりしてるだけでお金が増えていく。

確実にお金の価値はインフレになるだろうね。

【ロボットの未来の話】

いずれ人間はロボットに生産競争で負ける?

ロボットの方が正しい答えを導き出すのに長けている。

人間はヒューマンエラーが多いので天才ロボットには勝てない。

ロボットに仕事が無くなる職種リストが出ているが人間の全員がクビになるわけではない。

いま1000人働いているのが10人で済むという話である。

よって990人が解雇されて職を失うのを仕事が無くなると言っているだけだ。

溶接でも人間が溶接の動きをロボットに取り込む人がいるが腕が良い溶接工が1人いればあとは999人分...続きを読む

Aベストアンサー

この質問も詭弁のような感じですね。しかし、今ある仕事のほとんどが、近い将来ロボット、AIに取って代わると思います。なので、ロボット、AIにはできない仕事を新たに生み出していかなくてはならないと思います。医師も今は不足していると言われていますが、これからは斜陽産業の1つです。5年から10年?高須院長も言っていましたよ。
https://twitter.com/katsuyatakasu/status/732214867336126464

Qyahooカテゴリ登録とロボット巡回の関係について

お世話になります。

新規サイト構築時や新規ドメインを取得した場合、ロボット型検索エンジンに登録されるまでに3か月以上かかることもあるかと思います。
このような場合、Yahoo!カテゴリ登録(Yahoo!ビジネスエクスプレス登録)によって、登録の時期を早める効果が期待できるのでしょうか?

もしそうであればYahoo!から被リンクされることによって、確実にロボットから巡回されるようになるから という理由になりますでしょうか?
そもそもロボット検索に登録されるしくみもよくわからないのですが、よろしければ教えていただけますでしょうか?

よろしくお願いいたします。

Aベストアンサー

>Yahoo!カテゴリ登録(Yahoo!ビジネスエクスプレス登録)
>によって、(ロボット型検索エンジンへの)登録の時期を
>早める効果が期待できるのでしょうか?

はい,期待できると思います。


>bizxに申請・登録すれば、すぐにロボットに読み込まれ、ロボット
>検索にヒットするようになるという認識でよろしいでしょうか?
>それともヒットする「可能性」が高まるということでしょうか?

ビジネスエクスプレス(bizx)公式サイトではそのメリットを,
「Yahoo!カテゴリでの」キーワード検索や,Yahoo!検索の「登録サイト検索」でヒットすることだと謳っています。Yahoo!の「ウェブ検索」だとは書いてありません。
http://bizx.yahoo.co.jp/merit.html

ただ,良質なリンク集とみなされているYahoo!カテゴリに登録されればそのサイトがクロールされやすくなるのは事実でしょう。クローラーをそのサイトに訪れさせるだけで「5万円払っただけのことはある(^^)」と客が満足してくれるなら,Yahoo!JAPANだって客商売ですもの,そのくらいの対処はしていてもおかしくないと思います。


>そもそもロボット検索に登録されるしくみもよくわからない

Yahoo!カテゴリ登録が目的ではなく,Yahoo!のロボットに新規Webサイトの全ページをいち早くクロールしてもらうことが目的なら,サイトマップ(sitemaps)という技術を使います。登録は無料。Yahoo!では,sitemapsを「フィードURL」,それを扱うサービスを「サイトエクスプローラー」と呼んでいます。
http://help.yahoo.co.jp/help/jp/siteexplorer/siteexplorer-10.html

サイトマップとは,自分のWebサイトに存在する全WebページのURL情報を1つのファイルに格納したもの。それを自分のWebサイトにアップロードしておき,そのsitemapsファイルのURLをYahoo!に手動操作で知らせるわけです。Yahoo!はそのデータを参照して全WebページのURLを知り,それを基にクロールをおこなうわけです。

XML・RSS・Atomなどの書式を使えばより詳しい情報をYahoo!に教えることができますけれど,メンドウであるなら,単にURLを列挙したtxtファイルでもかまいません。この点も,上記URLのサイトエクスプローラーヘルプに書いてあります。

数年前,私がGoogleサイトマップを初めて使ったときは,1週間ほど?でGoogleのクローラーがやってきました。

>Yahoo!カテゴリ登録(Yahoo!ビジネスエクスプレス登録)
>によって、(ロボット型検索エンジンへの)登録の時期を
>早める効果が期待できるのでしょうか?

はい,期待できると思います。


>bizxに申請・登録すれば、すぐにロボットに読み込まれ、ロボット
>検索にヒットするようになるという認識でよろしいでしょうか?
>それともヒットする「可能性」が高まるということでしょうか?

ビジネスエクスプレス(bizx)公式サイトではそのメリットを,
「Yahoo!カテゴリでの」キーワード検索や,Yahoo!...続きを読む

Q未来のロボットは日常生活においてどんな役割を果たすと思いますか?

未来の日常生活で、ロボットはどんな役割を果たすと思われますか?

日常生活と言うからには、やはり主婦としては、面倒な家事をやってほしいところ。。。
お茶碗を洗ってもらったり、お風呂の掃除をしてもらったり。
でも、ロボットって人間ほど気が利かないのかなとか、
微妙な感覚がつかめなかったり、臨機応変にできなかったり、
そんな意外と不器用なイメージがありますが、未来のロボットって想像を超えるくらいすごいのでしょうか。

日常生活で将来のロボットが担う役目について、いろいろご意見ください。
いろいろ想像してもらって結構です。

宜しくお願いします。

Aベストアンサー

 『ロボット』と聞くとヒューマノイド(人型)を思い浮かべますが(これはほとんど日本人だけだとか・・・)、それ以外のロボットが普及すると思います。
 食器洗い機も今の一括して洗うのではなく、個々の皿や茶碗の汚れを認識し、その汚れを適切に洗っていくとか・・・。現在の掃除ロボットは平面しか移動できませんが階段をも上がるとか・・・。
 私たちがロボットと認識していない部分でロボット技術が家庭に入ってくると思います。

 あと、私が進歩して欲しいロボット技術は義足・義手ロボットですね。 人の神経の微弱な電気信号を受けて自在に動く義足や義手。 体の不自由な方々をサポートするロボット技術が進歩することを望みます。

Qロボット型検索エンジンで自分のホームページのトップページしかページを巡回してくれないのですが。

Googleでホームページのトップページしか巡回していないみたいのですが?なぜでしょうか?リンクはしていますし、フレーム外にもページ内リンクを貼っているのですが?ちなみに簡単に作れるホームページソフトで作っています。

Aベストアンサー

Googleの検索ロボットの巡回って、月一回ぐらいですよね。(私のHPのキャッシュの状況から、そう思っています。)
私のところも、3~4ヶ月たっても拾われないページがあります。ほんとになぜなんでしょう。

前に、拾われていないページの直接URLをGoogleに登録したことがあります。(でも、これをあまりしつこくやるとまずいとの話も聞くのですが。)

Q【ロボットが配送をする時代】Amazon。ロボットが全部の配送業務の棚卸をする未来が近付いている。ラ

【ロボットが配送をする時代】Amazon。ロボットが全部の配送業務の棚卸をする未来が近付いている。ラックに入れて、何をラックに入れたか記憶していて、注文が入るとラックが並んでいる。それをロボットが取り出して、梱包もロボットがして、配送もロボットがする。

ドローンは雨の日に飛ばせるのかが重要な課題ですね。

Aベストアンサー

配送業務の棚卸って何?

棚卸って在庫を確認する事ですよ

Qgoogleの巡回ロボット

最近ホームページを移転しました。
今までリンクしていただいてる方にも変更をお願いし
googleに申請もしました。

何度か巡回ロボットも来てるようなのですが
TOP以外のページを巡回していないようです。

TOPページはflashなどを外し軽くしてあります。
どのようにすれば他のページを巡回してもらえるんでしょう?

Aベストアンサー

TOP ページから下位ページまでの全部のページが一気に登録されるわけでもないらしいですよ。

自分の場合もそうだったのですが、段階的に登録されていきましたので、もう少し待たれてみてはどうでしょう。

Qロボット文明は近未来に来るか?

人口知能をもったロボットだけで運営するロボット都市や、ロボットだけの国とか近未来に実現するのでしょうか?技術的に可能なのでしょうか?
イメージ的にはプレイステーション1のポポロクロイス物語のガミガミ魔王の支配する都市なのですが、どうなんでしょうか?

出典
http://dic.nicovideo.jp/a/%E3%82%AC%E3%83%9F%E3%82%AC%E3%83%9F%E9%AD%94%E7%8E%8B

どうか、ご教授お願いします。よろしくお願いします。

Aベストアンサー

>人口知能をもったロボットだけで運営するロボット都市や、ロボットだけの国とか近未来に実現するのでしょうか?
近未来のスパンは何年位を考えていますか?
ロボットの設計理念で許されない範囲を想定していますので、創ってはいけない範囲です。
しかし、未来のことは分かりませんので、誤った方向に進むことも有り得ます。

>技術的に可能なのでしょうか?
技術的には可能と思います。
何時かの段階でロボット設計の理念を踏み外すとロボットに支配された都市や国は出来てしまうかも知れません。
研究者は自立型ロボットを設計するときの人間主導を忘れないで欲しいものです。

Q検索ロボットはページのどこを拾っているか

検索ロボットによる全文検索型サーチエンジンって、Webページのどこを拾って、タイトルにしたり、サイト説明にしたり、キーワードにしたりしてるのでしょう?
一説によると、titleタグをみてるとか、METAタグをみてるとか、いや~全文っていうくらいだから全文だよとか、コメントやAltはみてないよ、とか。
もちろんサーチエンジンによってそれぞれ方式が違うのでしょうが、そこらへん体系的に
例えば

yahooの場合はタイトルはここ、説明はここ、キーワードはここ(Yahooはロボットじゃないから違うか)
gooの場合はタイトルはここ、説明はここ、キーワードはここ
infoseekの場合はタイトルはここ、説明はここ、キーワードはここ
gogleの場合はタイトルはここ、説明はここ、キーワードはここ
みたいな比較表みたいなのはないでしょうか。

ある知り合いが、ホームページを一生懸命、検索エンジンに登録して廻ったけどちっとも拾ってくれなくて、DOKODAだったかな、・・・に登録したら、DOKODAに出るようになって、同時にMNSで検索できるようになったんだけど、なんか関係があるなかなぁ・・・それとも偶然かなぁ~といってました。しかもWebページにも登録時にも入れてない文書が説明書きに入っていてよくわからん、と嘆いていました。

やっぱり明確なところは企業秘密なんかな~

検索ロボットによる全文検索型サーチエンジンって、Webページのどこを拾って、タイトルにしたり、サイト説明にしたり、キーワードにしたりしてるのでしょう?
一説によると、titleタグをみてるとか、METAタグをみてるとか、いや~全文っていうくらいだから全文だよとか、コメントやAltはみてないよ、とか。
もちろんサーチエンジンによってそれぞれ方式が違うのでしょうが、そこらへん体系的に
例えば

yahooの場合はタイトルはここ、説明はここ、キーワードはここ(Yahooはロボットじゃないから違うか)
...続きを読む

Aベストアンサー

タイトルはtitleタグでしょ?

その他詳しくは下記で。
http://ippatsu.net/TARO/

参考URL:http://ippatsu.net/TARO/

Q【もしかしてAIロボットが発展したら先進国の人間の仕事は無くなって人は人間の仕事がある発展途上国に人

【もしかしてAIロボットが発展したら先進国の人間の仕事は無くなって人は人間の仕事がある発展途上国に人間の仕事を探しに行く時代になるかも】


現に日本国内に仕事がないので発展途上国の中国や東南アジアにはまだ原始的な人間のホスピタリティサービスが残っているから移住したという人がいる話とダブる。

原始的な人間的なサービスは発展途上国はまだ残っているので発展途上国に移住して働く。

日本は高度化され過ぎて逆に資格がない学歴がない人は出来る仕事がロボットに奪われてないので東南アジアに行くと人間の仕事が残っているので働き先がある。

これって20年後、40年後にAIロボット全盛期になったときにどっちが勝ち組になるか分からない状況になりそう。

今の政治家は今さえ良ければ良い、自分の任期中までのことしか考えていないので本当に今の非正規労働者が年金も積み立てない貯金もあと30年生きられる貯蓄もしてない出来てない人たちが高齢者になったときが本当の勝負どきになりそう。

どう考えてもフリーターや非正規労働者が年金積み立て貯蓄だけで生き延びることは確実に無理なので国が支出することになる。人口減で税収もないし赤字国債発行もどこまで持つか分からないし30年後の日本の未来を想像するだけで4割の非正規労働者の老後を国が支えざる負えない負担を先送りしてるだけでツケは後で一気に跳ね返ってくるのを彼ら国会議員は分かってやっているのだろうが恨もうにももうその頃には政界から引退してるので恨みどころがない状況になってそう。

【もしかしてAIロボットが発展したら先進国の人間の仕事は無くなって人は人間の仕事がある発展途上国に人間の仕事を探しに行く時代になるかも】


現に日本国内に仕事がないので発展途上国の中国や東南アジアにはまだ原始的な人間のホスピタリティサービスが残っているから移住したという人がいる話とダブる。

原始的な人間的なサービスは発展途上国はまだ残っているので発展途上国に移住して働く。

日本は高度化され過ぎて逆に資格がない学歴がない人は出来る仕事がロボットに奪われてないので東南アジアに行く...続きを読む

Aベストアンサー

仕事がなくなり生きていけない。という人もいますが、もしかしたら仕事をしなくてもAIがやってくれるので生きていける時代が来る可能性のほうが高いと思います。

Qindex.htmとindex.htmlを1つのサイトに作成したらどうなりますか?

以前トップベージは「index.htm」でしたが、いろいろ問題が出てきたので、「index.html」に変更した所、サイトが見えないと言う人が出てきました・・。そこで、1つのサイト内にindex.htmとindex.htmlを同時に作成するとどうなってしまうのでしょうか?
これはいけない事ですか?

Aベストアンサー

どのような状況で「見えない」と言われているのか分かりませんので一般的な情報を。

たとえばwww.yahoo.comというアドレスを持つサイトがあったとします。
ブラウザのurlを入力するところで、http://www.yahoo.comと入力し、移動すると、www.yahoo.comを管理しているhttpサーバはあらかじめ設定されているルールに沿ってindex.htmやindex.htmlなどを表示します。
本当はindex.htmなどのファイル名まで指定しなければいけないところを、httpサーバが自動的にやってくれているわけです。

さてhtmをhtmlに変えて見えなくなったということですが、もしかすると質問者様が使っているhttpサーバはwww.yahoo.comと入力されたときに自動的にindex.htmは表示してくれますが、index.htmlは表示してくれないのかも知れません。

もし同時に作った場合も先に説明したルールに沿って、最初に見つけたファイルを自動的に表示します。ですので二つ作ることはいけないことではありません。
この設定はhttpサーバの管理者が設定しており、httpサーバの種類によっても違いますし、どのようなルールで設定されているかによっても違います。
(技術的には可能でも、やらないルールになっているとか)

もし、どこかのホームページスペースを借りているなら、管理会社のサイトに説明があるはずです。よく調べてみてください。

どのような状況で「見えない」と言われているのか分かりませんので一般的な情報を。

たとえばwww.yahoo.comというアドレスを持つサイトがあったとします。
ブラウザのurlを入力するところで、http://www.yahoo.comと入力し、移動すると、www.yahoo.comを管理しているhttpサーバはあらかじめ設定されているルールに沿ってindex.htmやindex.htmlなどを表示します。
本当はindex.htmなどのファイル名まで指定しなければいけないところを、httpサーバが自動的にやってくれているわけです。

さてhtmをhtmlに変...続きを読む


人気Q&Aランキング