- 締切済み
完全なるサイトのページのサイトデータを取得したい
- みんなの回答 （1）
- 専門家の回答
みんなの回答
- 0002220481
- ベストアンサー率55% (117/211)
参考URL先のはどうでしょうか。
関連するQ&A
- VBA：webページのデータ取得
お世話になります。 現在、VBAを勉強しており、webページのデータを取得するツールを個人的に開発しております。開発中に不明点がでましたのでご質問いたします。 ※インターネット上で一通り探しましたが、解決策は見つかりませんでした。 現状、HTMLファイルのデータは取得はできております。（ソースといわれるものです） ただ、ソース上にはjavascriptで記述されているところが多々あり、javascript側でHTMLを生成している場合、このデータを取得することができません。 ソースではなく、実際にwebページに表示されているHTML・CSSなどを取得したいと考えておりますが、取得する方法は存在するのでしょうか？ もしご存知でしたらご教示いただきたく思います。 以上、よろしくお願いいたします。
- 締切済み
- その他（プログラミング・開発）
- VBS「開いているページ」のURLを取得したい
VBSで、「現在開いているIEのページ」のURLを取得する方法、 もしくはそれが載っているサイトなどはありませんでしょうか？ http://www.happy2-island.com/vbs/cafe02/capter00706.shtml を参考にしながらやってみたのですが、 「現在開いているページ」の取得方法がどうしてもわからず… 使用方法としては、 (1)IEのツールバーにオリジナルのアイコンを作り、 (2)それがクリックされた際に表示されていたページのURLを、テキストファイルに保存。 というスクリプトを作りたいと思っています。 初心者で、ネットや本で調べ調べやっているのですが、 中々うまくいかず…。どうかご助力お願いいたします。
- ベストアンサー
- Visual Basic
- ajaxとphpでapiのデータ取得
上手にお伝えできるか不安ですが、以下の事象の原因で考えられるものがありましたら、アドバイスいただきたいです。 [処理内容] js(ajax)でphpをたたいて、GAのapiに接続、ページビューを取得して その取得内容もとにphpで静的ファイルを生成（jsonやhtml）して、任意の箇所で表示させています。 アクセスランキングのようなものになります。 ---------------------------------------------------- jsでphp呼び出し→phpでGAにアクセス→GA→phpで受け取る→jsonやhtml生成 ---------------------------------------------------- [気になる事象] GAからのデータの取得やjsonの生成は概ねうまくいっているのですが、時にデータが取得できない時があります。 何故かphpファイルを更新する（ソースに改行を加えただけ）と正しいデータが取得できたりします。 そんなことが動作に影響するのかわからないのですが、また1日後とかにデータを取得して表示させようとすると、 phpファイルを更新しない限り前回取得した状態から更新されなくなります。 キャッシュみたいなものが介在するのかわからないのですが、ajaxの部分の記述でcashはfalseとしています。 ちなみにGAの管理画面ではページビューが取れているので、apiとphpの間が怪しいといえば怪しそうな気もしています。 尚、静的ファイル（jsonやhtml）のタイプスタンプの更新は、js(ajax)にアクセスする度に正しく行われている為、 それらのファイルの生成そのものは問題ないと思われます。 拙い説明で恐縮ですが、 どうぞよろしくお願いいたします。
- 締切済み
- PHP
- ほかのサイトのデータの取得方法
CGIで扱うデータの一部が不定期で不規則に変化します。 たとえばあるときには'a','b'というのを使っていたのに、 その次の日には'a','c'というのを使わないといけないようなものです。 現在は扱うデータの一覧をファイルに保存し、変更があるたびサイト管理者にそのファイルをアップデートしてもらっているのですが、ファイルの変更日時がわかりにくいので変更されているのに気づかないことがある、また毎回変更するのが大変などのデメリットがあります。 よって、自分の所有するサイト使用するデータを保存したファイルを置き、CGIは更新されているかチェックし、変更があるようなら現在のファイルと置き換えるような仕様にしたいと思うのですが、ほかのサイトに保存されているデータの取得方法がわかりません。 たとえば、サーバーの違うhttp://aaa.bb.cc/ddd.datに必要なファイルがあるとして、./eee/ff.datと置き換えるプログラムはどのように作成すればいいのでしょうか？
- ベストアンサー
- Perl
- Javascriptでページ取得したい
いつもお世話になっています。 スマホサイトにて、キャリアごとにhtaccessで振り分けを行っていますが、 「PCサイトへ移動」ボタンを押したら、PCページへ移動させたいのです。 追加条件として、PC版のTOPページではなく、「今見ているスマホページのPC版ページ」へ移動させたいのです。 <a href="http://aaaaa.jp/bbb/ccc.html?mode=pc">PC版サイトはこちらから</a> と一つ一つ全ページに入れていくのは大変なので http://aaaaa.jp/bbb/ccc.html この部分をJavascriptで自動取得したいです。 <a href="【jsで自動取得】?mode=pc">PC版サイトはこちらから</a> のようなイメージです。 そもそも可能でしょうか？ 可能であればソースまで教えていただけると助かります。 宜しくお願い致します。
- ベストアンサー
- JavaScript
- サイトを丸ごとダウンロードできるダウンローダーを探しています。
やりたいことは次のようなことです。 サイトのトップページを与えると、リンクをたどってそのサイト内のファイル、画像、スタイルシート、flash、jsなど全てをディレクトリ構造ごと保存したいです。 いままでIrvineを使用していたのですが、（たとえば）cssで背景に設定された画像が取得できないので、別のソフトを探しています。。 特に、スタイルシートで背景に設定された画像の取得をできるものがあれば教えてください
- ベストアンサー
- フリーウェア・フリーソフト
- wgetで指定したURLの背景画像等の取得方法
wgetを使ってファイルの階層構造を保ったまま、 指定したＵＲＬの関連ファイルだけ保存したいのですが ＣＳＳで指定された背景画像、ＪＳでリンクされてるロールオーバーなどの画像を取得するには コマンドはどう記述したら良いのでしょうか？ 保存したいのは、あくまで指定したＵＲＬを正常に表示する為に使用されてる関連ファイルだけです。 ちなみにＦＬＡＳＨ等で外部ファイル化してるｊｓや画像も取得できる方法があれば教えていただけますでしょうか。
- ベストアンサー
- その他（プログラミング・開発）
- サイトのデータ（HTML）を取得
C#で WebRequest webreq = (HttpWebRequest)WebRequest.Create(strURL); webreq.Timeout = 10000; HttpWebResponse webres = (HttpWebResponse)webreq.GetResponse(); でサイトのデータ（HTML）を取得しているのですが、 サイトによっては１ページ全部取得できない場合があります。 しかしブラウザで見ると全部表示され、 そのソースをみても全部表示されています。 なぜC#のRequestで取得した場合には、 ソースが途切れる場合があるのでしょうか？ 取得中タイムとかの設定があるのでしょうか？ よろしくお願いします。
- ベストアンサー
- Microsoft ASP
- このページを保存したいのですが・・・
このページをHTMLかmhtで保存したいのですがオフラインで閲覧するとレイアウト、フォントがめちゃくちゃで見づらいです。 教えて！gooは面白い質問が多いので、PC内に保存したいのです。 いつまで見られるかわからないし、 ファイルに保存したほうが管理しやすいので是非とも保存したいのですが。 他のページでは普通に閲覧できるのですが、 このサイトは、LANケーブルを抜いて、完全にネットからオフラインにすると、 保存したHTMLファイルを閲覧しようとする際にレイアウトなどがめちゃくちゃになります。wikipediaのサイトも同じです。 ですが、ネット接続するとレイアウトが正しく表示されます。 ネット接続して、正しく閲覧できた直後なら正しく表示できる場合もありますが、 オフラインのまま電源を落して再起動して閲覧すると表示が変になります。 キャッシュか何かの関係ですかね？ レイアウトなどもネットから取得しなければ、保存したものが正しく表示されないのでしょうか？ 環境は、 Widnows XP SP2 pro IE6 ,Firefox です。 よろしくお願いします。
- ベストアンサー
- その他（インターネット・Webサービス）
- スマートフォンからPCサイトへリンク時の挙動
スマートフォンサイトを制作しています。 このサイトをAndroid端末で表示させて、ページの一番下の「PCサイトへ」をクリックするとPCサイトへリンクしますが、PCサイトのページの上部が表示されずに、なぜかページの中段にリンクしてしまいます。 _blankで別ウインドウ指定リンクすると、問題なくPCサイトのページ上段が表示されます。 ※ただ、ポリシー上、別ウインドウでひらかせることはNGとなっています このサイトの「PCサイトへ」をクリックして、PCサイトの上部が表示される様にする方法がわかる方いらっしゃいますか。 JSやCSSが原因かと思い、JS/CSSのリンクを削除してみましたが、症状は変りませんでした。 Androidはいろいろな端末で同症状が起きますが、私が使用している端末はDOCOMOの「P-01D」です。
- 締切済み
- CSS
お礼
ありがとうございます。 まったく機能しませんでした。とうほうビスタです。