喫茶XRAYトップページ

[9599] サンプルの更新返信　削除
2016/2/15 (月) 18:37:48 Mr.XRAY
[10_ウェブページの階層的な保存のサンプル] を更新しました．
http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#10

(1) ワードやエクセルで作成されたウェブページの画像も保存して表示
    可能にした
(2) ファイル名の指定がない場合は，デフォルトの名前 index.html をつけて
    保存するようにした
    この修正で，末尾がディレクトリ名のウェブページの保存が可能になった
(3) フレームのページを再帰的に検索するようにした

その他，以下の記事を追加しました．

[11_IHTMLDocument4.createDocumentFromUrl 関数]
http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#11

[12_Charset の値からコードページの値を取得]
http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#12

[9601] Re:サンプルの更新返信　削除
2016/2/15 (月) 20:37:00 Mr.XRAY
> [10_ウェブページの階層的な保存のサンプル] を更新しました．
> http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#10

わわわっ !!
今，何気にコードを見ていたら，変なコードが入っている．
まずい !!
後で直します．

[9602] Re2:サンプルの更新返信　削除
2016/2/15 (月) 20:50:07 Mr.XRAY
> わわわっ !!
> 今，何気にコードを見ていたら，変なコードが入っている．
> まずい !!
> 後で直します．

その変なコードだけ削除して，コンパイルしたのを UP しました．
多分 OK だと思しますが...

[9605] Re:サンプルの更新返信　削除
2016/2/17 (水) 15:06:50 Mr.XRAY
> [10_ウェブページの階層的な保存のサンプル] を更新しました．
> http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#10

このサンプルは，対象サイト内のファイルしかダウンロードしません．
したがって，ブログや Wiki 等のページの画像がダウンとロートされない場合が
あります．
それは，それで便利なことがあります．

中村さんの「中村の里」の記事は貴重なのですが，
広告が表示されて，ちょっくら扱いにくいのであります．
で，このサンプルでダウンロードして表示したのが，下の図です．
うん，中々いいんじゃない ?

http://tknakamuri.web.fc2.com/index.htm

以上，自画自賛でした．


[9606] Re:サンプルの更新返信　削除
2016/2/17 (水) 20:56:49 Mr.XRAY
[ 766_ウェブブラウザを使用しない Web ページの保存 ] に
[ 13_正規表現を使用した HTML 解析の簡単な例 ] を追加しました．

http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#13

[9607] Re:サンプルの更新返信　削除
2016/2/19 (金) 12:01:20 Mr.XRAY
サンプルプログラム集の [098] に以下の記事を追加しました．

[04_IDE での実行時にコマンドラインパラメータ ( 実行時引数 ) を設定]
http://mrxray.on.coocan.jp/Delphi/plSamples/098_DragDropStartApp.htm#04

[9617] ウェブページの階層的な保存のサンプルを更新返信　削除
2016/2/24 (水) 11:52:10 Mr.XRAY
[10_ウェブページの階層的な保存のサンプル] を更新しました．
http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#10

ブログ等で，別のホストに UP されている画像もダウンロードするように
してみました．
その結果，JUNKI さんのサンプルのページの画像もダウンロードできる
ようになりました．

[めもニャンだむ junkiの日常雑感・日記・プログラミングのランダムメモ]
http://blog.livedoor.jp/junki560/archives/30287059.html

ページ上部の画像は背景画像です．
これは別途ダウンロードして，ダウンロードした site.css の該当部分を
書き換えています．
background:url('imgs/e/2/e29d012d.gif') no-repeat; の部分です
                ^^^^^^^^^^^^^^^^^^^^^
アドレスが file:///D:/000/めもニャンだむ/archives/30287059.html
となっていますが，これは，ダウンロードの後にフォルダごと移動して，
そのフォルダの名前を変更しているためです．

[9618] Re:ウェブページの階層的な保存のサンプルを更新返信　削除
2016/2/28 (日) 11:31:43 Mr.XRAY
[10_ウェブページの階層的な保存のサンプル] を更新しました．
http://mrxray.on.coocan.jp/Delphi/plSamples/766_SaveWebPage.htm#10
 
> ページ上部の画像は背景画像です．
> これは別途ダウンロードして，ダウンロードした site.css の該当部分を
> 書き換えています．

自動で処理するようにしました．
これを含めて，以下の変更，修正をしています．

  ・CSS 内で定義している背景画像を保存するようにした
  ・PHP のウェブページの保存処理を追加
  ・保存の階層レベルを GUI で指定可能にした
  ・処理中のファイル名を表示するようにした
  ・保存ページジャンプ用の HTML ファイルを作成するようにした


サンプルとしてはコードが長いですが，
それでも「何万行」もありません (笑)

[9619] Re2:ウェブページの階層的な保存のサンプルを更新返信　削除
2016/2/28 (日) 11:52:12 Mr.XRAY
>   ・PHP のウェブページの保存処理を追加

この処理コードの追加で，「山本隆の開発日誌」のブログの記事が，
「似顔絵」付きでダウンロードできるようになりました．
ただし，本文の記事に書いていますが，ブログですので，
階層は深くしない方がいいです．


分かってはいると思いますが，
ウェブページの記事には著作権があります．
個人で利用する以外には，サイトの管理者に無断で使用することはできません．

当サイトの記事は，サイトにも書いてありますが，
極一部を除いて，自由に利用して構いません．

[9620] Re3:ウェブページの階層的な保存のサンプルを更新返信　削除
2016/2/28 (日) 12:14:48 Mr.XRAY
> ただし，本文の記事に書いていますが，ブログですので，
> 階層は深くしない方がいいです．

[766] のサンプルは，指定階層下のページだけをダウンロードの対象にしています．
したがって，階層を深くしても，その階層下にページがなくなれば，
それ以上リストに追加されることはありません．

ネット上にあるウェブページのダウンロードソフトでは，
階層を深くすれば深くするほど，等比級数的にページ数が増えていきます．
そのため，オプションの設定で，ホスト名が選択できるものもあるようです．

[9621] 更に更新返信　削除
2016/3/5 (土) 20:59:53 Mr.XRAY
以下の更新をしました．

(1) ダウンロードを，TIdHTTP を使用するコードから WinInet の関数類を
    使用する方法に変更
(2) Embarcadero のオンラインヘルプの Docuwiki の対応コードを追加
    前の更新と同じ PHP だが，スタイルシート関係の処理を追加

Embarcadero のオンラインヘルプのページをダウンロードして，
オフラインでブラウザで表示した場合，IE のバージョンによっては
スタイルが適用されないことがあるようです．
私が調べた限りでは以下のようになりました．

  IE  11.0.9600.17843     ○
  IE  11.0.9600.18204     ×
  IE  11.0.20.10586       ○
  Microsof Edge 25.10586  ○

[9622] Re:更に更新返信　削除
2016/3/6 (日) 16:30:01 Mr.XRAY
以下の更新をしました．

(1) ULタグの処理に間違いがあったので修正
(2) javascriptの疑似プロトコルの対応コードを追加
(3) 保存できないページに対するタグの属性設定コードを修正
(4) ダウンロードするファイルの拡張子をGUIで選択するようにした


[9623] Re2:更に更新返信　削除
2016/3/7 (月) 21:53:15 Mr.XRAY
ホホホツ，またまた失礼しました．
TIdHTTP から WinInet の関数をしたコードにした時，
https 関係の設定を忘れていましたので，修正しました．
具体的には InternetOpenUrl 関数の引数のフラグを変更しただけです．

これで，例えば

[TPMath / FBMath]
https://www.unilim.fr/pages_perso/jean.debord/tpmath/tpmath.htm

というページがあります．
ここの .zip ファイル欲しいな〜，と思ったとします．
FBMath のページにも .zip ファイルがあるのかぁ〜
一緒に欲しいな〜，と思ったとします．

そんな時は，そのサイトで，階層を 1 にして，.zip にチェックを入れて，
ダウンロードします．すると，まとめてダウンロードできちゃいます．

以上 !

[9637] Re3:更に更新返信　削除
2016/3/11 (金) 19:19:36 Mr.XRAY
掲示板等，cgi の特定のページであればダウンロードする機能を追加しました．
cgi のトップページからリンクを階層的に取得することはできません．

cgi のパラメータ，つまりコマンド類は，その cgi の作者によって異なる
可能性があります．パラメータの実行で，実際に HTML コードが取得できるかは，
やってみないと分かりません．
そこで，特定のページだけとしています．
そうすれば，その対象のページは，最初にチェックしますので．

かって，掲示板の巡回ソフトというのがありました．
私も使っていました．
そのような巡回ソフトでは，.cgi の違いを，プラグインというファイルで
設定するようになっていました．
つまり，特定の掲示板のログのダウンロード専用というのではあれば，
作成できることになります．

[9644] Re4:更に更新返信　削除
2016/3/15 (火) 22:18:17 Mr.XRAY
Advance software のページをダウンロードして表示したら，
下の図のようになってしまいました．
スライドショーになりません．

http://www.adv.co.jp/

ダウンロードした HTML コードを見てみたら，

<SCRIPT src="http://code.jquery.com/jquery-1.11.3.min.js">

となっていました．
基本的に，対象ホスト以外からはダウンロードしないサンプルとなっています．
jquery の Javascript は，自分のサイトのディレクトリにコピーして使うことも
多いのですが，直リンクもあるということですね．

他にも Javascript や CSS を提供しているところがあります．
そういうのもチェックしてダウンロードしないと，スタイルが再現できません．
これはちょっとね，考えてしまいましたが，jquery は有名なので，
ダウンロードするコードに変更しておきました．

INCM/CMT
Cyclamen v3.82