[魚拓] Irvine設定: Irvineでサイトを丸ごとダウンロード

[魚拓] Irvine設定: Irvineでサイトを丸ごとダウンロード
2010年09月13日18:20
カテゴリ調べ物
Irvineでサイトを丸ごとダウンロード
ダウンロードソフトで一番使うのが「Irvine」だけど、いまだに高機能すぎてよくわからない。
で、前の記事でサイトを丸ごとダウンロードするソフト「巡集」のことを書いたけど、いつも使っている「Irvine」で同じことができるならそれにこしたことは無い。
で調べてみたところ、詳細に書いてある掲示板を発見
http://pcq.furu.org/thread.php?thread=64200
以下、必要な部分だけを転載します。
＜準備＞
Irvineを起動し、下記の設定をします。
1)ダウンロード先のフォルダを設定します
　ファイル→新規作成で　作成します（名前やフォルダは別でもかまいません）
　・キューフォルダ名　「WebSite」（例）
　・保存フォルダ　「C:\WebSite」 （例）
2)作成した「WebSite」を丸ごとDL用のフォルダに設定します
　左側の「デフォルト」の下にできた「WebSite」を右クリック→フォルダ設定(X)
　ファイル(タブ)の保存フォルダの枠にある「URL構造を再現する」にチェック
＜実際のDL＞
・Irvineを起動する
・左側の「WebSite」をクリックし選択する
・ツール→リンクのインポート　で「リンク」ウィンドウを開く
・・アドレス欄にダウンロードしたいURLを貼り付けるなどして設定する
・・実行→開始　でリンク先URL一覧を取得する
・・リンク先URL一覧のどれかを右クリック→全て選択　全て反転させ
・・実行→ダウンリード開始
・・URL一覧を全て削除する（全て反転した状態で「Delete」キーを押す
・・「リンク」ウィンドウを閉じる
・Irvineのメインウィンドウでダウンロードが開始されているはずです
ダウンロードしたファイルは、保存フォルダの下にあります。例えば、説明した設定で「Irvineマニュアル目次」のサイト
http://hp.vector.co.jp/authors/VA024591/doc/manual.html
をダウンロードすると、
C:\WebSite\\hp.vector.co.jp\authors\VA024591\doc\manual.html
などができているはずです。

会社に行きたくない
http://blog.livedoor.jp/toutonosatomo/archives/51765215.html

設定によってDL成功率は変わるので,設定に神経をつかう。

◆オプション設定>>

>>ブラウザ>>監視タイプ: Name Space Handler,

◆キューフォルダ設定>>

>>HTTP(1)>>HTP Version:1.1

>>HTTP(2)>>User Agent: Mozzilla4.0

>>HTTP(2)>>Referer:URLと同じ

>>HTTP(2)>>クッキー:Irvine    

>>ダウンロード>>接続:リジュームできるまでトライする

>>ダウンロード>>接続:自動的にダウンロードを再開する/5

gfgfdgdfgfd pc

IrvinのURLリスト作成

BBSのダウンロードは

https://8906.teacup.com/xxxx/bbs?page=98&

>>https://8906.teacup.com/xxxx/bbs?page=98.html

のように変換する

fgfdgdf pc

[Irvine設定準備]
▽ファイル→新規作成でダウンロード先のフォルダ設定
　・キューフォルダ名　「WebSite」（例）
　・保存フォルダ　「C:\WebSite」 （例）
▽作成した「WebSite」を丸ごとDL用のフォルダに設定
　左側の「デフォルト」の下にできた「WebSite」を右クリック→フォルダ設定(X)
　ファイル(タブ)の保存フォルダの枠にある「URL構造を再現する」にチェック

会社に行きたくない
http://blog.livedoor.jp/toutonosatomo/archives/51765215.html







[IrvineDL]
▽Irvineを起動
▽左側の「WebSite」をクリックし選択
▽ツール→リンクのインポート　で「リンク」ウィンドウを開く
▽アドレス欄にダウンロードしたいURLを貼り付けるなどして設定
▽実行→開始　でリンク先URL一覧を取得
▽リンク先URL一覧のどれかを右クリック

▽全て選択　全て反転させ実行

▽ダウンリード開始
▽URL一覧を全て削除する（全て反転した状態で「Delete」キーを押す)
▽「リンク」ウィンドウを閉じる
▽Irvineのメインウィンドウでダウンロードが開始されているはずです

会社に行きたくない
http://blog.livedoor.jp/toutonosatomo/archives/51765215.html







ダウンロードしたファイルは、保存フォルダの下にあります。例えば、説明した設定で「Irvineマニュアル目次」のサイトhttp://hp.vector.co.jp/authors/VA024591/doc/manual.html
をダウンロードすると、C:\WebSite\\hp.vector.co.jp\authors\VA024591\doc\manual.html
などができているはずです。

会社に行きたくない
http://blog.livedoor.jp/toutonosatomo/archives/51765215.html

[Web][SNS] マイスペース,Myspace

マイスペースを始めましょう
2011/1/27, Thu 10:09
マイスペースへようこそ！
まず始めにページの一番上にある2つタブナビゲーションをチェックしてましょう。
オススメ
このタブで最もアツいコンテンツやあなたが気に入るオススメコンテンツがいつでもチェックできます。
マイエリア
このタブでMyプロフィール、写真、メール、イベント、ゲーム等の自分のコンテンツにすぐにアクセスできます。
マイスペースではではユーザーのプライバシーを尊重しています。
マイスペースからのメール (プロダクト最新情報：サービスの更新、新機能情報) を今後拒否するには、こちらをクリック して、サービスの更新情報のチェックを外してください。プライバシーに関するご質問等はこちらをご覧ください。www.myspace.com/help または郵便でも ご連絡いただけます。 Myspace, 8391 Beverly Blvd, #349, Los Angeles, CA 90048 USA　 © Myspace Inc. All Rights Reserved.

マイスペース
https://myspace.com/

[wEB][RSS] あまつべとFeedWindでつくるブログツール

Amazonランキング 非公式RSSフィード
使い方
Amazonの公式RSSが廃止されたらしく配信終了していたので、 誰でも簡単にAmazonベストセラー売れ筋ランキングのRSSを取得できるサービスを作りました。
難しいAPIなどの知識は不要。
アソシエイトIDにも対応しているので、アフィリエイト用にも使えます。
取得したいAmazonの売れ筋ランキングページのURLをフォームにコピペして、フィード生成ボタンを押してください。
注意
RSSへのアクセスは1時間に1回程度でお願いします

Amazonランキング 非公式RSSフィード(あまつべ)
https://am-tb.tk/amaranrss/

Bring content and life to your websites
The world's favorite RSS widget integrates dynamic
content into your websites - easier and faster

FeedWind
https://feed.mikle.com/ja/features/

[code][ajax] ページをURLで指定して、要素内にHTMLとして出力

ページをURLで指定して、要素内にHTMLとして出力
サンプルコードと合わせてみていきたいと思います。
まずは取得したいコンテンツ（＝要素）があるページのURLを指定します。
そして、find関数で取得する要素を取得し、その要素を変数へ格納させ、表示させたいHTMLの中の要素へappend関数で出力します。

プログラミングナレッジ
https://designsupply-web.com/knowledgeside/2086/

【sample.html】
＜body＞
＜script＞
$(function(){
$.ajax({
url: 'http://example.com', // 表示させたいコンテンツがあるページURL
cache: false,
datatype: 'html',
success: function(html) {
var h = $(html).find('#hoge'); // 表示させたいコンテンツの要素を指定
$('#wrap').append(h); // append関数で指定先の要素へ出力
}
});
});
＜/script＞
＜div id="wrap"＞

＜/div＞
＜/body＞

[RSS] Google Feed APIを使わないで相互RSSを表示する

[RSS] Google Feed APIを使わないで相互RSSを表示する
Google Feed APIを使わないで相互RSSを表示する方法
「以前の投稿」で紹介しましたが、アクアリウムWikiではGoogle Feed APIを利用して相互RSSを表示していました。
しかし、Google Feed APIはキャッシュ周りに不具合があるようで、古いものが表示されることがありました。
また、近々廃止される方針らしく、いつ停止してもおかしくありません。
そこで「jQueryだけで相互RSSを表示しよう」という試みです。

jQueryでRSSを取得する方法
フィードを取得して、各アイテムを並べ直すだけなら、jQueryで簡単に実装できます。

$.get（FEED_URL, function （data) {
$（data).find（"entry").each(function () { // or "item"
var el = $(this);
console.log(el.find（"link").text());
console.log(el.find（"title").text());
});
});

FEED_URLは名前の通りフィードのURLを指定します。
jQueryのget()を使いデータを取得しています。
取得したdataの内、find()でentryを取得し、each()で回しています。
このentryはフィードの種類によってitemなことがあるので、フィードの種類に合わせて変更してください。（2パターンしかないので複数のフィードに対応するなら分岐するのもあり）
あとは取得したitmeを入れたelからfind()で、それぞれのテキストを取得しています。
実質わずか5行程度で取得して各アイテムを個別に取り出すことができました。
また、Google Feed APIは他のスクリプトが完了した後に実行されたため、表示が遅いという欠点があったのですが、jQueryはすぐに表示されます。
「早く乗り換えれば良かった」というのが実感です。
ちなみに今回アクアリウムWiki相互RSS用に作成したコードは以下のとおり。

$.ajax({
url:'http://aqwiki.net/rss/rss_list.txt',
success: function(data){

var rss_url = 'http://aqwiki.net/rss/' + data;

var htmlstr = "";
htmlstr += '＜h2＞＜a href="http://aqwiki.net/rss/ko.html" rel="nofollow" target="_blank"＞アクアリウムWiki 相互RSS＜/a＞ 新着記事＜/h2＞';
htmlstr += '＜div class="all_body"＞';
htmlstr += '＜ul＞';

$.get(rss_url, function(data) {
$(data).find("item").each(function (i) { // or "entry"
var el = $(this);

var oddeven = ( i % 2 == 0 ) ? 'lieven' : 'liodd'; //oddとevenを付けるため。三項演算子
htmlstr += '＜li class="' + oddeven + '"＞';
htmlstr += '＜img src="http://www.google.com/s2/favicons?domain=' + el.find("link").text() + '"＞';
htmlstr += '＜a href="' + el.find("link").text() + '" title="' + el.find("title").text() + '" rel="nofollow" target="_blank"＞' + el.find("title").text() + ' - ' + el.find("category").text() + '＜/a＞';
htmlstr += '＜/li＞';

});

htmlstr += '＜/ul＞';
htmlstr += '＜/div＞';

var container = document.getElementById("aq_feed");
container.innerHTML = htmlstr;

});
}
});

複数のサイトからフィードを取得する場合クロスサイトドメインの問題があるので、まずはPHPのajaxを利用して最新のフィードを取得。並べ替え等の処理をしたフィードのファイル名を書き出しています。（この辺は二度手間ですがGoogle Feed API利用時の名残りです）
それを$.ajax()で読み込み、ファイル名として利用し、$.get()で取得という流れです。
後は、htmlのIDがaq_feedの要素に作成したRSSを代入して表示しています。
興味のある方はhtmlに以下のコードを貼り付けて表示してみてください。
これはheader内に追加
＜link rel="stylesheet" href="http://aqwiki.net/rss/default.css" type="text/css" /＞
＜script type="text/javascript" src="https://ajax.googleapis.com/ajax/libs/jquery/2.2.0/jquery.min.js"＞＜/script＞
＜script type="text/javascript" src="http://aqwiki.net/rss/rssexp.js" charset="UTF-8"＞＜/script＞
あとはbody内の表示したい部分に以下を追加
＜div id="aq_feed"＞＜/div＞
ちなみに相互RSSはアクアリウム関連のサイトなら、自由に参加できます。
参加希望の方は「こちらのフォーム」より必要事項を記載の上、応募してください。

OxyNotes
https://oxynotes.com/?p=10115

[音声][楽曲][MIXX] 山下達郎メドレー(作業用BGM)

[Web] リリースチェッカー,新着情報RSS配信サービス

[Web] リリースチェッカー,新着情報RSS配信サービス
リリースチェッカーはAmazon.co.jpの新着情報RSSを配信するサービスです。
チェックしておけば、好きなアーティストのCDが知らぬまに発売されていた、なんてことがなくなります。
RSSを生成
キーワード：
含めるジャンル：和書 洋書 音楽 DVD ゲーム ソフトウェア
キーワードの判定を厳しくする（説明）
アダルト商品を含める

リリースチェッカー
https://a.noare.net/