2013年7月15日月曜日

[Adaway] 日本向け 超強力 広告除去用 Hosts ファイル [Adfree] [Windows7] [Windows8]


*2014年1月Adaway登録用のURLがCubby、もしくはGoogleSiteに変わりました。SugarSyncから変更お願いします。*

rootをとった方ならAdawayAdfreeというソフトを聞いたことがあると思います。 端末内部のHOSTSファイルというのをいじることで特定のサイトに接続させなくすることができます。

127.0.0.1 localhosts
127.0.0.1 a○me.com

みたいなテキストファイルが書かれていて、これは127.0.0.1が元々、自分自身のアドレスをさしていて、
そしてスペースを挟んでa○me.comを書くことで、a○me.comに接続しようとした場合、 強制的に127.0.0.1に飛ばします。
これにより無駄な通信を抑えることが出来る仕組みです。 
しばしば、このファイルを知らないうちに改ざんすることで悪いことをしようとするウイルスなども 多く確認されていますが、自分で理解して変更するのであれば大丈夫でしょう。 

今回はボクの使っている日本向けのHostsファイルを公開します。
3つのversion用意しますので、好みでお使いください。
日本向けのフィルタですが、海外の悪質サイトやAdサイトも多数登録してあり
かなり強力になっております。
あとAmazon.co.jpとYahooはレイアウトが崩れる問題があるため、
Amazon.co.jp関連はリストから除外しています。
Yahooのレイアウトを維持するためには、まず

i.yimg.jp
rd.yahoo.co.jp
をホワイトリストに追加してください。

それでもダメなら
*.yimg.jp
*.*.yimg.jp
をホワイトリストへ追加する必要があります。
(*現在のところ、Yahoo関連の表示に大きく関わる部分はリストに含んでいません) 

あとサイズが重ければ重くなるほど遅くなると心配してる方もいらっしゃると思いますが
Xperia Zで実際使ってみてそんなことはありません。 

特徴まとめ
・様々なサイトから情報を統合。特に日本向けを意識。
・広告を除去し無駄な通信を抑え、多くのTracking Cookieや悪質サイトも弾く。
・WindowsPCでもAndroidでも使える。
・エラー構文を削除し、ブラッシュアップ。(エラーをなくすため入念に人力とマクロでチェック)
・メジャーサイトのレイアウトを壊しにくい (Yahoo, Amazonなど)
・# など無駄な部分を完全削除
・美しく、また確認しやすくなるようアルファベット順にソート
・重複を完全削除
・基本的にこれだけで事足りるように作ってある。

Xperia Z と Windows8、Windows7で運用しています。 

細かい書き換え方法や、Adawayの使い方などはほかのサイトを参考にしてください。 
またMediaFireのダウンロード方法につきましても解説は省きます。
基本はSugarSyncでいいはずです。

直接Adawayに組み込めない場合はご自身でGoogle DriveDropboxに移してください
また、どれか一つのみの登録をオススメします。
内容がある程度重複しているため、3つとも登録することに対して意味はありません。

日本向けHOSTS for Windows PC (2014/05/13 ver)
(登録用) https://www.cubby.com/pl/hosts_for_Windows8.txt/_e7b7c8ae88b245e4ac0ae70e94b0b35a
(登録用) https://sites.google.com/site/cosmonoteshosts/hosts_for_Windows8.txt
(予備用) https://www.sugarsync.com/pf/D2728038_217_9963232(転送量オーバーでリンク無効に)
(予備用) http://www.mediafire.com/download/u0wadm3a9407dgf/hosts_for_Windows8.txt
*特徴 
Amazon、Yahoo、Facebook、Twitterなどでフィルタを軽度にすることで 接続障害を可能な限り検証して減らした結果つくったファイル。 またTracking Cookieや一部の悪質なサイトに接続させなくしています。 TotalVirusのキケンなURLをまとめたサイトからリスト流用です。.txtの拡張子を外してそのまま上書きすることでも使えますが、Androidやフィルタソフトで使う場合と異なり、起動時のみ多少の読み込み時間が必要となります。またAdBlock用のEasyListのMalwareListから危ないHOSTSを引き抜いて統合しました。(*セキュリティソフトでHOSTSの改変の警告が出ることがあります。)

日本向けHOSTS for Adaway (2014/05/13 ver)

(登録用) https://www.cubby.com/pl/hosts_for_Adaway.txt/_680e34d41b734958907ebef4380805f4
(登録用) https://sites.google.com/site/cosmonoteshosts/hosts_for_Adaway.txt
(予備用) https://www.sugarsync.com/pf/D2728038_217_9963297(転送量オーバーでリンク無効に。)
(予備用) http://www.mediafire.com/download/9fri1qa2wmhgdjr/hosts_for_Adaway.txt
*特徴
スマートフォンの広告は多彩であり、色々なのがありすぎて複雑に。AdawayにいくつかのHOSTSが最初から公開されていますが、それをさらに統合してソートし、重複を削除し、磨き上げたのがこのファイルです。2chのAdawayスレからも一部採用しています。ファイルサイズはこの中で一番小さくなっています。


日本向けHOSTS Ultimate Ver 33,000 (2014/05/13 ver)
(登録用) https://www.cubby.com/pl/hosts_Ultimate.txt/_15815deb4359441cbc9ce6b7a52c8eb0
(登録用) https://sites.google.com/site/cosmonoteshosts/hosts_Ultimate.txt
(予備用) https://www.sugarsync.com/pf/D2728038_217_9963399(転送量オーバーでリンク無効に。)
(予備用) http://www.mediafire.com/download/hkck7v31jwzjifi/hosts_Ultimate.txt
*特徴
あらゆるサイトから有用そうなファイルを集め、エラー構文を全て無くし、無駄を省くなどブラッシュアップした結果生まれた先鋭のメタアナライシスであり、アフィサイトや不思議な広告共を根こそぎ防ぐ強力なファイルです。現在テザリングを多様するXperia Zで活躍しています。通信速度も特に重くもならないのでまだこのくらいのサイズなら大丈夫なのでしょう。Xperia Zで使う場合、ホワイトリストをYahooや楽天などのサイトで活用する必要があります。



iPhoneでもこのHOSTSファイルを利用してProxy経由にすることで、HOSTSの書き換えをせずとも広告を消せるそうです。iPhoneのHOSTS書き換えにはJailbreakがおおよそ必須。
iphoneの広告を消す

あと最近BitCasaというdropboxのようなオンラインストレージをお試しで使い始めました!
10GBまで無料で、年に99ドル払うと容量が無限になります。
もし興味がありましたらこちらから登録どうぞ!
BitCasa同士だとファイル配布や交換をすべてオンライン上で行うことができるらしい。

SugarSyncもお試しで使い始めました。こっちのほうがAdawayに直登録できるのでよさそう。
リンクの登録お願いします。あとファイル名の変更でたまーーにリンク先が変わるかもしれないのでよろしくおねがいします。また、こちらからご登録くだされば無料ストレージがお互い500MBずつ増えますので、このHostsをお使いの方はどうかどうか、SugarSyncをご登録くださいませ。なんどもすみませんm(_ _;)m 基本的にどれもDropboxみたいなものです。アカウント停止警告いただきました。

Cubbyアカウントを取得してみました。Cubbyは軽くて見やすいのがとてもいいですね!ヾ(*'ω'*)ノ 登録もとてもシンプルです。上記のリンクから登録頂きますと、例のごとくお互いのストレージ容量が増加します。直接ダウンロードできます。

以下(更新履歴)

2013/07/23 初アップロード
2013/08/11 20個前後追加。不要なHOSTSをBrushUP。Amazonの正常表示に関わるものを修正
2013/08/12 PC版のHOSTSで楽天のSCRIPTに関わる部分を除去
2013/08/13 pingチェックも行いました。大変な作業だった・・・が1万近く削除した。100前後追加。
2013/08/31 偽ブランド品販売サイトいくつかと、BABYLONやGreenCard系の詐欺広告を追加。
2013/09/03 National Geographicが見れなかったのを修正。
2013/09/03 リンク変更。jword must die を追加。(WindowsとUltimate版のみ)
2013/09/04 新しい広告サーバーをgithubより追加。+64個。(Ultimate版のみ)
2013/09/11 微修正 (Adaway&Ultimate版)。
2013/09/11 Windows版にMalware関連のHOSTSリスト追加で大幅改定
2013/09/21 何件か追加。
2013/09/26 何件か追加。
2013/09/28 エラー構文訂正と削除。日本向け広告フィルタ5件追加。
2013/09/29 jpドメイン5件追加。
2013/10/06 何件か追加。
2013/10/22 何件か追加し、いらないものを削除。
2013/11/04 何件か追加。
2013/11/17 ping確認終了。何件か追加し、削除。
2013/11/19 60件ほど追加。ここしばらくスマホで広告を見ていない。
2013/11/21 モンクレールの偽物通販サイト110件ほど追加。
2013/12/12 微修正。Windows版の修正を検討中。
2013/12/19 微修正。Windows版を大幅修正中。
2013/12/28 Baiduのログ送信先とされるHOSTS追加。現在ご利用の方はWhiteList化どうぞ
2013/12/29 微修正。
2014/01/08 微修正。
2014/01/18 微修正。Windows版の修正は進まず。
2014/01/21 ad-aid追加。
2014/01/21 微修正。エンコードをUTF8(LF)に変更。メインのアップロード場所をcubbyに変更
2014/02/27 修正。
2014/05/13 いくつか修正。投稿内容にもとづき改善。

51 件のコメント:

  1. まとめありがとう!ほんと助かります。

    返信削除
  2. ultimateいただきます!
    ありがとう!

    返信削除
  3. 使っていただいて嬉しいですヾ(*'ω'*)ノ 根気が続くまで更新頑張ります。

    返信削除
  4. ホワイトリストに追加しても
    yahooの記事の画像が表示されません
    改善お願いします

    返信削除
  5. i.yimg.jp
    rd.yahoo.co.jp
    をホワイトリストに追加してください。
    それでもダメなら
    *.yimg.jp
    *.*.yimg.jp
    で表示されると思います。
    うちの環境では上記2つだけで表示されていますし、
    そもそも上記2つのHOSTSは私のリストには含まれていませんので
    他のリストで弾かれている可能性があります。

    返信削除
  6. いやぁ、とても重宝しています。ありがとうございます。

    proxyに組み込んで iphoneや pcでの広告削除に活用させていただいています。
    勝手にリンク張っちゃってますがまずかったらお手数ですがご連絡ください。

    返信削除
  7. iPhoneでもできるんですね!すごいなぁ。お役に立てたのあれば幸いです(*^_^*)

    返信削除
  8. いただきました
    ありがとうございます
    すごく助かってます

    返信削除
  9. 少しでもお役に立てたのであれば嬉しいですヾ(*'ω'*)ノ

    返信削除
  10. ありがたく使わせて頂いております。
    何か力になれることがありましたら、力になりたいです。

    返信削除
  11. アリガトウございます°˖✧◝(⁰▿⁰)◜✧˖°
    特に本気で作ってるわけでもないのでお気持ちだけでだいじょうぶですよ!!1割手作業9割マクロです。
    あえていうなれば、ボクのAmazonリンクからお買い物していただければですね・・・

    返信削除
  12. 細かい更新ありがとうございます。助かります。

    返信削除
  13. nikkei.co.jp関連を削除しないと、日経が見れません。
    ホワイトリストに追加しても無駄でした。

    返信削除
  14. 具体的にどこが見れないのかわからないと対処できません。またホワイトリストの方が優先される仕様なので、ホワイトリストに登録して見れないということは、登録するものを間違っています。

    返信削除
  15. これ一本で捗ります。今までの十数本のリストは何だったって思うくらい…
    ほんと有り難う!更新頑張ってください。

    返信削除
  16. Windows用ありがたく使わせて頂いております。
    更新頑張ってください。

    返信削除
  17. いつも使わせていただいております。
    これ一つで広告が軒並みブロックできるのでとても助かっています。
    しかし先日Hostsファイルを更新したところ、様々なサイトの訪問者数や更新履歴の取得ができなくなってしまいました。
    なお「日本向けHOSTS for Adaway」を使わせていただいており、11/17更新時のものまでは通常通り見れたと思います。
    自身でホワイトリストを追加しようと思ったのですが、TCPダンプを用いて探してもどのHostsが該当するのかがわからない状態です。
    もし該当するHostsをご存知でしたら教えていただけると幸いです。

    返信削除
  18. >>ギン様
    お手数おかけいたします。ここ最近は詐欺サイトとかTracking Cookie系を登録していましたが、ほぼマクロで作成しているため、具体的にどれが原因かすぐには分かりません。申し訳ありませんが、2013年11月12日のAdaway版Hostsを一時的に置いておくのでご自身でPCにダウンロードして比較することで原因を検索していただけないでしょうか。来週までは多忙すぎてあまり自由な時間が無いため、お手数おかけいたしますがよろしくお願いします。http://l.bitcasa.com/d07BYoWm

    返信削除
  19. >>えん。様
    返信していただき誠にありがとうございます。
    結論から申しますと、「ajax.googleapis.com」をホワイトリストに追加することで無事自己解決することができました。
    用意していただいたHostsファイルと比較して色々試したのですが該当するものが見当たらず、再度TCPダンプを用いて1つずつ原因となるHostsを調べたところ、「ajax.googleapis.com」が原因であることがわかりました。
    11/17に更新されたHostsファイルでも通常通り見れていたと思っていたのですが当方の勘違いだったようです…
    わざわざHostsファイルを用意していただきお手数をおかけまでして大変申し訳ありませんでした。

    返信削除
  20. >>ギン様
    ajax.googleapis.comはAndroidでJavaのLibraryはあまり使わないと思って、Adaway版だけに入れておいたやつなのですが、ほかのバージョンと同じく消しておきますね!お手数おかけしてもうしわけありません、ご報告ありがとうございました。

    返信削除
  21. 大変便利に使わせてもらってます。
    本当にありがとうございます。
    もじご存知だったら教えてもらいたいのですが現在Windows7にて
    日本向けHOSTS for Windows PC
    を使用させてもらっているのですが
    休止状態からの回復後、もしくはPC起動後のネット接続がかなり遅いです。
    (体感では3分程度?接続できません)
    hostsファイルを従来のものに戻すとすぐに接続できます。
    他の方でも同じような状態なのでしょうか?
    ちなみにandroidでも使用させてもらっているのですが、androidでは接続に支障はなく快適に使用させてもらってます。
    もしよかったらご連絡お願い致します。

    返信削除
  22. ご指摘ありがとうございます。基本的に説明不足で申し訳ありません。Windows7での使用についてですが、Windows7のHostsに組み込むと接続における初速は初回接続のみ確かに遅くなると思います。これはファイルが重ければ重いほど顕著になる傾向にあり、マシンスペックにも依存します。これを回避するには、ファイル自体を軽量化するか、ルーターやサーバーに直接組み込む、もしくはPrivoxyのようなソフトを使ってフィルタリングすることが必要です。またファイル「Web フィルタリング機能を追加」へエクスポートすることでも似たようなことができます。

    とりあえず、Malware対策を省いた軽量版を一時的においておくので試してみてください。
    http://l.bitcasa.com/Ke2HvuD4

    返信削除
  23. ご丁寧な対応ありがとうございます。また連絡が遅くなって申し訳ありませんでした。
    実はえん。様のページ内のadblock plusを導入してむしろこちらのほうが用途にあっていると思い、hostsは従来のものに戻すことにしました。わざわざ計量版をアップしていただいているのに本当に申しわけないです。接続に時間がわかるという情報が得ることができてよかったです。休止状態からすぐに接続したいことが多いもので。
    現在chromeにadblock plusを導入しています。すぐにon offできて動作も満足しています。
    ただシングルクリックで開くリンクがなぜか開けなくなってしまい、新規タブで開くにしないと開けなくなってしまいました。もしこちらの現象についてもご存知でしたら教えてもらってもいいでしょうか?知らなかったら無視していただいて大丈夫です。本当にいろいろありがとうございます。

    返信削除
  24. おそらくjsLibraryの読み込みを阻害していることで起こるのだろうと考えておりますが、詳しい原因は調べておりません。メジャーな他のフィルタでも起こることがあるようです。私の環境では起こらない現象であるため再現が難しいのですが、原因がわかり次第更新致します。m(_ _*)m

    返信削除
  25. いつも連絡ありがとうございます。
    googleの検索結果からのリンクが開けなかったのがほとんどなのですがgoogleをホワイトリストに追加したところ、ほとんど問題がなくなりました。広告がないところもブロックされることがけっこうありますが、その場合はoffにすればいいので今の状態で結構満足しています。この度は本当にいろいろありがとうございます。

    返信削除
  26. こんにちは。全部登録してありがたく使ってます!
    Androidだと普通に使えるんですが、PCのABPで登録しようとすると失敗してしまいます
    ほかの拡張機能でもひと通り試してみましたが上手く行きませんでした
    PCだと使えないんでしょうか・・・?
    情弱ですみません・・・

    返信削除
  27. AdawayとAdBlockはフィルタの種類が完全に別ですので、対応したものじゃないと機能しません。

    返信削除
  28. www.find-job.net
    が登録されていますが、mixiが運営しており、サイトそのものは有害ではないはずですので、削除おねがいしますー。
    広告はadblcokで対処したほうがよさそうです。

    返信削除
  29. 広告を消すのが目的のフィルタなので、find-job.netを含むapiがある以上消すことはありません。個別にホワイトリスト化でお願いします。

    返信削除
  30. ありがとうございます。非常に重宝しております。

    返信削除
  31. Ultimate Ver 33,000を入れましたところ、YouTubeのコメントが読み込めなくなってしまいました。当方、MacのOS X10.9 Safari 7.0です。
    127.0.0.1 ads.youtube.com
    127.0.0.1 s0.2mdn.net
    127.0.0.1 s1.2mdn.net
    127.0.0.1 googleads.g.doubleclick.net
    これらはCMを飛ばすため前々から入れていましたが、コメントは読み込めていたのでこれらが原因ではないと思われます。よろしくお願いいたします。

    返信削除
    返信
    1. 自己解決しました。どうやら
      127.0.0.1 apis.google.com
      こいつが悪さをしていたようです。お騒がせしました。

      削除
  32. >> apis.google.comについて

    ご報告ありがとうございます。apis.google.comがYoutubeとGoogle+の連携に悪影響を及ぼす可能性があることは以前より認知していましたため、Windows版には含めていません。現在Windows版の大幅改訂作業中ですので少々お待ち下さい。Windows版はもちろんMacOSでも使えますが、Windowsに対するMalwareやAdwareを弾く目的があるため、Macでは無駄になる記述部分が多いことをご了承ください。もしよろしければ、以下に暫定版をおいておくのでお試しください。

    http://l.bitcasa.com/hIevA6RO

    返信削除
  33. 始めまして。
    いつも利用させていただいています。
    更新作業お疲れ様です。

    広告のドメインに関してなのですが、
    sp.trax-ad.jp だけでなく、
    spn.trax-ad.jp もあると思います。

    差支えなければ、次回更新時にリストへの追加をご検討ください。

    返信削除
  34. 登録しました。ご報告ありがとうございます!

    返信削除
  35. 大変なこと作業をやってくださりとても感謝しているのですが 、gigazineというサイトの広告がなかなか消えません。 不自由しているわけではないのですが、どうか対応願いします。私はandroid 4.4 nexus7 を使用しています

    返信削除
  36. gigazineさんのサイトの広告はgigazineそのもののサーバーにあるタイプはAdawayの仕組み上 消せませんが、それ以外の広告はおそらく完封してるとおもいます。

    もしよろしければ、スクリーンショットをどこかにアップロードしていただけないでしょうか。あとChromeでデータ圧縮がオンになっていると消えない場合があります。

    返信削除
  37. 分かりました。こちらにgigazineさんのスクリーンショットをアップしましたのでご確認ください。ちなみにchromeのデータ量圧縮機能はオフです。
    https://www.dropbox.com/s/jtuhhkf415elu4a/Screenshot_2014-01-21-17-38-52.png

    返信削除
  38. スクリーンショット確認させていただきありがとうございました。

    うちの環境だと完封でした。ちなみに自分でUltimateと名づけたヤツで確認しました。

    127.0.0.1 gigazine.asia
    が抜けているのが原因だとおもうんですが、配布してるhostsファイルにはすべてこれが含まれているんでなぜ表示されてしまってるのか謎です。

    hostsの配布先を再確認してアップデートしてみてください。hostsのアドレスはアップロード先の変更の都合上2回ほど変更しました

    返信削除
  39. 一応もう1回やってみたのですが出来なかったのでgigazine.asiaをブラックリストに登録したところ消えました。ありがとうございました。

    返信削除
  40. 日本向けHOSTS for AdawayをHTL22で使わさせていただいておりますが、
    適用すると”対戦ズーキーパー”や”モンスターストライク”が起動直後に強制終了
    するようになってしまいます。
    「広告ブロックを無効化」や自分で作った結構昔のhostsファイルを適用すると
    起動するようになります。

    起動出来るようにはならないでしょうか?

    返信削除
  41. 投稿ありがとうございます。申し訳ないのですが、原因となるhostの記述を指摘していただけないと対応は難しいです。本当はインストールして調べさせていただきたいのですが多忙で時間が、、、

    返信削除
  42. 返信ありがとうございます。
    色々調べてみます。

    返信削除
  43. androidを使っているのですが最新版のスマホ用ホストファイルを使うとGoogle系のサービス全般にに繋げなくなります。
    プレイストアとかアプリ経由でログインする系統です。
    修正お願いします。

    返信削除
  44. >Google系のサービス全般について
    apis.google.comをホワイトリストに入れるとたぶん使えます。私のリストではUltimate版にのみ含まれています。

    返信削除
  45. 相反する要望があると思うので、要望ではなく報告です。
    AndroidのAdblockでは、
    gigazine.asia
    をブロックしていると本文が出なくなることがあるようです。
    そのような症状が出ている場合にはホワイトリストに登録してください。

    返信削除
  46. 僕が思うに、
    blog.livelog.biz
    airseed.org
    も追加しておくべきだと思います(なぜなら、記事風広告のページなので)。
    あと、こちらは追加してあるかわかりませんが、
    ad.dmm.com
    もしておくべきだと思います。
    よろしくお願いいたします。

    返信削除
  47. はじめまして。
    日本向けHOSTS for Windows PC (2014/05/13 ver)を使用させて頂いております。
    鬱陶しい広告が消えてとても助かっています、ありがとうございます。
    今のところひとつ問題があるのですが、ライフスタイルブログ村の表示が崩れてしまうのですが
    改善方法があれば、教えていただけないでしょうか。
    宜しくお願い致します。

    返信削除
    返信
    1. すみません、自己解決しました。

      削除
  48. こちらのUltimate版を拝借し、ちょっと改変して再配布させていただきます。このファイルに関する著作権についての明記、特にAll rights Reservedがないので…
    もし、問題があればコメントに返信をいただければ本人確認の上削除させていただきます。
    URLは後ほど掲載します。
    よろしくお願いします。

    返信削除
  49. 横から失礼です
    元のAdAWayのライセンスがGPLv3ですからGPLv3では?

    返信削除