How to Keep Feed Scrapers, Spammers, and Splogs From Stealing Your Contentどのようにお客様のコンテンツを盗むからのフィードをスクレイパー、スパマーは、スプログを維持する

You may not know it, but criminals and thieves are waiting for you to write your next blog post.あなたが分かっていないかもしれないが、犯罪者や盗賊のため、お客様の次のブログ記事を書くのを待っている。 They’re waiting so they can scrape your feed and weave it into their spam splog hoping to either build links for illicit sites or make quick bucks doing nothing on Made for Adsense of MFA sites.同サイトのフィードをこすり取ることができるので、そのマークのいずれかスプログに違法サイトのリンクを作成したり、すぐにドルMFAサイトのAdSenseのメイドには何もすることを期待して織り彼らお待ちしております。 I’ll show you how to beat them and use your already existing .htaccess file.私は彼らを倒すことや、既存のを使用して表示されます。 htaccessファイル。 Whether you’ve been blogging for a long or short time you should be able to spot spammers a mile away.あなたがスパマーマイル離れた場所にできるようになります長いか短い時間にブログをしているかどうか。 If not - I’m going to help you figure it out.君はそれを理解する助けになるんだそうでない場合は-。

There are 3 ways I have to check for spam.私のスパムをチェックする必要がある3の方法があります。 The first is in my Wordpress dashboard “incoming links”.最初の私のWordpressのダッシュボードを"被リンク"です。 If you don’t use Wordpress, that’s ok - all you have to do is go to Wordpressの場合は、オクラホマの-を使用していないすべての場合に移動するだけです。 Google Blogsearch GoogleのBlogsearch and do a search for “link:www.yoursitename.com”.と"リンク： www.yoursitename.com "を検索する。 That’s where Wordpress gets it’s results. Wordpressのは、ここでは検索結果の取得だ。

You can’t always tell what’s spam just from the titles, but in this case - I think the first result is plainly spam.あなたはいつも何のマークのタイトルだけから、言うことができますが、この場合は-私はその最初の結果はっきりスパムだと思う。 Here’s what I saw when I clicked on the link…ここに私は、そのリンクをクリックして何を見たの...

The splog is a scraper of the worst kind - the kind that steals your entire posts (images and all).最悪なのは、スプログスクレーパーている-は、お客様のすべての記事（画像と盗塁の種類のすべて） 。 This post contains a link to my blog, but actually it’s not a post of mine at all.この記事は、私のブログへのリンクが含まれても実際にはすべての私の記事ではない。 This is a post written by Alan over atこれはポストのアランが上で書かれている Affiliate Confessionアフィリエイト告白 , and he just happenned to link back to my site.で、彼は自分のサイトにリンクするにはhappenned 。 You can find lots of spammers and scrapers by looking at who’s linking to your site.あなたは、あなたのサイトにリンクするのを見て、スパマーやスクレイパーがたくさん見つけることができます。

The second way I check for scrapers leeching my rss feed is by the comments I receive.スクレイパー私のRSSフィードリーチングのための2つ目の方法私は私のチェックを受けるのコメントによるものです。 Sure, you can receive spammy comments on your blog, but scrapers leave spammy “trackbacks” just like the droppings from a foul animal.もちろん、ご自分のブログにコメントスパムを受け取ることができますが、スクレイパー"ファウル動物の糞のようにスパム"トラックバックを残す。 I can hear a few people in the background asking “what’sa trackback?”.私はその背景" what'saトラックバック？ "要求で数人から話を聞くことができます。 A trackback is kind of like an “auto-comment”.トラックバックを"自動コメントのようなもの"です。 A scraper site steals your content using your RSS feed or directly from your page, and then it attempts to communicate with your blog by sending a “ping” for a trackback.スクレーパーサイトのページから、それをあなたのブログでトラックバックのための" pingを実行"を送信して通信を試み、お客様のコンテンツを使用して、 RSSフィードまたは直接盗みます。 Normally a blogger (or his blog software) might send out a “ping” manually or automatically to every URL linked in the latest post.通常、ブロガー（あるいは彼のブログソフトウェア） "を手動または自動ですべてのURLは、最新の記事にリンクするための"に対してpingを送信する可能性があります。 The trackback comes into your blog as a comment that you have to approve.トラックバックをコメントとしてあなたのブログには、承認する必要がある。

In the example above I actually received 3 trackbacks during the night I caught this morning - which prompted my to write this article.上記の例では実際のところ、今朝は、夜の間に巻き込ま3トラックバックを受け取った-には、私のこの記事を書くするように求めている。 The first one was obvious without even clicking that is was a spam trackback from the inappropriate keywords in the link title.つまり、最初の1つでも明らかにされたリンクをクリックせずにタイトルには、不適切なキーワードからのトラックバックスパムだった。 The third was a post I recognized posting a comment on myself yesterday, so I knew that one was good. 3番目の私は昨日、自分の投稿にコメントを投稿する認識ので、良いことを知っていた私は1つだった。 The second one I had to click on to see if it was spam or not. 2つ目は、私の場合は、スパムかどうかがわかりますをクリックしていた。

Once I clicked on it, at first I didn’t think it was my content at at all.かつて私はそれを、私は私のコンテンツでは全く行われていなかったと思うしていない最初にクリックしてください。 You can see in the first paragraph above the first paragraph is about sports.上記の場合は、最初の段落の最初の段落で見ることができるスポーツです。 But the second paragraph (and the rest of the page) was clearly from one of my posts.このページのしかし、第2項（残り）を明確に一から自分の投稿した。 You can see in the earlier trackback example image that after each trackback is a link to the page that was “tracked back to” (stolen).トラックバックは、以前の例を画像で見ることができますが、各トラックバック後に" （ ）を盗ま戻る追跡"されたページへのリンクです。 The content that was stolen on this splog was from myスプログでは、これが盗まれたコンテンツからだった私 How to Earn Money Using Affiliate eBay Wordpress plugin BayRSSどのようにお金を稼ぐアフィリエイトeBayのワードプレスプラグインを使用してBayRSS post.を掲示します。

So - why was the first paragraph not my content?だから-理由は、最初の段落私のコンテンツではなかったか？ Look at it, that first paragraph has a link to auto insurance, and further down in the content (not pictured) are links to home equity loans, and business hosting.これでは、最初の段落自動車保険へのリンクをしており、さらに下のコンテンツを見（ ）住宅担保ローンへのリンクは、写真は、ビジネスをホストしている。 This is what they call an “auto-blog” or “re-blog” what “spins content”.これは、 "自動ブログ"または"再"と"コンテンツスピンのブログ"と呼ぶ。 I will mix your original posts (and links and images) and “spins” it together with some real content it gets from another source (to make it’s page “original content”) and then inserts important links in key points.私はあなたのオリジナルの記事（とリンクや画像）と" "それは別のソースから取得するいくつかの実際のコンテンツと一緒に（ "それはページの"元のコンテンツ）を作るためにミックスして回転する重要なポイントで重要なリンクを挿入します。 The spammer either makes money from link building (as in this example) or from adsense (in the earlier example).建物は、スパマーのいずれかのリンクから（この例として）に、 AdSenseからは、以前の例（ ）の収入を得ている。

The third and last way I check for scrapers stealing my blog content is by using “google alerts”.スクレイパー私のブログのコンテンツを盗むための方法と最後の3番目の私のチェック"を使用してのGoogleアラート"です。 It basically works the same as the google blogsearch earlier, except it can search a bit more AND it sends you automatic emails daily with the results.それ以外の詳細は少し検索したり、それを毎日自動結果を電子メールを送信は、基本的には、 Google blogsearch以前は、同じ動作します。 All you have to do is set a google alert for the name of your domain.やらなければいけないことはしているドメインの名前がGoogleアラート設定されている。 I set one for “www.jtpratt.com”.私は" www.jtpratt.com "を1つ設定してください。 You can set your own atあなたが自分で設定することができます google alerts Googleアラート . 。

The example above is a google alert I got last weekend.上記の例は、私は先週末のGoogleが警告されています。 Look like it’s just an alert of my own post, until you look at the URL below (videositemap).のように私自身のポストのただの警告のまで（ videositemap ）次のURLを見て、見てください。 I know this is spam without even clicking.私はこのマークをクリックすることなくてもということがわかります。

So now we’ve identified spam and some scrapers stealing our content.だから今は、スパムと一部のスクレイパーGoogleのコンテンツを盗む特定している。 What to do about it?それについてどうしたらいいでしょう？ I’m going to show you how to use your .htaccess file.私はあなたの。 htaccessファイルを使用するようにお見せするつもりです。 Read this postこの記事を読んで about .htaccess at Plagiarism Today 。 htaccessを盗用で今日 . 。 It explains what an .htaccess file is, and how to use it to prevent people from not only stealing your content, but also images and files (and your bandwidth) as well.それは。 htaccessファイルとは何か、と説明し、お客様のコンテンツを盗む方法しかないからだけでなく、画像やファイル（および帯域幅）も人々を防ぐために使用します。 If you use Wordpress (or other blogging software), chances are you already have an .htaccess file in the root of your site, because that’s how your blog changes the pages or ?p=382 into pretty permalinks or URL’s like /my-post-about-dogs.場合（または他のブログソフトウェア） 、チャンスは、それがあなたのサイトのルートには、 。 htaccessファイルを使用しているWordpressのあなたのブログの変更方法については、ページまたは？ p = 382かなりパーマリンクまたはURLのように/私のポストについて犬。 All you have to do is add some additional code to that file directing your web server who to let in, and who to throw out!すべての人にそのファイルを入れるため、 Webサーバを、誰を捨てるに演出する、いくつかの追加のコードを追加するだけです！ If scrapers can’t get to your content, they can’t scrape it!スクレイパー場合は、お客様のコンテンツを得ることはできませんが、彼らはそれをこすり取ることはできません！

There are many, many ways to block, redirect, and stop scrapers by putting code in your .htaccess file, but I prefer the method in that article…また、ブロックにリダイレクト非常に多くの点で、スクレイパーを停止してください。 htaccessをファイル内のコードを入れているが、私は、資料の方法を好む...

 order allow,deny deny from xxx.xxx.xxx.xxx allow from all から否定する order allow,deny deny from xxx.xxx.xxx.xxx allow from all 

Now, the x’s aboe need to be turned in to numbers (you can use multiple lines).今、必要としているaboe Xの数値に（お客様）複数行を使用して有効になっている。 The number needs to be the IP address of the server you want to turn away.数背き去るしたい場合は、サーバーのIPアドレスが必要です。 So - we need to find out the IP addresses of the 2 scraper splogs we found earlier.だから-我々は以前の発見は、 2スクレーパースプログのI Pアドレスを確認する必要があります。 There are many ways to do this, I do mine on the command line using “nslookup” - however you can use a web based tool,これには多くの点は、私には、コマンドラインツールは、ウェブベースを使用することができます" NSルックアップ" -を使用して、鉱山は、 like the one from zoneedit.com zoneedit.comから1のように for free.無料。 Just enter the domain you want to lookup.だけを検索するドメインを入力してください。 I found the IP of videositemap.com is 70.87.226.18.私videositemap.com 70.87.226.18のIP発見されています。 Now I need to get the one for fantasyfootballpassport.com, which is 216.139.234.32.今私は216.139.234.32ですfantasyfootballpassport.com用の1つを取得する必要があります。 Now I update my code to add to my .htaccess file with that information like this…今私はこのように情報を私の。 htaccessファイルに追加する私のコードを更新...

 order allow,deny deny from 70.87.226.18 deny from 216.139.234.32 allow from all から否定する order allow,deny deny from 70.87.226.18 deny from 216.139.234.32 allow from all から否定する order allow,deny deny from 70.87.226.18 deny from 216.139.234.32 allow from all 

I added that code to the top of my .htaccess file before anything else, uploaded it back to my web site root, and then visited my blog in both firefox and IE to make sure it loaded properly.私は、何か他の人の前に私の。 htaccessファイルの先頭にコードを、私のWebサイトのルートに、それをアップロードして、適切にロードするにはFirefoxとIEで私のブログを訪問した。 Now, those 2 scrapers won’t be getting to my content again.現在、これらの2スクレイパー私のコンテンツを再度取得することはできません。 While I prefer to block the scrapers I know regularly come to my blog, you can be proactive and use block lists of known spam and scraper sites to prevent plagiarism before it happens.私は私のブログを定期的に来て、スクレイパーをブロックすることを好む場合、積極的なことができ、盗用を防ぐために知られているスパムやスクレーパーサイトのブロックリストを使用する前に発生する。

Some site owners and bloggers prefer to block “user agents” instead of IP address of computers, because IP’s (when found out) can be changed.一部のサイト運営者やブロガー"ユーザエージェント"の代わりにコンピュータのIPアドレス、 IPアドレスのため（ときことを知った）をブロックするように変更することを好むことができます。 This is a little different, because you have to have access to your “raw access log” on your server to search for bad user agents crawling your feed or content.これは悪いユーザーエージェントやコンテンツをクロールするサイトのフィードを検索するには、サーバー上の"生のアクセスログ"にアクセスできるようにする必要があるこれはちょっと違うです。 What is a “user-agent”?内容は、 "ユーザーエージェント"とは何ですか？ Simple, when you visit a site it may say that your “user-agent” is a paticular version of Firefox or Internet Explorer.シンプルなときには、お客様の"ユーザーエージェント" FirefoxやInternet Explorerのバージョンpaticularしている可能性のあるサイトをご覧ください。 Google’s search crawler comes in on the user-agen “googlebot”. Googleの検索クローラでは、ユーザーに来ます-アジャン" Googlebotが" 。 Nefarious scraper robots and indexers have known names, and you can block them by their user-agent name instead of their IP address.ふらちなスクレーパーロボットとインデクサ名を知られており、それらのユーザーエージェント名の代わりにIPアドレスをブロックすることができます。

As I said, I am blocking scrapers using the method I just showed you, but there are many other ways to do it - all from your htaccess file.と私は言った、私が、スクレイパー私はあなたの方法を使用してブロックを示しているがそれを実行する他の多くの方法-すべてのh taccessファイルからです。 I’m going to give you a list of resources you can check out to get more information if you’re interested.もし興味があるなら私はあなた資源のより多くの情報を入手してチェックすることができますリストを表示させるつもりだ。

Fighting Scrapers and Splogs Resource List ファイティングスクレイパーやスプログリソースリスト

How to Block Bots, Ban IP Addresses with .htaccessどのようにブロックボットは、禁止IPアドレスにします。 htaccessを
.htaccess - Blocking IP Addresses, Robots, and Offline Browsers 。 htaccessを-、とオフラインブラウザ、 I Pアドレスは、ロボットのブロッキング
Blocking Bad Bots and Site Rippers (Offline Browsers)ブロッキング悪いロボットやサイトRippers （オフラインブラウザ）
Ultimate .htaccess Blacklist 2究極の。 htaccessをブラックリスト2
Joe Maller .htaccess blacklistジョーMaller 。ブラックリストhtaccessを
How You Can Stop Dirty Feed Scrapers in 3 Easy Stepsどのようにして3つの簡単な手順で汚れたフィードスクレイパー停止することができます
Block Website Content Thieves, Proxy Services & Exploited Servers, with this Apache Server “.htaccess” Blocklistとブロックのウェブサイトのコンテンツ泥棒は、プロキシサービス＆搾取サーバは、 Apacheのサーバ" 。 "ブロックリストhtaccessを

As always, if you have something to add to make this article better, or a question - please comment now!いつものように、もしこの記事を良くしたり、質問-コメントをするに追加してくださいすることがある！

Tags:タグ： htaccess htaccessを , 、 scraperスクレーパー , 、 spamスパム , 、 splogスプログ