RewriteEngine On!!あぁ素晴らしき悪魔的ツールを終わらせる為にやってきた
こんにちは!kumasukeです!ブログ3記事目です。【ワテ風 ステイサム風です。】
※注意 どうやらキーワードツールは今のとこbot弾いても見れるみたいなので、
少し内容に誤りがありますね!また修正しときます。
でも一応被リンク分析は弾けるようなので、オススメしときます。
こんな人にこの記事オススメやで!
- 有料SEOツールを弾きたい【リンク分析 キーワード機能】
- 基本シリウスかWPでサイト作成 あんまりhtmlとか.htaccessの記述がわかってない
- でも自分は使い倒したいんや!
- こつこつやってきたのに舐めとんか!【そういう時代に突入ってことですわ】
1ワテが書く理由
ワテ思うんです。。。ワテそれはやったらアカンと思うんです!
コレです。。。。
あら。mozとhrefsにキーワード機能がついたのか・・・。外注ローラー作戦が加速しそう・・・
— すなふきん@樹海 (@yyz_prg) May 4, 2016
Mozのキーワード分析ツール「Keyword Explorer」 | Core Marketing Blog https://t.co/JOmh9uArbN
ahrefsで他人のサイトのクエリ拾えるの反則すぎるな( ˘ω˘ )
— やまG (@yamagrp) April 29, 2016
速攻 ahrefs行ったらありましたわ!!
Ahrefsってリンク系ツールとして最強かな。「自然検索キーワード 」はターゲティングしていないクエリーのRankまで出ているので便利だね。
— ツナブロ tunablo (@tsunagarublog) April 29, 2016
Ahrefs・・やっぱりあなたは素晴らしい。。。
— HAGI (@haginohagi) April 18, 2016
検索キーワード、順位も出るのか・・・
全然使いこなしたなかったよ・・
ワテ 全然使いこなせてなかった!!
ahrefsのあれやばいすよねw
— 王連 (@seo_ou) April 29, 2016
やばいゆうか、個別URLまで掲載されとるしGRCのランクインページやないか。。。 あれは運営者しか見られへん重要な情報なんやで。。。
だからワテ書こうと思ったんです!こちらの努力を一瞬で表示させるツールなんぞクソくらえですわ!
※ツイートを掲載させて頂いていますが、ご連絡頂ければできる限り早急にツイート削除致しますので、よろしくお願いしますm(__)m
ワテら、例えばダイエットジャンルでロングテールキーワードでコンバージョンしそうな記事を修正しては、頑張って決まりそうな案件探してきたり、LP風にしてみたり色々とコツコツアクセス解析からGRC登録してランクインページ分析で、まあトップは上がってないけど個別が稼いでるサイトいっぱいあるんですわ。。。これには嫁も激オコやったで!嫁はアタイこれは許されへん!ゆーてたわ!
でもあそことあそこはんのツール その作業一瞬で吐き出しますやろ?ほんでご丁寧にCSVに落とし込み機能までついてはるわ。。ほんでなんですのん、フルエキスポートって!一括で全部ですやんか!あきまへん!
こらアカン。ワテそれだけは許せまへんで!っで精度ってもんを検証しましたんや自サイトで、ワテ。
ほんならこんな意見もあったんやけどな、
ahlefsの検索キーワード機能、試してみたけど全然使えない気がする。 検索キーワードバラバラ。
— MKG (@mkg0731) May 5, 2016
改めて調べてみたけど、やっぱり【出会い系】って単語は全然拾ってないね。
— ぶらっく (@deai_affiliate) April 29, 2016
何かしらこういうツールは出会い系(アダルト)に弱いから自分的には意味ない。
自分のサイトで見ると全然違ったからあまり信じてない…(›´ω`‹ )
— ぶらっく (@deai_affiliate) April 29, 2016
ワテのサイトは確かに拾ってきてないのもあるのはあるんやけど、拾ってきてほしないのもかなりの精度で拾ってきとるんですわ。ワテ オコですわ!
いくら谷の凄い人があんまり良い精度やない!ゆーてもワテはこんなツール許せまへんで。
自分の健食サイトのクエリはそこまで、乖離なく拾ってきてた!ahrefsマジこえー
— kumasuke@時々おはツイート (@gururururu12) April 29, 2016
という事でワテはbotを弾くことに決めましたんや!ほんでシェアしてもう一回泥臭い戦いに戻したろーいうのが本音やねん。。でも時代は進むから意味ないんは分かってるんやけど自サイトだけでも守ろーやって提案ですんや。ワテみたいなもんは置いてかれんよーにせなあかんでな
※Ahrefsは日本語ドメインはまだ見られへんようやから今のうちやで
mozの精度は分からへんから良かったらぜひ教えてや
2 .htaccessで弾いたろやないか!
とにかくWPとシリウスのやり方を書いていくで!仕組みはわからんけどコレを書いてたえーんやちゅう感じでいくわ ワテもわかってへんねや ただロボッツテキストやとちょい行儀悪い時あるみたいやからこっちがオススメやで
SEOmozのQ&A行ったらボット名と親切にライバルのも記述されとったで
SEOmozのボットはrogerbotやと思うんや!間違ってたら谷のあんちゃんら指摘くれはるから修正しとくな!勘弁やで!
ちなみにbot一覧やで
rogerbot⇒SEOmoz
AhrefsBot⇒Ahrefs
MJ12bot⇒マジェスティック イギリス
DotBot⇒分からへんわ
Ezoom⇒分からへんわ
Baiduspider⇒Baiduは中国の大手検索エンジン
SiteExplorer⇒サイトエクスプローラー
exabot⇒日本以外のどこか
Teoma⇒http://www.teoma.com/ askなど
bingbot⇒bingも被リンクツールあるから注意やで結構精度良いみたいやで
まあ弾かんでもええやろ 参考に
msnbot⇒MSN(Bing)
もっともっとbotやユーザーエージェント??知りたい方はここが結構載ってたで
参考https://udger.com/resources/ua-list/crawlers
WP編
ワードプレスやったらFTPソフトで.htaccessいくやろ!
ほんだら編集でテキスト開いて
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} AhrefsBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} rogerbot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Ezooms [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Baiduspider [NC,OR]
RewriteCond %{HTTP_USER_AGENT} MJ12bot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} SiteExplorer [NC,OR]
RewriteCond %{HTTP_USER_AGENT} gigabot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} exabot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Teoma [NC]
RewriteRule !^robots.txt$ – [G]
</IfModule>
# END WordPress
</IfModule>の上に貼り付けやで!RewriteEngine Onは2個カブってもOKやそうや!Offの記述は注意やで!ほんで最後のんだけ[NC,OR]じゃなく、[NC]で終わるんやで!
シリウスの場合や
これは知ってるやろ??ここに下記載を貼り付けでアップでOKなんや!
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} AhrefsBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} rogerbot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Ezooms [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Baiduspider [NC,OR]
RewriteCond %{HTTP_USER_AGENT} MJ12bot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} SiteExplorer [NC,OR]
RewriteCond %{HTTP_USER_AGENT} gigabot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} exabot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} Teoma [NC]
RewriteRule !^robots.txt$ – [G]
簡単やろ!ワテ結構調べたで!
3 とにかくこれでホンマに弾けてんかいな確認やで!
Googleデベロッパーツールあるやろ?便利で有名なやつや!
ここで確認するみたいやで!
まずは弾いたサイトをクロームで右クリックやで!そこから検証を開いてや!!
とりあえず上のスマホマークをクリックするんやで!これは有名やな!どの機種でどう見られてるかチェックする奴やで
ほんでからahrefsbotってワテのパソコンでは表示されてるが、みんなのパソコンよっては違う部分!そこのドロップダウンを表示してeditをクリックや!
ほんなら上記の画面でてくるから分かりやすいように名前と弾いたbotを登録してや!
ほんでから自サイトで例えばAhrefsを選択した状態でF5押してや!
ほんなら
一件アウトっぽい感じやけどな、OKやねん!
上のGONEがでてきたら弾けてるみたいやで!
ついでにGooglebotは弾いたらアカンから登録してF5押してみてや
ほんならサイトがでてきたら弾いてない証拠やからな!
4 ロボッツテキスト【robots.txt】で弾くならやで
以下は記述参考例!
User-agent: DotBot
Disallow: /
User-agent: Ezooms
Disallow: /
User-agent: rogerbot
Disallow: /
User-agent: Baiduspider
Disallow: /
User-agent: MJ12bot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: SiteExplorer
Disallow: /
User-agent: gigabot
Disallow: /
User-agent: exabot
Disallow: /
User-agent: Teoma
Disallow: /
5 いっその事海外IPを弾く方法もあるみたいやで
日本でしか運営しないのなら、こういうサイトがあるみたいやからGoogleさんだけ残してロシア 中国とかそういうのだけ弾くんもハッキング対策とかはありみたいや!
6 終わりにアレコレ聞いといたで
とりあえずワテ ハッキング以降プログラマーさんにお世話になっていきたい思てたから繋がりはじめたんやけど 記述にも色々あるみたいやからこのブログは参考程度やで 無料やしな。
間違ってたり、変な画像あったら教えて下さい!やでほんま
Q&A
1 bot名って変わるの?
あんまり変わる事はすくないですね!
2 似たようなツールは作れる?
作れますが結構金かかると思いますよ!まあ普通に参入するのは難しいんじゃないでしょうか。
3 どんぐらいで見れなくなる?
今までのデータは残ってるのでこれからは見れないと思いますよ!
ほんまにこれで見れへんようなるかな?まだ分からんけどワテは自サイトはブロックして使い倒す気まんまんやから、ロングテールで記事濃そうなサイトはCSVに落としまくってんねん!
公開してるローマ字ドメインの人とか注意必要やな!
怖いで!
あと芋づるこわーてサテライトにアクセス解析入れられへん人も、入れてみたら結構ワード取れてるかもしらんで!
ほんならCVワードでてくるかもしらへんし、踏まれるリンクも誘導しやすいかも知らへんで!
7 これだけは言いたいわ!
ワテ書いてきて気づいたんやけど、ステイサム書いた人リスペクトやわ!
このスタイルしんどいわ。。。。
訂正 編集意見待ってまっせ!