有個問題想咨詢下月光，是關於CDN加速，抓取IP的問題？

就是想問下月光或者論壇上的大牛，我的網站用的是cloudflare.com的CDN加速服務，有免費的有收費的，我發現加速後，網站的解析IP地址就變了(在一個ip段內)，那麼，GG抓取網站是抓取CDN解析後的網站IP，還是網站的真實IP。因為這決定到我的站群是否還需要在購買一批IP的問題，特別是現在IPV4短缺之後。因為我通過ip查詢這些，查詢到使用CDN加速的網站IP不再是真實的IP了，而是CDN解析後的IP。
' s$ |8 |6 `) `3 e# c! ]' t8 K) K
! d- o  Y+ ?( k) u! G$ L
; D, C) O* o- i) E- ~

嗯 我也有同樣的疑問  期待高手解答

正規cdn，會在http頭裡面包含了你的真實IP。
如果非正規的，可能就會把文件緩存到不同的服務器，蜘蛛必然會發現你的IP經常更換。這樣一定是影響收錄的。

# G1 n- j  U4 U4 A" [  q6 X3 R

非常小黑 發表於 2013-11-11 17:14
正規cdn，會在http頭裡面包含了你的真實IP。
: w8 F# ~7 p$ k$ L2 ^0 }* t& @如果非正規的，可能就會把文件緩存到不同的服務器，蜘蛛必然會 ...

www.cloudflare.com還不正規麼？我一直用他家的。

* m8 `. O" E: E我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名

1. HTTP/1.1 200 OK
   ' N  i  K* D# z; k8 W% }
2. Server: nginx/1.0.12
   8 |, z, `8 x2 o4 I% I6 Y- U
3. Date: Mon, 11 Nov 2013 09:33:42 GMT
   - S, y  S& {" A
4. Content-Type: text/html; charset=utf-8
   
5. Connection: keep-alive
   
6. Vary: Accept-Encoding
   
7. X-Powered-By: PHP/5.2.17p1
   + Z4 }$ x5 G% G' R  F
8. Set-Cookie: PHPSESSID=6673d7702994353f83893901472b2691; path=/
   
9. Expires: Thu, 19 Nov 1981 08:52:00 GMT
   2 w0 t5 {4 `- G( v
10. Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
    0 ^) V+ a3 C& H8 s) a( K# Q) W, O. b
11. Pragma: no-cache

複製代碼

1. HTTP/1.1 200 OK
   
2. Server: cloudflare-nginx
   
3. Date: Mon, 11 Nov 2013 09:27:27 GMT
   
4. Content-Type: text/html; charset=utf-8
   
5. Connection: keep-alive
   . h) [0 x* k! ?
6. Set-Cookie: __cfduid=xxxxxxxx
   
7. X-Powered-By: PHP/5.3.21
   / t+ E8 J" H* K' Q+ j$ \* n
8. Expires: Thu, 19 Nov 1981 08:52:00 GMT
   : }$ R# _% P1 X/ W: ~
9. Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
   " n: b6 @1 Y0 M5 ~4 R& y
10. Pragma: no-cache
      l. w4 [  l6 C/ U
11. Set-Cookie: PHPSESSID=42e69d14b795c773ce4cd913c7e6b9b0; path=/Vary: Accept-Encoding,User-Agent
    
12. CF-RAY: cb9f25dedfa0077

複製代碼

沒看到返還原來的IP 而且我自己的vps是隱藏了apache的服務器名和版本號 php的也隱藏了。請問還有什麼問題？ 另外我看了下CF-RAY 這個是不一樣的。這是什麼參數？



9 }2 Y+ l! B. S( s* ?

cloudflare是這樣的，而且php程序裡面的網站ip也變成了它的
- V6 j- _- Z' w3 j, f+ |6 z你可以使用cloudflare，但可以取消cdn加速，把按鈕滅掉就可以
# ?/ L1 Q$ i' o! D; h* q
# f/ x  w' Z* V4 q

月光飛燕 發表於 2013-11-11 17:35
cloudflare是這樣的，而且php程序裡面的網站ip也變成了它的
你可以使用cloudflare，但可以取消cdn加速，把 ...

其實，我的想法就是買個好點的vps，然後放一票站群，統統使用cloudflare的CDN加速，因為CDN之後ip就變成cloudflare的IP了，那麼這樣的站群在ip上的關聯就應該不存在了吧

  d. t9 t( |- i5 r: H% d

zch0071 發表於 2013-11-11 17:32
www.cloudflare.com還不正規麼？我一直用他家的。
: q1 {. `4 C6 k6 E
我通過curl -I 網址 查看http頭 因為一個ip下反查了好 ...

- U0 U+ `( r, o5 N8 p+ D我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名
7 W: X& m3 L  t3 x
這個是怎麼查看的額？

還有如下的疑問

• Expires: Thu, 19 Nov 1981 08:52:00 GMT    這個過期時間怎麼是1981年額
• Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
• Pragma: no-cache
  

cache是關閉的，不是一般把cache 打開可以加快速度，又可以節省流量嗎？
0 [3 F+ E7 {$ x) `* P% o

" \8 m$ [& J" i; e" x

熟能生巧哇 發表於 2013-11-11 17:50
# l# Y% O) c3 C" k; l我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名
. s* o4 O/ c7 f. [( p9 z4 E
這個是怎麼查看的額？

ip反查域名 網上一搜一大堆
查詢http頭信息
curl -I http://www.xxx.com
: q8 |3 G. t* n& Q: u9 X7 ]curl是在linux下的命令
至於cache後台設置
3 G. |) \0 g+ H7 n' n
/ h; g, y3 w' G  C' @
/ l( E4 j6 ]8 L3 {" g

樓主這個想法我覺得可以試下

will86 發表於 2013-11-11 17:57
樓主這個想法我覺得可以試下

就是覺得配置小內存的台慢了，直接上台服務器，然後配置幾十個blog，然後CDN加速解析好，就把真實ip隱藏掉了。。gg抓取不知道是不是CND的信息和IP(這點我不知道怎麼確定，畢竟GG的技術我等只能膜拜)
4 I' ]* q3 q/ ~) `+ F所以。。。考慮中。