过期域名预定抢注

 找回密碼
 免费注册

有個問題想咨詢下月光,是關於CDN加速,抓取IP的問題?

  [複製鏈接]
發表於 2013-11-11 16:57:22 | 顯示全部樓層 |閱讀模式
就是想問下月光或者論壇上的大牛,我的網站用的是cloudflare.com的CDN加速服務,有免費的有收費的,我發現加速後,網站的解析IP地址就變了(在一個ip段內),那麼,GG抓取網站是抓取CDN解析後的網站IP,還是網站的真實IP。因為這決定到我的站群是否還需要在購買一批IP的問題,特別是現在IPV4短缺之後。因為我通過ip查詢這些,查詢到使用CDN加速的網站IP不再是真實的IP了,而是CDN解析後的IP。3 p6 q& ~5 [/ ~. i
% b" x( Z7 `: ?/ z+ y9 N2 }1 j

+ \0 U1 @* r2 K* y- w' s$ l; s
發表於 2013-11-11 17:04:46 | 顯示全部樓層
嗯 我也有同樣的疑問  期待高手解答: u! m# k) ?# ]
回復 给力 爆菊

使用道具 舉報

發表於 2013-11-11 17:14:46 | 顯示全部樓層
正規cdn,會在http頭裡面包含了你的真實IP。; r$ [$ a4 H/ z4 N' a: h- V0 Z4 a; b
如果非正規的,可能就會把文件緩存到不同的服務器,蜘蛛必然會發現你的IP經常更換。這樣一定是影響收錄的。
4 K+ D6 U% W% ~# W+ r+ X5 X7 d
回復 给力 爆菊

使用道具 舉報

 樓主| 發表於 2013-11-11 17:32:33 | 顯示全部樓層
本帖最後由 zch0071 於 2013-11-11 17:35 編輯 4 a* O7 G. J' B- ?9 i- G- M
非常小黑 發表於 2013-11-11 17:14
7 |+ E$ I  h; B" J7 j: I/ H正規cdn,會在http頭裡面包含了你的真實IP。
- w3 I8 y* e4 S1 Y7 U4 {0 Z如果非正規的,可能就會把文件緩存到不同的服務器,蜘蛛必然會 ...
1 o' ?  ^0 @0 I: x1 H! a/ [4 K" Q0 w
www.cloudflare.com還不正規麼?我一直用他家的。- {: S9 D7 I/ b% m' Q, f/ Z
  t/ U' s& N* O$ w2 |
我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名
  1. HTTP/1.1 200 OK$ A/ N% u  `1 T; W! ~8 s9 o7 W+ |
  2. Server: nginx/1.0.12
    8 ^$ J( o* U5 Q( ~
  3. Date: Mon, 11 Nov 2013 09:33:42 GMT4 ^! b. j+ J. J
  4. Content-Type: text/html; charset=utf-81 X' I1 B! Z9 l8 m' n3 r. Y* p7 O
  5. Connection: keep-alive% O' b, h" Z' R2 I& E% r0 [
  6. Vary: Accept-Encoding7 D% s2 L4 U$ }6 s
  7. X-Powered-By: PHP/5.2.17p1
    + ~5 i/ i0 D% ?( s
  8. Set-Cookie: PHPSESSID=6673d7702994353f83893901472b2691; path=/
    : U, w) q* ]# o
  9. Expires: Thu, 19 Nov 1981 08:52:00 GMT4 t, C/ `0 z4 k) u" p
  10. Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
    2 X, J6 D* k' V; e1 O
  11. Pragma: no-cache
複製代碼
  1. HTTP/1.1 200 OK
    9 a3 \5 H6 ?$ w0 [8 g) u
  2. Server: cloudflare-nginx
    8 [. X# s$ K6 u% U) C7 t; d
  3. Date: Mon, 11 Nov 2013 09:27:27 GMT
    ( h* i& a; w7 w) m. b+ H9 \
  4. Content-Type: text/html; charset=utf-8! J% G2 P6 _- }
  5. Connection: keep-alive  N: u3 Q7 S. D# y2 z, V( u4 x6 K
  6. Set-Cookie: __cfduid=xxxxxxxx
      Z! z+ V4 A8 T
  7. X-Powered-By: PHP/5.3.21/ J, b2 [! n2 X* y) B
  8. Expires: Thu, 19 Nov 1981 08:52:00 GMT8 X% i1 _* ^4 N& X" e6 D
  9. Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0" `2 d' C4 R8 s  I$ H$ S5 S5 s
  10. Pragma: no-cache
    % F  U. f) ?; Z
  11. Set-Cookie: PHPSESSID=42e69d14b795c773ce4cd913c7e6b9b0; path=/Vary: Accept-Encoding,User-Agent
    # g  Q1 C, H+ I: w5 T
  12. CF-RAY: cb9f25dedfa0077
複製代碼
沒看到返還原來的IP 而且我自己的vps是隱藏了apache的服務器名和版本號 php的也隱藏了。請問還有什麼問題? 另外我看了下CF-RAY 這個是不一樣的。這是什麼參數?
3 }, F, a3 k1 F4 K. m2 Z7 z7 z) O6 A) f1 ?* J
4 l5 R& Q1 H/ r6 t: {5 }  z
. h' O4 y; B; H7 \
& y7 j$ t$ w. O, I- a$ M3 o

3 x; @" X' H5 e! a$ v
回復 给力 爆菊

使用道具 舉報

發表於 2013-11-11 17:35:43 | 顯示全部樓層
cloudflare是這樣的,而且php程序裡面的網站ip也變成了它的
) m* [$ @5 ]/ K, j9 |2 P9 p8 ~你可以使用cloudflare,但可以取消cdn加速,把按鈕滅掉就可以  F7 C, z+ j& w# ^8 x" z( l
6 |& l! h3 Z, l  }
回復 给力 爆菊

使用道具 舉報

 樓主| 發表於 2013-11-11 17:45:49 | 顯示全部樓層
月光飛燕 發表於 2013-11-11 17:35
4 s( C4 M; X8 Q; u- l8 J2 n8 ]cloudflare是這樣的,而且php程序裡面的網站ip也變成了它的8 |; f6 D: h* B* v
你可以使用cloudflare,但可以取消cdn加速,把 ...
0 q( x8 P0 _' V& N) a0 b
其實,我的想法就是買個好點的vps,然後放一票站群,統統使用cloudflare的CDN加速,因為CDN之後ip就變成cloudflare的IP了,那麼這樣的站群在ip上的關聯就應該不存在了吧# v% G; ?6 S7 z! b; X
& u9 b' O$ C4 Z8 H$ ?' L# ~# y

點評

这个我不清楚,没有用这个做过站群  發表於 2013-11-11 18:19
回復 给力 爆菊

使用道具 舉報

發表於 2013-11-11 17:50:57 | 顯示全部樓層
zch0071 發表於 2013-11-11 17:32 9 m1 R6 R. N1 r$ B
www.cloudflare.com還不正規麼?我一直用他家的。) C; C+ W7 L, ^4 a6 t9 Z& E- _- \

; e, J: x: J; P$ c6 \我通過curl -I 網址 查看http頭 因為一個ip下反查了好 ...

$ m7 \4 H$ u. T. e* d我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名
- H& ^- k( {( v3 G7 e: G( ?1 [
1 o/ V- e, _; ?% n' @& W! p這個是怎麼查看的額?
4 p5 I( N; t, n+ {
5 \4 l7 x% a2 y8 W. h, {還有如下的疑問8 }0 |: _- E2 J) k
  • Expires: Thu, 19 Nov 1981 08:52:00 GMT    這個過期時間怎麼是1981年額
  • Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
  • Pragma: no-cache
    6 U4 r* t0 J3 ]; C- {9 q7 }; n
cache是關閉的,不是一般把cache 打開可以加快速度,又可以節省流量嗎?2 A, h3 B8 l- Z* o. q5 }1 O' j  {, i
' o, f$ l) O4 X
1 K0 m$ v  }6 }6 ?
回復 给力 爆菊

使用道具 舉報

 樓主| 發表於 2013-11-11 17:55:17 | 顯示全部樓層
本帖最後由 zch0071 於 2013-11-11 17:58 編輯 - v8 t) I' T4 l: @8 d  ?
熟能生巧哇 發表於 2013-11-11 17:50 7 t8 B& M* N- O8 ?
我通過curl -I 網址 查看http頭 因為一個ip下反查了好幾個域名
( a% d/ B+ @$ T$ `9 l! U$ a' }) G4 r+ O6 A2 U% H
這個是怎麼查看的額?

  V. ~6 G, R- l+ J4 {3 Tip反查域名 網上一搜一大堆2 f& \1 d% l  [$ U2 a5 Z) S
查詢http頭信息; `0 F, x* R9 p$ l
curl -I http://www.xxx.com
1 T6 F1 X, o1 ~, v  O. w. n! Fcurl是在linux下的命令6 _3 e1 _" L1 z% X- `+ |
至於cache後台設置) x5 l) k, B2 n4 R
; w5 r; v9 q+ H3 O
& O  l9 f, R% [8 m. U
回復 给力 爆菊

使用道具 舉報

發表於 2013-11-11 17:57:06 | 顯示全部樓層
樓主這個想法我覺得可以試下7 ^- p6 S7 E% R2 o; [5 ~; K; w% o
回復 给力 爆菊

使用道具 舉報

 樓主| 發表於 2013-11-11 18:00:53 | 顯示全部樓層
will86 發表於 2013-11-11 17:57 - j8 v2 L; W. N% s- S% Q
樓主這個想法我覺得可以試下
" K% Y4 D1 L7 ~5 t  O
就是覺得配置小內存的台慢了,直接上台服務器,然後配置幾十個blog,然後CDN加速解析好,就把真實ip隱藏掉了。。gg抓取不知道是不是CND的信息和IP(這點我不知道怎麼確定,畢竟GG的技術我等只能膜拜)
# \$ }! P- u- ?% x所以。。。考慮中。6 N6 y* U( O7 y0 Y* S
回復 给力 爆菊

使用道具 舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

过期高净值品牌域名预定抢注

4um點基跨境網編創業社區

GMT+8, 2024-11-25 12:45

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表