Projekat

Općenito

Profil

Akcije

Podrška #25778

Zatvoren

google nas indexira, redmine bots filter plugin

Dodano od Jasmin Beganović prije više od 13 godina. Izmjenjeno prije više od 13 godina.

Status:
Zatvoreno
Prioritet:
Normalan
Odgovorna osoba:
Početak:
21.12.2011
Završetak:
% završeno:

100%

Procjena vremena:

Opis

(12/21/2011 10:10:02 AM) bjasko: hernad jel šta skidaš 
(12/21/2011 10:10:08 AM) bjasko: konekcija je grozota 
(12/21/2011 10:26:01 AM) hernad: ne
(12/21/2011 10:26:35 AM) hernad: ali i meni nešto konekcija nije bajna na download strani
(12/21/2011 10:26:39 AM) hernad: da nas ko nije zagušio
(12/21/2011 10:38:58 AM) bjasko: hm pogledaću

Povezani tiketi 1 (0 otvoreno1 zatvoren)

korelira sa system toolbox - Podrška #24780: redmine ubloko - opet, rusi i google napadaju ZatvorenoJasmin Beganović12.10.2011

Akcije
Akcije #1

Izmjenjeno od Jasmin Beganović prije više od 13 godina

rocessing IssuesController#index (for 66.249.72.18 at 2011-12-21 11:27:36) [GET]
  Parameters: {"action"=>"index", "page"=>"1", "query_id"=>"27", "controller"=>"issues", "sort"=>"priority,project:desc,updated_on"}
Rendering template within layouts/base
Rendering issues/index.rhtml
Completed in 341ms (View: 291, DB: 30) | 200 OK [http://redmine.bring.out.ba/issues?page=1&query_id=27&sort=priority%2Cproject%3Adesc%2Cupdated_on]

Processing IssuesController#index (for 66.249.72.18 at 2011-12-21 11:27:52) [GET]
  Parameters: {"action"=>"index", "page"=>"13", "query_id"=>"27", "controller"=>"issues", "sort"=>"updated_on,assigned_to:desc,status:desc"}
Rendering template within layouts/base
Rendering issues/index.rhtml
Completed in 347ms (View: 294, DB: 32) | 200 OK [http://redmine.bring.out.ba/issues?page=13&query_id=27&sort=updated_on%2Cassigned_to%3Adesc%2Cstatus%3Adesc]

Akcije #2

Izmjenjeno od Jasmin Beganović prije više od 13 godina

usput nam pocuga upload stranu

Akcije #4

Izmjenjeno od Jasmin Beganović prije više od 13 godina

Features


Block bots from accessing pages in Redmine:

Repositories

Gantt charts

Calendars

Activities

Export formats (e.g. PDF, CSV, ATOM, txt)

Akcije #5

Izmjenjeno od Jasmin Beganović prije više od 13 godina

idem postaviit pluging da vidim dali će biti ok

Akcije #6

Izmjenjeno od Jasmin Beganović prije više od 13 godina

  • Naslov promijenjeno iz google nas indexira u google nas indexira, redmine bots filter plugin
Akcije #7

Izmjenjeno od Jasmin Beganović prije više od 13 godina

root@redmine-1:/home/redmine/redmine/vendor/plugins# git clone git://github.com/edavis10/redmine_bots_filter.git

Initialized empty Git repository in /home/redmine/redmine/vendor/plugins/redmine_bots_filter/.git/
remote: Counting objects: 86, done.
remote: Compressing objects: 100% (63/63), done.
remote: Total 86 (delta 27), reused 0 (delta 0)
Receiving objects: 100% (86/86), 18.39 KiB, done.
Resolving deltas: 100% (27/27), done.

Akcije #8

Izmjenjeno od Jasmin Beganović prije više od 13 godina

root@redmine-1:/home/redmine/redmine# touch tmp/restart.txt

Akcije #9

Izmjenjeno od Ernad Husremović prije više od 13 godina

da li je moguće google-ovom rangeu adresa dati neki ograničeni limit ?

naime, zabrana indeksiranja naših ticketa i wikija nije ono što želim. naš je cilj da naš redmine bude što više prisutan na google search-u.

Akcije #10

Izmjenjeno od Ernad Husremović prije više od 13 godina

ove ostale stvari zabrani gantove i eksterne sadržaje (pdf itd) ali tickete i wikije nemoj

Akcije #11

Izmjenjeno od Jasmin Beganović prije više od 13 godina

ok dok vidim kako stvar fercera

Akcije #12

Izmjenjeno od Jasmin Beganović prije više od 13 godina

Ernad Husremović je napisao/la:

da li je moguće google-ovom rangeu adresa dati neki ograničeni limit ?

naime, zabrana indeksiranja naših ticketa i wikija nije ono što želim. naš je cilj da naš redmine bude što više prisutan na google search-u.

koliko sam upratio u logovima google ne napada siumltano, query ide jedan po jedan ali sam search traje i poznato opterećuje redmine

Akcije #13

Izmjenjeno od Jasmin Beganović prije više od 13 godina

evo ga

http://redmine.bring.out.ba/settings/plugin/redmine_bots_filter

po defaultu su podešeni

googlebot
yahoo! slurp
msnbot
baiduspider
yandex
spider
robot
Akcije #14

Izmjenjeno od Jasmin Beganović prije više od 13 godina

vidim prvu blokadu, google pokušava query na sve aktivnosti

Processing IssuesController#index (for 66.249.72.18 at 2011-12-21 11:49:55) [GET]
  Parameters: {"action"=>"index", "page"=>"12", "query_id"=>"27", "controller"=>"issues", "sort"=>"status,subject,id:desc"}
Filter chain halted as [:bots_filter] rendered_or_redirected.
Completed in 1ms (View: 0, DB: 0) | 403 Forbidden [http://redmine.bring.out.ba/issues?page=12&query_id=27&sort=status%2Csubject%2Cid%3Adesc]

Akcije #15

Izmjenjeno od Jasmin Beganović prije više od 13 godina

dok npr wiki prolazi

Processing WikiController#index (for 31.176.147.188 at 2011-12-21 12:09:02) [GET]
  Parameters: {"action"=>"index", "id"=>"f18", "page"=>"F18_windows_install", "controller"=>"wiki"}
Rendering template within layouts/base
Rendering wiki/show
Completed in 44ms (View: 34, DB: 1) | 200 OK [http://redmine.bring.out.ba/projects/f18/wiki/F18_windows_install]
Akcije #16

Izmjenjeno od Jasmin Beganović prije više od 13 godina

issues je također OK

Processing IssuesController#index (for 66.249.72.18 at 2011-12-21 12:10:20) [GET]
  Parameters: {"action"=>"index", "page"=>"12", "query_id"=>"", "controller"=>"issues", "sort"=>"status,project,subject:desc"}
Rendering template within layouts/base
Rendering issues/index.rhtml
Completed in 364ms (View: 84, DB: 46) | 200 OK [http://redmine.bring.out.ba/issues?page=12&query_id=&sort=status%2Cproject%2Csubject%3Adesc]

Akcije #17

Izmjenjeno od Jasmin Beganović prije više od 13 godina

najviše napada ide na query otvorene aktivnosti (svi projekti) ovdje ima preko 500 tiketa i 30-ak stranica i onda on ide redom, treba li nam ovaj query na ovim public projektima ?

Custom queries

Aktivnosti B2DSU (Bilo bi dobro da se urade)
otvorene aktivnosti (svi projekti)

Akcije #18

Izmjenjeno od Jasmin Beganović prije više od 13 godina

https://github.com/edavis10/redmine_bots_filter/blob/master/lib/bots_filter.rb

  def bots_filter
    if bot_request?
      if !params[:format].blank? ||
           (controller_name == 'repositories') ||
           (controller_name == 'attachments') ||
           (controller_name == 'issues' && !params[:query_id].blank?) ||
           (controller_name == 'gantts') ||
           (controller_name == 'calendars') ||
           (controller_name == 'activities') ||
           (controller_name == 'wiki' && (action_name == 'history' || !params[:version].blank?))

ovdje možemo blokirati aktivirati po želji npr issues skloniti query_id ostaviti

Akcije #19

Izmjenjeno od Jasmin Beganović prije više od 13 godina

koliko sa mogao zakjljučiti iz loga i iz samog plugina

"query_id"=>"27", "controller"=>"issues"

će biti blokiran

"query_id"=>"", "controller"=>"issues"

ne

Akcije #20

Izmjenjeno od Ernad Husremović prije više od 13 godina

ako možeš taj query koji uzima vremena blokirati za robota to je najbolje.

mislim da admin može generalno setovati osobine custom query-ja tako što će biti dostupan samo registrovanim korisnicima

Akcije #21

Izmjenjeno od Ernad Husremović prije više od 13 godina

garant može

Akcije #22

Izmjenjeno od Jasmin Beganović prije više od 13 godina

ma ja, glavno je da se sa ovim pluginom sada može raditi

Akcije #23

Izmjenjeno od Ernad Husremović prije više od 13 godina

sada je bolje stanje sa vaše strane ?

Akcije #24

Izmjenjeno od Jasmin Beganović prije više od 13 godina

testirao, podesio firefox da glumi gogle bota http://neko.tsugumi.org/UAControl.html
pristupi stranici, query mi je nedostupan, pristup samim aktivnostima je OK

to je ono što nam treba

Akcije #25

Izmjenjeno od Jasmin Beganović prije više od 13 godina

meni sada redmine leti

Akcije #26

Izmjenjeno od Ernad Husremović prije više od 13 godina

Jasmin Beganović je napisao/la:

testirao, podesio firefox da glumi gogle bota http://neko.tsugumi.org/UAControl.html
pristupi stranici, query mi je nedostupan, pristup samim aktivnostima je OK

to je ono što nam treba

pametno

Akcije #27

Izmjenjeno od Ernad Husremović prije više od 13 godina

  • Projekat promijenjeno iz 5 u system toolbox
Akcije #28

Izmjenjeno od Jasmin Beganović prije više od 13 godina

bandwidth je sad ok, razgovarao sa saletom VPN-om ...OK

Akcije #29

Izmjenjeno od Jasmin Beganović prije više od 13 godina

  • Status promijenjeno iz Novo u Zatvoreno
  • % završeno promijenjeno iz 0 u 100

to bi trebalo biti to

Akcije

Također dostupno kao Atom PDF