Keresőbotok egyszerre jönnek a szerverre…

Kezdőlap Fórumok Vegyes gondok Keresőbotok egyszerre jönnek a szerverre…

9 bejegyzés megtekintése - 31-39 / 39
  • Szerző
    Bejegyzés
  • #2187542
    dotmind
    Felhasználó

      komolyan gondoltam 🙂 lenyegeben probalokozok olyan toolokat (is) ismerni/hasznalni amik nagyon alapok. bar ez most nem all fent, de en szoptam mar internet es install cd nelkul egy masik oraszgban ugy, hogy addig allt a munka amig nem tudok internetet csiholni. ilyenkor leszukul a hasznalhato eszkozok szama. de ez most valoban mindegy.
      amugy egem is erdekelne, hogy hogy all a dolog 🙂

      #2187543
      dotmind
      Felhasználó

        komolyan gondoltam 🙂 lenyegeben probalokozok olyan toolokat (is) ismerni/hasznalni amik nagyon alapok. bar ez most nem all fent, de en szoptam mar internet es install cd nelkul egy masik oraszgban ugy, hogy addig allt a munka amig nem tudok internetet csiholni. ilyenkor leszukul a hasznalhato eszkozok szama. de ez most valoban mindegy.
        amugy egem is erdekelne, hogy hogy all a dolog 🙂

        #2187544
        u-player
        Felhasználó

          Vagyok, csak kicsit el vagyok havazva mostanában.  :-

          A sar-t nem ismertem, rosszra gondoltam, de utánanéztem picit, így már tudom, hogy nem az, aminek elsőre látszott… 🙂 De valahogy úgy érzem, hogy ezzel a sar-ral így most nem tudok mit kezdeni…

          A botok érkezésével egy időben van több ilyen bejegyzés is a syslog-ban:

          May 21 07:29:44 servername named[22205]: FORMERR resolving ‘pacer.regkey.net/AAAA/IN’: 88.208.1.198#53
          May 21 07:29:44 servername named[22205]: FORMERR resolving ‘ghana.bulkns.net/AAAA/IN’: 213.174.152.2#53

          Valójában nem ez a 2 sor, hanem több (csak nem másoltam be az összeset), de ez korábban is volt, és nem lassította be a szervert.

          Ez az egész x naponta van, amikor jönnek a botok (meg a fenti bejegyzés bekerül a syslog-ba), semmi logika nincs benne (számámra), így fogalmam sincs, hogy mikor lesz a következő ilyen…

          A HUP-on már valaki kérdezett hasonlót erről közel 2 éve (http://hup.hu/node/41694), de ahogy nézem, nem kapott rá választ az illető.

          A top-ban ezek a sorok vannak legfelül, amikor CPU alapján van a rendezés:

          > /usr/sbin/apache2 -k start

          …és ezek felzabálják a CPU-t…

          Ezen kívül mást nem találtam a logokban, ami szokatlan vagy eltérő lenne a korábbi működéshez képest.

          #2187545
          u-player
          Felhasználó

            Vagyok, csak kicsit el vagyok havazva mostanában.  :-

            A sar-t nem ismertem, rosszra gondoltam, de utánanéztem picit, így már tudom, hogy nem az, aminek elsőre látszott… 🙂 De valahogy úgy érzem, hogy ezzel a sar-ral így most nem tudok mit kezdeni…

            A botok érkezésével egy időben van több ilyen bejegyzés is a syslog-ban:

            May 21 07:29:44 servername named[22205]: FORMERR resolving ‘pacer.regkey.net/AAAA/IN’: 88.208.1.198#53
            May 21 07:29:44 servername named[22205]: FORMERR resolving ‘ghana.bulkns.net/AAAA/IN’: 213.174.152.2#53

            Valójában nem ez a 2 sor, hanem több (csak nem másoltam be az összeset), de ez korábban is volt, és nem lassította be a szervert.

            Ez az egész x naponta van, amikor jönnek a botok (meg a fenti bejegyzés bekerül a syslog-ba), semmi logika nincs benne (számámra), így fogalmam sincs, hogy mikor lesz a következő ilyen…

            A HUP-on már valaki kérdezett hasonlót erről közel 2 éve (http://hup.hu/node/41694), de ahogy nézem, nem kapott rá választ az illető.

            A top-ban ezek a sorok vannak legfelül, amikor CPU alapján van a rendezés:

            > /usr/sbin/apache2 -k start

            …és ezek felzabálják a CPU-t…

            Ezen kívül mást nem találtam a logokban, ami szokatlan vagy eltérő lenne a korábbi működéshez képest.

            #2187546
            dotmind
            Felhasználó

              CPU felzabalas = 100% -on megy a processzor? Esetleg atmeneti megoldasnak amig ki nem derul a trick, levennem a a MaxClients -et..

              #2187547
              dotmind
              Felhasználó

                CPU felzabalas = 100% -on megy a processzor? Esetleg atmeneti megoldasnak amig ki nem derul a trick, levennem a a MaxClients -et..

                #2187548
                u-player
                Felhasználó

                  Nem számoltam, de ha összeadtam volna a folyamatokat, akkor szerintem jóval több jött volna ki, mint 100%… Csak az apache-ból volt 6-7 és mindegyik 20% felett volt… Lehet ez, vagy ennyire elnéztem volna?

                  A MaxClients módosítására én is gondoltam, de elvetettem, mindenesetre most ideiglenesen megpróbálom azt, ameddig nem leszek okosabb… levettem a felére (75).

                  #2187549
                  u-player
                  Felhasználó

                    Nem számoltam, de ha összeadtam volna a folyamatokat, akkor szerintem jóval több jött volna ki, mint 100%… Csak az apache-ból volt 6-7 és mindegyik 20% felett volt… Lehet ez, vagy ennyire elnéztem volna?

                    A MaxClients módosítására én is gondoltam, de elvetettem, mindenesetre most ideiglenesen megpróbálom azt, ameddig nem leszek okosabb… levettem a felére (75).

                    #1889011
                    csaba
                    Felhasználó

                      Mostanában azt vettem észre, hogy egyszerre érkeznek meg a keresőrobotok a szerverre. Yahoo! slurp, msnbot, googlebot, stb… ezek mind nagyjából egy azonos időben „érkeznek” meg és a szerver terheltsége ilyenkor 10 felett van (mindhárom érték).

                      Van valakinek valami ötlete/tapasztalata, hogy mit lehet ezzel kezdeni? Az apache restart nem biztos, hogy a legjobb választás…

                      (Debian/Apache2/PHP5)

                    9 bejegyzés megtekintése - 31-39 / 39
                    • Be kell jelentkezni a hozzászóláshoz.