nedoPC.org

Community for electronics hobbyists, established in 2002
Atom Feed | View unanswered posts | View active topics It is currently 07 Nov 2024 21:56



Reply to topic  [ 81 posts ]  Go to page Previous  1, 2, 3, 4, 5, 6  Next
Интернет статистика 
Author Message
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
24 марта вот такой вот обанатевам случился :o

Attachment:
Screenshot from 2024-03-27 22-01-55.png
Screenshot from 2024-03-27 22-01-55.png [ 37.82 KiB | Viewed 4614 times ]


P.S. Похоже это реферерры на / с Urlumbrella - вот тут пишут, что это "ghost traffic", который бъёт прямо в статистику гугла даже не заходя на твой сайт:

https://www.reddit.com/r/GoogleAnalytics/comments/18606ht/urlumbrellacom_help_to_stop_this_traffic_showing/

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


27 Mar 2024 22:09
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Shaos wrote:
Shaos wrote:
Jan 2024: 43GB

Feb 2024: 54GB

Mar 2024: 87GB

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


03 Apr 2024 09:29
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Shaos wrote:
Shaos wrote:
Переключился на новую аналитику от гугла, а то старая ещё в июле перестала считать

Неприятный сюрприз новой аналитики - гугл перестал считать и показывать ключевые слова поисковых запросов :(

Зато теперь стало можно смотреть на ключевые слова гугла через Google Search Console:

Attachment:
Screenshot from 2024-04-13 21-44-10.png
Screenshot from 2024-04-13 21-44-10.png [ 50.36 KiB | Viewed 4457 times ]


Attachment:
Screenshot from 2024-04-13 21-44-25.png
Screenshot from 2024-04-13 21-44-25.png [ 61.03 KiB | Viewed 4457 times ]


Attachment:
Screenshot from 2024-04-13 21-44-40.png
Screenshot from 2024-04-13 21-44-40.png [ 51.85 KiB | Viewed 4457 times ]

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


13 Apr 2024 21:55
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Shaos wrote:
Shaos wrote:
Shaos wrote:
Jan 2024: 43GB

Feb 2024: 54GB

Mar 2024: 87GB

Apr 2024: 209GB :o

Чото набег опять какой-то призошёл с 24 по 30 апреля :(
Code:
-rw-r----- 1 root adm  3544120 May  3 06:33 access.log.2.gz
-rw-r----- 1 root adm  3681619 May  2 06:33 access.log.3.gz
-rw-r----- 1 root adm  4086267 May  1 06:34 access.log.4.gz
-rw-r----- 1 root adm 11960198 Apr 30 06:34 access.log.5.gz
-rw-r----- 1 root adm 21684426 Apr 29 06:34 access.log.6.gz
-rw-r----- 1 root adm 21198708 Apr 28 06:34 access.log.7.gz
-rw-r----- 1 root adm 24105851 Apr 27 06:34 access.log.8.gz
-rw-r----- 1 root adm 22513122 Apr 26 06:34 access.log.9.gz
-rw-r----- 1 root adm 14201967 Apr 25 06:34 access.log.10.gz
-rw-r----- 1 root adm 11390758 Apr 24 06:34 access.log.11.gz
-rw-r----- 1 root adm  3339613 Apr 23 06:34 access.log.12.gz
-rw-r----- 1 root adm  4262820 Apr 22 06:33 access.log.13.gz
-rw-r----- 1 root adm  5291494 Apr 21 06:34 access.log.14.gz


P.S. Это был какой-то ClaudeBot от https://www.anthropic.com/, который обычно 10 тысяч раз в день заходит или чуть больше, а в эти дни он занял 2/3 траффика...

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


04 May 2024 00:34
Profile WWW
Maniac

Joined: 01 Jan 2022 04:34
Posts: 200
Location: USSR, Tashkent
Reply with quote
весь твой трафик кушают боты подсчета трафика


04 May 2024 02:51
Profile
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
imsushka wrote:
весь твой трафик кушают боты подсчета трафика

Claude это какой-то AI - см. http://claude.ai

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


04 May 2024 09:46
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Набег Клавдий отразился на первой странице нашего форума :o
Quote:
Больше всего посетителей (855) здесь было 25 апр 2024 12:40

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


09 May 2024 12:17
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Shaos wrote:
Shaos wrote:
Shaos wrote:
Shaos wrote:
Jan 2024: 43GB

Feb 2024: 54GB

Mar 2024: 87GB

Apr 2024: 209GB

May 2024: 101GB

Меньше, чем в апреле, но всё равно в 2 раза больше, чем обычно...

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


03 Jun 2024 20:53
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Добавил распознавание ещё нескольких ботов: Amazon [Bot], ByteDance [Bot], Claude AI [Bot] и GPT [Bot]

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


06 Jun 2024 01:44
Profile WWW
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Shaos wrote:
Shaos wrote:
Shaos wrote:
Shaos wrote:
Shaos wrote:
Jan 2024: 43GB

Feb 2024: 54GB

Mar 2024: 87GB

Apr 2024: 209GB

May 2024: 101GB

Jun 2024: 101GB - опять? :o

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


01 Jul 2024 23:53
Profile WWW
Maniac

Joined: 10 Dec 2008 08:39
Posts: 208
Location: Стокгольм, Швеция
Reply with quote
Я давече анализировал "кто стучится в дверь ко мне". А точнее, кто, зачем и как сканирует интерфейсы "моего" vCloud. Получилось, что 1-2% трафика это полезный трафик, связанный с функционированием системы и работой внешних API. А остальное - боты и роботы различных моделей и назначения.

_________________
С уважением, Сергей.


02 Jul 2024 06:51
Profile
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Щас AI боты достают в основном - причём они игнорируют robots.txt и сканируют всё подряд по многу раз...

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


02 Jul 2024 09:08
Profile WWW
Maniac

Joined: 10 Dec 2008 08:39
Posts: 208
Location: Стокгольм, Швеция
Reply with quote
Дык говнокодинг давно уже норма жизни, а уж в области AI там настоящие авгиевы конюшни. Вот и сканируют как попало и что попало.

_________________
С уважением, Сергей.


02 Jul 2024 10:45
Profile
Admin
User avatar

Joined: 08 Jan 2003 23:22
Posts: 23394
Location: Silicon Valley
Reply with quote
Я помню лет 20-25 назад прочитал прикол, что у одной компании постоянно удалялась база данных пользователей, так вот оказалось, что у них удаление учётной записи происходило при вызове http:/.../delete.php?N (или что-то типа, т.е. с указанием номера учётной записи после ?) и обычный поисковый бот обходя все странички обнаруживал и обходил странички удаления тоже, вызывая их и удаляя всех по номеру - так вот одним из предложенных решений было записать урл удаления в robots.txt :lol:

_________________
https://mastodon.social/@Shaos :dj:
https://www.youtube.com/@Shaos1973


02 Jul 2024 18:49
Profile WWW
Maniac

Joined: 10 Dec 2008 08:39
Posts: 208
Location: Стокгольм, Швеция
Reply with quote
Думаю, что история вполне реальная.
Этой зимой я делал изолированную тестовую среду для одного фрилансера, из нескольких виртуальных машин. Там он занимался REST API, в этой песочнице. Ну и зачем-то он оставил публичный доступ. Это API имело вызовы типа /version, /capabilities, /status и тому подобное, для описания точек входа и состояния.
Так вот, эти поисковые боты перебирают по словарю, пытаясь найти какие-либо валидные вызовы и потом дёргают их с различными методами и случайными параметрами.

_________________
С уважением, Сергей.


03 Jul 2024 01:19
Profile
Display posts from previous:  Sort by  
Reply to topic   [ 81 posts ]  Go to page Previous  1, 2, 3, 4, 5, 6  Next

Who is online

Users browsing this forum: No registered users and 1 guest


You cannot post new topics in this forum
You cannot reply to topics in this forum
You cannot edit your posts in this forum
You cannot delete your posts in this forum
You cannot post attachments in this forum

Search for:
Jump to:  
Powered by phpBB® Forum Software © phpBB Group
Designed by ST Software.