Год назад я написал программу своей первой статистики, цель была - собрать информациую откуда и сколько люедй приходят ко мне на сайты. По началу всё было просто отлично, но теперь всё это весит 60 Мб и загружается десять секунд. Нужно оптимизировать, я, попытался это сделать, но в силу своих знаний у меня это не очень получилось.

В таблице есть пять полей (IP(VARCHAR(15), SITE(VARCHAR(300), TIME(DATETIME), COMP(VARCHAR(200), WHERE(VARCHAR(100)). Есть ли какие-нибудь способы, приёмы, как это дело оптимизировать?

Как один из вариантов: Перелить данные за прошлые  квартал/год/месяц в "бекапную" таблицу ...

bobik02, Хорошая идея, только как сделать бекапную таблицу, и в чем её отличия от обычной?

PS: Но ведь популярность проектов растет и новой таблицы хватит только на полгода

А  какие запросы  у Вас там  выполняются ?

скрипт в студию для начала (может что подправить можно)

В скрптах примитивизм полный.

Ну добавления это понятно, а вот с выводом(отчётами) как  код ?

Пару дней назад писал.
У меня тоже ограничения по размеру бд. Так придумал для себя, может конечно сильно грамозко, но разбил на 3 базы:

1:
CREATE TABLE IF NOT EXISTS `stat_osn` (
              `site` varchar(80) NOT NULL,
              `kols` int(15) NOT NULL
            ) ENGINE=MyISAM DEFAULT CHARSET=cp1251 COMMENT='Статистика посещений - основная'

2:
CREATE TABLE IF NOT EXISTS `stat_ip` (
              `ip` varchar(50) NOT NULL
            ) ENGINE=MyISAM DEFAULT CHARSET=cp1251 COMMENT='Статистика посещений - уникальные ip'

3:
CREATE TABLE IF NOT EXISTS `stat_mon` (
              `site` varchar(80) NOT NULL,
              `ip` varchar(60),
              `date_in` datetime default '0000-00-00 00:00:00'
            ) ENGINE=MyISAM DEFAULT CHARSET=cp1251 COMMENT='Статистика посещений - за последний месяц подробная'

В 1 записываю для данного сайта kols+1;
Во 2-ю записываю и по ней же сравниваю иникальные ip;
В 3-ю записываю подробный отчет со всеми вхождениями, и храню только определенное время например - месяц:
 $dd1 = date("Y-m-d H:i:s", mktime(0,0,0,date("m")-1,date("d"),  date("Y")));
 $SQL2="delete from `stat_mon` where `date_in`<'$dd1'";
 $r2 = mysql_query($SQL2);

А дальше информер рисую с двумя цифрами, уникальных ip и количество посещений из 1 таблицы.

Это сообщение отредактировал(а) password - 23.9.2008, 18:31

$q_stat=mysql_query("select `stat`, `where`, `year` from `stat` WHERE `status` = '1' and `category` LIKE '%$categ%' order by `id` desc LIMIT $col2, 20") or die(mysql_error());

Индексы все нужные в таблице созданы?

Какие индексы?

http://www.mysql.ru/docs/man/MySQL_indexes.html

Для огромных таблиц - нужная вещь.. Позволяет ускорить время выполнения запросов. 

teroni, прочитаю завтра, может размер некоторых полей уменьшить, или есть более экономные типы, например свой тип поля для IP адреса?

Int + ip2long 


желательно от like избавиться. Он занимает много времени.


солидарен. На мой взгляд лучшее решение. Как только основная таблица начинает тормозить, переносить часть/все ее данные в бэкапную. 

А вообще конечно это большой поток информации. У меня на сайте начало тормозить после того как таблица выросла далеко за 1гб. 

Это сообщение отредактировал(а) mr.fox - 24.9.2008, 00:37

teroni, там очень плохо написано, я совсем не понял, для чего нужны индексы, и как они работают. Может ты объяснишь?

Есть вопрос, как быстро превратить таблицу в бекапную средствами HeidiSQL?

И ещё вопрос: может просто не надо записывать посещения сайта ботами?



Это сообщение отредактировал(а) m1kle - 26.9.2008, 13:57