Почему я не доверяю временным таблицам

[Wamr]

Использование временных таблиц весьма удобно, по сравнению с другими формами хранения временных коллекций. И часто, как-то забывается, что они не являются полноценными таблицами.

1. Любимая многими схема использования временной таблицы для группировки данных, особенно часто встречается в отчетах:

	TransTable	trans;	// постоянная таблица каких-то строк
	TmpTable	tmpTable;	// временная таблица

	while select trans
		where trans.Tratata <= "tititi" &&
			trans.LaLaLa >= "gogogo"
	{
		select firstonly tmpTable
			where tmpTable.Field1 == trans.SomeRefId &&
				tmpTable.Date1 == trans.TransDate;
		
		if(! tmpTable)
		{
			tmpTable.initFromTrans(trans);
		}

		tmpTable.Amount += trans.Amount;
		tmpTable.Qty += trans.Qty;

		tmpTable.write();
	}

Такой код замечательно работает до 1000 записей, но чем дальше, тем все хуже и хуже, потому что с каждым циклом время на 1 итерацию увеличивается... 5000 вообще сложно дождаться.
И в этом случаи, индекс на временной таблице помогает, но редко кто о нем задумывается пока не надо будет сдавать отчетность за квартал-полгода.

2. Временная таблица, по мнению Аксапты, может быть перемещена на диск, если достигла какого-то предела в размерах (где-то была дока, которая более подробно об этом говорила). После такого подвоха работа с ней превращается в постоянное дерганье диска, что ну никак не увеличивает скорость.
Я так и не научился предугадывать и ловить этот "счастливый" момент... всегда становится неприятной неожиданностью.

3. Место хранение либо клиент, либо сервер, хотя чаше хочется создать на сервере, а использовать на клиенте, что приводит к многочисленным обменам клиент-сервер.

Итого: когда встречаю в чей-то разработке временную таблицу заполняемую неопределенным объемом данным, отмечаю для себя, что надо либо протестировать на большом объеме, либо постараться не использовать для больших выборок.

[Logger]

Цитата:

Сообщение от Wamr

Я так и не научился предугадывать и ловить этот "счастливый" момент... всегда становится неприятной неожиданностью.

Если не ошибаюсь то таблицы объемом до 128 килобайт хранятся в памяти (ax4.0) а то что выше - сбрасывается на диск.

Так что можно оценить объем одной записи и примерно понять сколько записей можно вставить до момента когда ядро начнет скидывать их на диск.

[TasmanianDevil]

Цитата:

Сообщение от Logger

128 килобайт

Можно отрыть где-то в настройках (пусть даже и через копание в реестре) или это "прошито" в программе ?

[Logger]

Цитата:

Сообщение от TasmanianDevil

Можно отрыть где-то в настройках (пусть даже и через копание в реестре) или это "прошито" в программе ?

Не знаю.
Я об этом прочитал в книге Inside Ax 4.0

Там не описывалось можно ли играть этим параметром.

[tolstjak]

Цитата:

Сообщение от Wamr

Использование временных таблиц весьма удобно, по сравнению с другими формами хранения временных коллекций. И часто, как-то забывается, что они не являются полноценными таблицами.

Какую альтернативу временной таблицы считаете наиболее разумной?

[Wamr]

128КБ ...знаю-знаю, пробовал-пробовал, не получилось-не получилось

я не призываю избавляться от временных таблиц, а предлагаю думать над тем сколько данных вы туда кладете и как их дальше используете.

альтернативы все теже - Map, Set, List

[tricky]

Цитата:

Сообщение от tolstjak

Какую альтернативу временной таблицы считаете наиболее разумной?

Недавно воспользовался, хоть и не в полной мере, вот таким советом (Оптимизация запроса - ranges). На больших объемах данных результат по скорости поразил. Суть вкратце: использовать взамен временной - постоянную таблицу, с последующей её очисткой. У такого подхода наверняка найдется множество противников, и они будут в своём роде правы. Но в критических ситуациях может быть полезным, на мой взгляд.

[DSPIC]

Цитата:

Сообщение от Logger

Не знаю.
Я об этом прочитал в книге Inside Ax 4.0

Там не описывалось можно ли играть этим параметром.

И я за то, чтобы читали книжки, а не удивлялись "чуду"

[Logger]

Цитата:

Сообщение от Wamr

альтернативы все теже - Map, Set, List

RecordSortedList ?