У меня есть приложение C # 4.5, которое получает записи из сети и записывает их в таблицу Sql Server.
Я использую SqlBulkCopy для быстрой вставки объекта DataTable в таблицу SQL.
Это код, который я использую:
public bool BulkCopy(string tableName, DataTable dataToInsert)
{
try{
using (SqlBulkCopy tmpBulkCopy = new SqlBulkCopy(dbaseConnection))
{
// Set the destination table.
tmpBulkCopy.DestinationTableName = tableName;
// Define column mappings
foreach (DataColumn dc in dataToInsert.Columns)
{
tmpBulkCopy.ColumnMappings.Add(dc.ColumnName, dc.ColumnName);
}
// Perform the Bulk Copy
tmpBulkCopy.WriteToServer(dataToInsert);
}
}
catch (Exception)
{
return false;
}
return true;
}
Обычно объект DataTable содержит 1000 записей, в то время как таблица SQL может иметь записи ~ 500M.
Я выполнял некоторые отладки, чтобы определить возможные узкие места в нашем приложении, и я обнаружил, что каждый раз, когда вызывается WriteToServer, вызывается Select * в таблице sql.
Я использую этот запрос, чтобы получить список последних 50 запросов, запущенных в базе данных:
SELECT TOP 50 * FROM(SELECT COALESCE(OBJECT_NAME(s2.objectid),'Ad-Hoc') AS ProcName,
execution_count,s2.objectid,
(SELECT TOP 1 SUBSTRING(s2.TEXT,statement_start_offset / 2+1 ,
( (CASE WHEN statement_end_offset = -1
THEN (LEN(CONVERT(NVARCHAR(MAX),s2.TEXT)) * 2)
ELSE statement_end_offset END)- statement_start_offset) / 2+1)) AS sql_statement,
last_execution_time
FROM sys.dm_exec_query_stats AS s1
CROSS APPLY sys.dm_exec_sql_text(sql_handle) AS s2 ) x
WHERE sql_statement NOT like 'SELECT TOP 50 * FROM(SELECT %'
--and OBJECTPROPERTYEX(x.objectid,'IsProcedure') = 1
ORDER BY last_execution_time DESC
Является ли это нормальным поведением объекта SqlBulkCopy? Из-за того, что таблица SQL довольно большая, теперь я беспокоюсь о влиянии этого запроса Select на общие характеристики.
Выбор * выполняется с помощью SET FMTONLY ON. Таким образом, никакая строка не обрабатывается. Этот оператор должен быть выполнен для возврата информации о таблице назначения.
Никакие строки не обрабатываются или не отправляются клиенту из-за запроса, когда SET FMTONLY включен.
Ссылка: https://docs.microsoft.com/en-us/sql/t-sql/statements/set-fmtonly-transact-sql
Вот пример:
select @@trancount; SET FMTONLY ON select * FROM tag SET FMTONLY OFF exec tempdb..sp_tablecollations_100 N'.[#ZZZProjects_f384e3cc_1428_459d_8853_a50ed818ccca]'