① JAVA批量保存數據方法
hibernateDao.batchUpdateWithSql(sql)
可以批量更新sql
一條數據一個sql
然後 批量更新
② java中的批量數據存儲
按照你的要求,應該這樣做:
提交後,把用戶信息封裝到Info對象中,然後把Info對象放到List或者其他集合類中(自己選擇),顯示的時候無非就是反向操作而已
③ 怎麼把收到的UDP數據批量存儲到資料庫
Transact-SQL 參考
BULK INSERT
以用戶指定的格式復制一個數據文件至資料庫表或視圖中。
語法
BULK INSERT [ [ 'database_name'.][ 'owner' ].]{ 'table_name' FROM 'data_file' }
[ WITH
(
[ BATCHSIZE [ = batch_size ] ]
[ [ , ] CHECK_CONSTRAINTS ]
[ [ , ] CODEPAGE [ = 'ACP' | 'OEM' | 'RAW' | 'code_page' ] ]
[ [ , ] DATAFILETYPE [ =
{ 'char' | 'native'| 'widechar' | 'widenative' } ] ]
[ [ , ] FIELDTERMINATOR [ = 'field_terminator' ] ]
[ [ , ] FIRSTROW [ = first_row ] ]
[ [ , ] FIRE_TRIGGERS ]
[ [ , ] FORMATFILE = 'format_file_path' ]
[ [ , ] KEEPIDENTITY ]
[ [ , ] KEEPNULLS ]
[ [ , ] KILOBYTES_PER_BATCH [ = kilobytes_per_batch ] ]
[ [ , ] LASTROW [ = last_row ] ]
[ [ , ] MAXERRORS [ = max_errors ] ]
[ [ , ] ORDER ( { column [ ASC | DESC ] } [ ,...n ] ) ]
[ [ , ] ROWS_PER_BATCH [ = rows_per_batch ] ]
[ [ , ] ROWTERMINATOR [ = 'row_terminator' ] ]
[ , [ TABLOCK ] ]
)
]
參數
'database_name'
是包含指定表或視圖的資料庫的名稱。如果未指定,則系統默認為當前資料庫。
'owner'
是表或視圖所有者的名稱。當執行大容量復制操作的用戶擁有指定的表或視圖時,owner 是可選項。如果沒有指定 owner 並且執行大容量復制操作的用戶不擁有指定的表或視圖,則 Microsoft® SQL Server™ 將返回錯誤信息並取消大容量復制操作。
'table_name'
是大容量復制數據於其中的表或視圖的名稱。只能使用那些所有的列引用相同基表所在的視圖。有關向視圖中復制數據的限制的更多信息,請參見 INSERT。
'data_file'
是數據文件的完整路徑,該數據文件包含要復制到指定表或視圖的數據。BULK INSERT 從磁碟復制數據(包括網路、軟盤、硬碟等)。
data_file 必須從運行 SQL Server 的伺服器指定有效路徑。如果 data_file 是遠程文件,則請指定通用命名規則 (UNC) 名稱。
BATCHSIZE [ = batch_size ]
指定批處理中的行數。每個批處理作為一個事務復制至伺服器。SQL Server提交或回滾(在失敗時)每個批處理的事務。默認情況下,指定數據文件中的所有數據是一個批處理。
CHECK_CONSTRAINTS
指定在大容量復制操作中檢查 table_name 的任何約束。默認情況下,將會忽略約束。
CODEPAGE [ = 'ACP' | 'OEM' | 'RAW' | 'code_page' ]
指定該數據文件中數據的代碼頁。僅當數據含有字元值大於 127 或小於 32 的 char、varchar 或 text 列時,CODEPAGE 才是適用的。
CODEPAGE 值 描述
ACP char、varchar 或 text 數據類型的列從 ANSI/Microsoft Windows® 代碼頁 ISO 1252 轉換為 SQL Server 代碼頁。
OEM(默認值) char、varchar 或 text 數據類型的列被從系統 OEM 代碼頁轉換為 SQL Server 代碼頁。
RAW 並不進行從一個代碼頁到另一個代碼頁的轉換;這是最快的選項。
code_page 特定的代碼頁號碼,例如 850。
DATAFILETYPE [ = {'char' | 'native' | 'widechar' | 'widenative' } ]
指定 BULK INSERT 使用指定的默認值執行復制操作。
DATAFILETYPE 值 描述
char(默認值) 從含有字元數據的數據文件執行大容量復制操作。
native 使用 native(資料庫)數據類型執行大容量復制操作。要裝載的數據文件由大容量復制數據創建,該復制是用 bcp 實用工具從 SQL Server 進行的。
widechar 從含有 Unicode 字元的數據文件中執行大容量復制操作。
widenative 執行與 native 相同的大容量復制操作,不同之處是 char、varchar 和 text 列在數據文件中存儲為 Unicode。要裝載的數據文件由大容量復制數據創建,該復制是用 bcp 實用工具從 SQL Server 進行的。該選項是對 widechar 選項的一個更高性能的替代,並且它用於使用數據文件從一個運行 SQL Server 的計算機向另一個計算機傳送數據。當傳送含有 ANSI 擴展字元的數據時,使用該選項以便利用 native 模式的性能。
FIELDTERMINATOR [ = 'field_terminator' ]
指定用於 char 和 widechar 數據文件的欄位終止符。默認的欄位終止符是 \t(製表符)。
FIRSTROW [ = first_row ]
指定要復制的第一行的行號。默認值是 1,表示在指定數據文件的第一行。
FIRE_TRIGGERS
指定目的表中定義的任何插入觸發器將在大容量復制操作過程中執行。如果沒有指定 FIRE_TRIGGERS,將不執行任何插入觸發器。
FORMATFILE [ = 'format_file_path' ]
指定一個格式文件的完整路徑。格式文件描述了含有存儲響應的數據文件,這些存儲響應是使用 bcp 實用工具在相同的表或視圖中創建的。格式文件應該用於以下情況:
數據文件含有比表或視圖更多或更少的列。
列使用不同的順序。
列分割符發生變化。
數據格式有其它的改變。通常,格式文件通過 bcp 實用工具創建並且根據需要用文本編輯器修改。有關更多信息,請參見 bcp 實用工具。
KEEPIDENTITY
指定標識列的值存在於導入文件中。如果沒有指定 KEEPIDENTITY,在導入的數據文件中此列的標識值將被忽略,並且 SQL Server 將根據表創建時指定的種子值和增量值自動賦給一個唯一的值。假如數據文件不含該表或視圖中的標識列,使用一個格式文件來指定在導入數據時,表或視圖中的標識列應被忽略;SQL Server 自動為此列賦予唯一的值。有關詳細信息,請參見 DBCC CHECKIDENT。
KEEPNULLS
指定在大容量復制操作中空列應保留一個空值,而不是對插入的列賦予默認值。
KILOBYTES_PER_BATCH [ = kilobytes_per_batch ]
指定每個批處理中數據的近似千位元組數(KB)。默認情況下,KILOBYTES_PER_BATCH 未知。
LASTROW [ = last_row ]
指定要復制的最後一行的行號。默認值是 0,表示指定數據文件中的最後一行。
MAXERRORS [ = max_errors ]
指定在大容量復制操作取消之前可能產生的錯誤的最大數目。不能被大容量復制操作導入的每一行將被忽略並且被計為一次錯誤。如果沒有指定 max_errors,默認值為 0。
ORDER ( { column [ ASC | DESC ] } [ ,...n ] )
指定數據文件中的數據如何排序。如果裝載的數據根據表中的聚集索引進行排序,則可以提高大容量復制操作的性能。如果數據文件基於不同的順序排序,或表中沒有聚集索引,ORDER 子句將被忽略。給出的列名必須是目的表中有效的列。默認情況下,大容量插入操作假設數據文件未排序。
n
是表示可以指定多列的佔位符。
ROWS_PER_BATCH [ = rows_per_batch ]
指定每一批處理數據的行數(即 rows_per_bacth)。當沒有指定 BATCHSIZE 時使用,導致整個數據文件作為單個事務發送給伺服器。伺服器根據 rows_per_batch 優化大容量裝載。默認情況下,ROWS_PER_BATCH 未知。
ROWTERMINATOR [ = 'row_terminator' ]
指定對於 char 和 widechar 數據文件要使用的行終止符。默認值是 \n(換行符)。
TABLOCK
指定對於大容量復制操作期間獲取一個表級鎖。如果表沒有索引並且指定了 TABLOCK,則該表可以同時由多個客戶端裝載。默認情況下,鎖定行為是由表選項 table lock on bulk load 決定的。只在大容量復制操作期間控制鎖會減少表上的鎖爭奪,極大地提高性能。
注釋
BULK INSERT 語句能在用戶定義事務中執行。對於一個用 BULK INSERT 語句和 BATCHSIZE 子句將數據裝載到使用多個批處理的表或視圖中的用戶定義事務來說,回滾它將回滾所有發送給 SQL Server 的批處理。
許可權
只有 sysadmin 和 bulkadmin 固定伺服器角色成員才能執行 BULK INSERT。
示例
本例從指定的數據文件中導入訂單詳細信息,該文件使用豎杠 (|) 字元作為欄位終止符,使用 |\n 作為行終止符。
BULK INSERT Northwind.dbo.[Order Details]
FROM 'f:\orders\lineitem.tbl'
WITH
(
FIELDTERMINATOR = '|',
ROWTERMINATOR = '|\n'
)
本例指定 FIRE_TRIGGERS 參數。
BULK INSERT Northwind.dbo.[Order Details]
FROM 'f:\orders\lineitem.tbl'
WITH
(
FIELDTERMINATOR = '|',
ROWTERMINATOR = ':\n',
FIRE_TRIGGERS
)
請參見
bcp 實用工具
排序規則
在不同排序規則間復制數據
使用 bcp 和 BULK INSERT
並行數據裝載
sp_tableoption
④ 求助:定期批量獲取網頁特定數據,並保存到excel表中。
這個只有專業的網站製作人員,在網頁後台保存。前面是無法保存的。不過我剛幫你實用了個比較笨的辦法,點開頁面選擇所有商家,然後CTRL+C復制,然後打開表格CTRL+V 粘貼上去。能把所有的數據復制出來,但是票數被復制的圖片擋在了下面,必須一個一個的拉開才行
⑤ 任何高效的將資料庫中大量數據儲存到本地
1、可以在遠程伺服器上備份資料庫,然後下載.bak文件在本地恢復2、鏈接上遠程伺服器,選中要備份的資料庫--》右擊--》任務--》生成腳本然後根據向導執行,但是在「選擇腳本選項」頁面要把 編寫數據的腳本 的選項 設置成TRUE,然後下一步,選擇你要備份的表、存儲過程、視圖等 知道最後生成一個.sql文件,在本地執行就好了。
⑥ 如何將批量的數據存入SQL資料庫中
在一些數據量比較大,而且操作資料庫頻繁的。此時需要將數據表datatable整塊的存入資料庫中。
不多說,直接上代碼:
首先得新建一個資料庫
DataTable once_rec_date = new DataTable();
這個資料庫得跟目標資料庫的列的位置和大小都得一樣。特別是類型,和位置。
就是列的位置和目標資料庫的位置,順序得 一模一樣。因為都是塊存儲,所以地址什麼的都得一樣,千萬不能少一列,自增列可以空在那邊。
在初始化中初始化該表
<prename="code"class="csharp">once_rec_date.Columns.Add("id",typeof(int));
once_rec_date.Columns.Add("RevData_cmd",typeof(int));
once_rec_date.Columns.Add("Node",typeof(int));
once_rec_date.Columns.Add("Data",typeof(String));
once_rec_date.Columns.Add("Ssingle",typeof(int));
once_rec_date.Columns.Add("IsWiressData",typeof(int));
once_rec_date.Columns.Add("Datatime",typeof(DateTime));
once_rec_date.Columns.Add("Receivetime",typeof(DateTime));
once_rec_date.Columns.Add("IsMatch",typeof(int));</pre><br>
<p></p>
<pre></pre>
<spanstyle="font-size:18px">初始化之後,在程序中填充該datatable<br>
</span><br>
<p></p>
<p></p><prename="code"class="csharp">DataRownewrow=once_rec_date.NewRow();
newrow["RevData_cmd"]=cmd;
newrow["Node"]=Nodeid;
newrow["Data"]=datastring;
newrow["IsWiressData"]=IsWiress;
newrow["Ssingle"]=1;
newrow["Datatime"]=datatime;
newrow["Receivetime"]=time1;
newrow["IsMatch"]=3;
once_rec_date.Rows.Add(newrow);
returntrue;</pre><br>
再在程序結束的時候調用下面的函數<prename="code"class="csharp"style="background-color:rgb(255,255,255);">AddDatatableToSQL</pre><p></p>
<p>該函數主要實現塊存儲,整datatable</p>
<p><br>
</p>
<p></p>
<prename="code"class="html"style="background-color:rgb(255,255,255);font-size:18px;"></pre><prename="code"class="csharp">///-----------------------------------------------------------------*
///<summary>*
///功能:將數據表批量存入到資料庫中*
///函數調用:SqlBulkCopy*
///</summary>*
///<paramname="frameStruct">數據類型</param>*
///-----------------------------------------------------------------*
publicboolAddDatatableToSQL(DataTableScrTable)
{
using(SqlConnectionthisConn=newSqlConnection(ConnectionStr))
{
try
{
if(thisConn.State==ConnectionState.Closed)
{
thisConn.Open();
}
using(SqlBulkCopybulkCopy=newSqlBulkCopy(thisConn))
{
bulkCopy.DestinationTableName="RevData";//這里的資料庫名字可以更改,或者通過傳參傳進去.
try
{
bulkCopy.WriteToServer(ScrTable);
returntrue;
}
catch
{
returnfalse;
}
finally
{
thisConn.Close();
}
}
}
catch
{
}
}//ensing
returnfalse;
}
</pre><br>
<p><br>
</p>
⑦ 百度公司貼吧和知道等每天產生的大量數據存儲在哪裡
有自己的伺服器群,估計幾十萬台
⑧ 在excel中計算過的批量數據如何得以單獨保存
選擇你所有希望要保存的單元格,復制,然後在一個新表裡選擇性粘貼,選擇僅粘貼值,就可以了。