SDT Community Server

性能测试常见误区

Coolboy — Tue, 02 Dec 2008 15:48:00 GMT

请看下面一个性能测试小案例：

某公司OA产品的新版本即将发布。为了看看系统的性能，决定安排测试工程师A君执行性能测试任务。A君做法如下：1. 找到一台PC机，CPU主频1G，内存512M，……；2. 在找到的PC机上搭建了测试环境：安装了Oracle9i、Weblogic等系统软件；3. 在自己的工作机上安装了LoadRunner7.8;4. 然后录制了登陆、发布公告等功能；5. 开始设置30、50、100、500不同的并发用户数目进行并发；6. 最后得出结论：系统只能运行80个左右的并发用户……。

无疑上面的做法存在很多不合理的地方，例如测试内容太少、测试服务器配置太低等。现实工作中，尽管性能测试以其在测试中独特的地位越来越为软件测试人员、开发人员和用户所重视，但是不管是测试人员还是开发人员，仍然在认识上存在这样或者那样的误区。

误区1：提高一下硬件配置就可以提高性能了，因此性能测试不重要。这是以前系统规模不大时期留下来的认识。DOS时代以及后来Windows操作系统流行的初期，软件规模一般较小，而硬件的更新却是日新月异，软件性能一般不是突出问题，因为只要升级一下硬件，很容易就解决了性能问题。现在随着软件规模的扩大，提高硬件配置只是解决性能问题的一个基本手段。因为如果软件自身存在性能问题，再多的资源可能也不够用，例如内存泄漏问题，随着时间的增加，内存终究会被耗尽，最后导致系统崩溃。因此，如果用户对软件的性能要求较高，这将意味着不但要从硬件方面来提供性能，还要从数据库、WebServer、操作系统配置等方面入手来提高性能，同时开发的软件系统本身也要进行优化，以便全面提高性能。误区2：性能测试在所有其它测试完成后，测试一下看看就可以了。这是目前特别普遍的一种现象，例如前面的A君，这种现象主要是没有意识到性能测试的重要性。这种做法最严重的后果是如果性能问题是由软件系统本身产生的，可能会无法根治性能问题。例如架构设计方面的失误，可能意味着软件系统将被废掉。当然这并不意味所有的性能测试都要尽早进行，性能测试的启动时间要由软件特点来决定。性能测试策略的制定问题可以参考《程序员》2005第10、11期的《治疗软件亚健康》。误区3：性能测试独立于功能测试。功能测试可以发现性能问题，性能测试也能发现功能问题。性能测试和功能测试是紧密联系在一起的，原因之一是由于很多性能问题是由软件自身功能缺陷引起的。如果应用系统功能不完善或者代码运行效率低下，通常会带来一些性能问题。功能测试通常要先于性能测试执行或者同步进行，软件功能完善可以保证性能测试进行得更加顺利。误区4：性能测试就是用户并发测试。仍然有很多人（尤其是开发人员和部分项目实施人员）一提到性能测试，就会联想到并发用户测试，进而认为性能测试就是“测试一下多用户的并发情况”。严格地讲，性能测试是以用户并发测试为主的测试。实际性能测试还包含强度测试、大数据量测试等许多内容。误区5：在开发环境下进行一下性能测试就可以了。很多时候，在软件开发完成后会进行性能测试，看一看软件的性能。实际上大多数的开发环境因为硬件条件比较差，所以反映不了过多的性能问题。因此性能测试要尽量在高配置的用户投产环境下进行。但是有两种可以例外的情况：一种是为了发现某些功能方面的问题，例如为了发现并发算法的一些缺陷；另外一种就是有非常好的硬件资源或者实验室作为开发环境。

误区6：系统存在瓶颈，不可以使用。

系统发现了瓶颈，的确是很让人担心的一件事情。不过不要紧，很多的瓶颈可以不必去理会。发现瓶颈的目的主要是为了掌握系统特性，为改善和扩展系统提供依据。因此在性能方面给系统留有30％左右的扩展空间就可以了。

例如，1000个用户并发时发现了系统瓶颈，而客户的最大并发用户数量在500左右，这样的性能问题完全没有必要处理，要是550或者600个并发用户出现性能问题就应该认真地调整系统性能了。

误区7：不切实际的性能指标。

这种现象主要归结于对软件应用需求的不了解。很多时候，尤其是用户会提出很多不切实际的性能指标，例如，针对500个用户使用的OA系统，可能有的用户负责人会提出要满足100个甚至500个用户并发的性能目标，而实际并发数量不会高于50。这种情况只有和用户进行沟通才可以解决。

上面列举的都是日常性能测试工作中相关人员常犯的错误，这些观点只在极其特殊的情况下才正确。希望读者了解这些常见的性能测试误区后，能在以后的工作中避免类似的情况。

DataTable.Compute Method

wicky — Thu, 27 Nov 2008 14:23:00 GMT

你试过循环datatable计算某一列的合计值么，有没试过这种方法：

</span>private void ComputeBySalesSalesID(DataSet dataSet)
{
    // Presumes a DataTable named "Orders" that has a column named "Total."
    DataTable table;
    table = dataSet.Tables["Orders"];


    // Declare an object variable.
    object sumObject;
    sumObject = table.Compute("Sum(Total)", "EmpID = 5");
}

查找一下帮助，你会有更多发现！

将Sql server 2005数据库复制到Sql server 2000

Johnking — Wed, 26 Nov 2008 09:16:00 GMT

如果系统开发使用的数据库是sql server 2005，而客户用的是sql server 2000或者需要在sql server 2000下测试，需要将sql server 2005中的数据库复制到sql server 2000。

1，在sql server 2000下建立结构完全相同的数据库，然后用Import/Export将数据也导入过来。

（生成的脚本运行的时候可能有顺序上的错误，数据多的时候导入速度慢）

2，用sql server 自带的复制（Replication）功能。在源服务器上建立Publication，然后在下面建立Subscription。指定相应的服务器、数据库、登录方式即可。具体打开向导就明白了。

（完全复制，速度快）

btw,如果是2000复制到2005，可以直接用Attach了。

New ASP.NET Charting Control:

wicky — Tue, 25 Nov 2008 13:34:00 GMT

http://weblogs.asp.net/scottgu/archive/2008/11/24/new-asp-net-charting-control-lt-asp-chart-runat-quot-server-quot-gt.aspx

Microsoft recently released a cool new ASP.NET server control - <asp:chart /> - that can be used for free with ASP.NET 3.5 to enable rich browser-based charting scenarios:

微软出品的免费asp.net图形控件，看样子还挺强大。
又打击一片控件商。干脆全部收购得了。

一个世界上最懒惰的程序员写的Cache也能让你的复杂计算程序（数据库程序）大大提高速

Coolboy — Mon, 24 Nov 2008 16:16:00 GMT

仔细模拟一下你的数据库程序，你有没有发现在计算时（特别是多用户计算时）经常重复读取数据库数据？！这是数据库处理程序的性能的最主要的杀手。

有些人说在写程序之前应该把算法想好，使得数据记录成批地、一次性地读取。但是这实际上往往不可能，因为复杂的程序贴近逻辑流程才清晰可维护。更何况这也不能解决多用户访问的情况。最好，我们根本不用在写程序时去考虑数据是否会被重复读取从而改变程序流程，但是又能自然而然地防止重复读取数据库。当对计算过程进行优化，而又不想破坏逻辑清晰性的时候，当然就是要依靠简单的Cache —— 对象只要能够缓存几秒钟就好。

下面我这里写一个世界上最懒惰的程序员使用.net写的一个最简单的Cache，但是它往往可以让复杂的计算程序大大提高计算速度。

using System;
using System.Collections.Generic;

namespace DomainBase
{
    public class ObjectCache
    {
        //Dictionary<K,T> 会自动维护一个空链表来保存不用的单元。
        //这里，使用被缓存对象的“弱引用”，允许这些对象被垃圾回收。

        private Dictionary<string, WeakReference> Buffer = new Dictionary<string, WeakReference>();

        public object this[string key]
        {
            get
            {
                WeakReference ret;
                if (Buffer.TryGetValue(key, out ret) && ret.IsAlive)
                    return ret.Target;
                else
                    return null;
            }
            set
            {
                WeakReference ret;
                if (Buffer.TryGetValue(key, out ret))
                    ret.Target = value;
                else
                    Buffer.Add(key, new WeakReference(value));
            }
        }

        public void Remove(string key)
        {
            Buffer.Remove(key);
        }
    }
}

这就是最简单的Cache。例如：

public Class User
{
static ObjectCache Buffer=new ObjectCache();

public static GetUser(string id)
{
User ret=Buffer[id];
if(ret==null)
{
ret=读取数据库产生User对象(id);
Buffer[id]=ret;
}
return ret;
}
.....

这里，在一个Dictionary <K,T>结构字典中保存了对象的key以及对象的“弱引用”。这样，当内存不足时GC会照样去释放被缓存的对象。当我们需要将对象在几秒钟内进行缓存时，使用这个最简单的Cache很有用。

.net framework中有非常多非常多的东西需要程序员去了解，不要仅仅抱着那些空洞、不实惠的“放之四海而皆准”的大部头的著作，有时间要多读一些实际地分析 .net framework 系统本身的方面的资料。在每一个技术中都可以找对一两个细节，这个细节就像掌握DNA技术一样能够让你不但扩展原理而且通过动手能力得到巨大实惠。

Visual Studio 2010 and .NET Framework 4.0 Training Kit

wicky — Sat, 22 Nov 2008 13:39:00 GMT

Visual Studio 2010和.NET Framework 4.0培训包包含了介绍，动手实战教程和例子，包括以下内容：

C# 4.0
Visual Basic 10
F#
Parallel Computing Platform
WCF
WF
WPF
ASP.NET AJAX 4.0
ASP.NET MVC
Dynamic Data

通过这些内容可以帮助您了解如何使用Visual Studio 2010和.NET Framework 4.0。

Visual Studio 2010 and .NET Framework 4.0 Training Kit下载地址

http://www.microsoft.com/downloads/details.aspx?FamilyID=752cb725-969b-4732-a383-ed5740f02e93&DisplayLang=en

Visual Studio 2010 and .NET Framework 4.0 CTP下载地址

http://www.microsoft.com/downloads/details.aspx?FamilyID=922b4655-93d0-4476-bda4-94cf5f8d4814&DisplayLang=en

Visual Studio 2010 and .NET Framework 4.0 概览

http://msdn.microsoft.com/en-us/vs2008/products/cc948977.aspx

Ado.Net读取Excel

slash — Wed, 19 Nov 2008 08:45:00 GMT

经常需要在数据库与Execl之间互导数据。net时代，ADO.NET可以使用使用Microsoft.Jet.OleDb访问访问Excel，网上已经有很多类似的资源，最典型也是最简单的可能如下：（asp.net环境）

// 连接字符串
        string xlsPath = Server.MapPath("~/app_data/somefile.xls"); // 绝对物理路径
        string connStr = "Provider=Microsoft.Jet.OLEDB.4.0;" +
                        "Extended Properties=Excel 8.0;" +
                        "data source=" + xlsPath;
        // 查询语句
        string sql = "SELECT * FROM [Sheet1$]";

        DataSet ds = new DataSet();
        OleDbDataAdapter da = new OleDbDataAdapter(sql, connStr);
        da.Fill(ds);    // 填充DataSet

        // 在这里对DataSet中的数据进行操作

        // 输出，绑定数据
        GridView1.DataSource = ds.Tables[0];
        GridView1.DataBind();

很简单吧？！一切就像操作数据库一样，只是需要注意的是：
1。数据提供程序使用Jet，同时需要指定Extended Properties 关键字设置 Excel 特定的属性，不同版本的Excel对应不同的属性值：

用于 Extended Properties 值的有效 Excel 版本。
对于 Microsoft Excel 8.0 (97)、9.0 (2000) 和 10.0 (2002) 工作簿，请使用 Excel 8.0。

对于 Microsoft Excel 5.0 和 7.0 (95) 工作簿，请使用 Excel 5.0。

对于 Microsoft Excel 4.0 工作簿，请使用 Excel 4.0。

对于 Microsoft Excel 3.0 工作簿，请使用 Excel 3.0。

ref：http://msdn.microsoft.com/library/chs/default.asp?url=/library/CHS/dv_vbcode/html/vbtskcodeexamplereadingexceldataintodataset.asp

2。数据源路径使用物理绝对路径（同Access）

3。如何引用表名？

对 Excel 工作簿中表（或范围）的有效引用。
若要引用完全使用的工作表的范围，请指定后面跟有美元符号的工作表名称。例如：

select * from [Sheet1$]
若要引用工作表上的特定地址范围，请指定后面跟有美元符号和该范围的工作表名称。例如：

select * from [Sheet1$A1:B10]
若要引用指定的范围，请使用该范围的名称。例如：

select * from [MyNamedRange]

ref：http://msdn.microsoft.com/library/chs/default.asp?url=/library/CHS/dv_vbcode/html/vbtskcodeexamplereadingexceldataintodataset.asp
说明：
可以引用Excel 工作簿中的三种对象：
• 整张工作表：[Sheet1$] ，Sheet1 就是工作表的名称
• 工作表上的命名单元格区域：[MyNamedRange] （不需要指定工作表，因为整个xls中命名区域只能唯一）
XLS命名方法：选中单元格范围》插入》名称》定义
• 工作表上的未命名单元格区域：[Sheet1$A1:B10]
（在关系数据库提供的各种对象中（表、视图、存储过程等），Excel 数据源仅提供相当于表的对象，它由指定工作簿中的工作表和定义的命名区域组成。命名区域被视为“表”，而工作表被视为“系统表”）

注意：
•必须使用[]（方括号），否将报：
FROM 子句语法错误
•必须跟$（美元符号），否则报：
Microsoft Jet 数据库引擎找不到对象'Sheet2'。请确定对象是否存在，并正确地写出它的名称和路径。
•如果工作表名称不对，或者不存在，将报：
'Sheet2$' 不是一个有效名称。请确认它不包含无效的字符或标点，且名称不太长。
•在如何在 Visual Basic 或 VBA 中使用 ADO 来处理 Excel 数据中提到可以使用
~ 和 '(波浪线和单引号）代替[]，使用ADO。NET测试没有成功，报：
FROM 子句语法错误
•当引用工作表明名（[Sheet1$]）时，数据提供程序认为数据表从指定工作表上最左上方的非空单元格开始。比如，工作表从第 3 行，C 列开始，第3行，C列之前以及第1、2行全为空，则只会显示从第3行，C列开始的数据；以最后表最大范围内的非空单元结束；
•因此，如需要精确读取范围，应该使用命名区域 [NamedRange]，或者指定地址：[Sheet1$A1:C10]

4。如何引用列名？
•根据默认连接字符串中，数据提供程序会将有效区域内的第一行作为列名，如果此行某单元格为空则用F1、F2表示，其中序数，跟单元格的位置一致，从1开始；
•如果希望第一行作为数据显示，而非列名，可以在连接串的 Extended Properties 属性指定：HDR=NO
默认值为：HDR=NO 格式如下：

        string connStr = "Provider=Microsoft.Jet.OLEDB.4.0;" +
                        "Extended Properties=""Excel 8.0;HDR=NO"";" +
                        "data source=" + xlsPath;

注意： Excel 8.0;HDR=NO 需要使用双引号（这里的反斜扛，是C#中的转义）

ref： ms-help://MS.VSCC.v80/MS.MSDN.v80/MS.VisualStudio.v80.chs/WD_ADONET/html/745c5f95-2f02-4674-b378-6d51a7ec2490.htm 中《连接Excel》节（说明：在我自己的MSDN中，它的例子使用了两个双引号是错的，测试没有通过，原文这样说的：

注意，Extended Properties 所需的双引号必须还要加双引号。

）

在这种情况下，所有的列名都是以F开头，然后跟索引，从F1开始，F2，F3。。。。。。。

5。为什么有效单元格数据不显示出来？
出现这种情况的可能原因是，默认连接中，数据提供程序根据前面单元格推断后续单元个的数据类型。
可以通过 Extended Properties 中指定 IMEX=1

“IMEX=1;”通知驱动程序始终将“互混”数据列作为文本读取

ref：同4

PS：在baidu这个问题的时候，有网友说，将每个单元都加上引号，这固然是格方案，但是工作量何其大啊，又不零活，庆幸自己找到”治本药方“

more ref：
如何在 Visual Basic 或 VBA 中使用 ADO 来处理 Excel 数据
 http://dotnet.aspx.cc/ShowDetail.aspx?id=C673E2CD-3F1E-4919-8CE0-D69B894A0599

注意：
在网上有很多同志说是加上HDR或IMEX这两个属性值后会报“找不到可安装的ISAM ”的错误。这时解决方法很简单：
就是把连接串写成如下形式：

Provider=Microsoft.Jet.Oledb.4.0;Data Source={0};Extended Properties='Excel 8.0;HDR=1; IMEX=1;' (注意红色标注的单引号)

而不要写成这样的形式：

Provider=Microsoft.Jet.Oledb.4.0;Data Source={0};Extended Properties=Excel 8.0;HDR=1; IMEX=1;

应用程序经常需要与Excel进行数据交互，在上一篇文章ADO.NET 如何读取 Excel （上）阐述了基于ADO.NET 读取Excel的基本方法与技巧。今天这里要介绍是如何动态的读取Excel数据，这里的动态指的是事先不知道Excel文件的是什么样的结构，或者无法预测，比如一张.xls文件有多少张sheet，而且每张sheet的结构可能都不一样等等。
其实我们可以通过获取Excel的“架构信息”来动态的构造查询语句。这里的“架构信息”与数据库领域的“数据库架构信息”意义相同（也称“元数据”），对于整个数据库，这些“元数据”通常包括数据库或可通过数据库中的数据源、表和视图得到的目录以及所存在的约束等；而对于数据库中的表，架构信息包括主键、列和自动编号字段等。
在ADO.NET 如何读取 Excel （上）提到

在关系数据库提供的各种对象中（表、视图、存储过程等），Excel 数据源仅提供相当于表的对象，它由指定工作簿中的工作表和定义的命名区域组成。命名区域被视为“表”，而工作表被视为“系统表”）

这里我们将Excel也当作一个“数据库”来对待，然后利用OleDbConnection.GetOleDbSchemaTable 方法
要获取所需的架构信息，该方法获取的架构信息与ANSI SQl-92是兼容的：

注意：对于那些不熟悉 OLE DB 架构行集的人而言，它们基本上是由 ANSI SQL-92 定义的数据库构造的标准化架构。每个架构行集具有为指定构造提供定义元数据的一组列（称作 .NET 文档中的“限制列”）。这样，如果请求架构信息（例如，列的架构信息或排序规则的架构信息），则您会明确知道可以得到哪种类型的数据。如果希望了解更多信息，请访问 Appendix B: Schema Rowsets。

ref：http://www.microsoft.com/china/msdn/library/office/office/odatanet2.mspx?mfr=true

以下是读取Excel文件内“表”定义元数据，并显示出来的的程序片断：

GetOleDbSchemaTable 方法的详细说明可以参考：
http://msdn2.microsoft.com/zh-CN/library/system.data.oledb.oledbconnection.getoledbschematable.aspx

接着是一段利用“架构信息”动态读取Excel内部定义的表单或者命名区域的程序片断：

        // 读取Excel数据，填充DataSet
        // 连接字符串
        string xlsPath = Server.MapPath("~/app_data/somefile.xls");
        string connStr = "Provider=Microsoft.Jet.OLEDB.4.0;" +
                        "Extended Properties=""Excel 8.0;HDR=No;IMEX=1"";" + // 指定扩展属性为 Microsoft Excel 8.0 (97) 9.0 (2000) 10.0 (2002)，并且第一行作为数据返回，且以文本方式读取
                        "data source=" + xlsPath;
        string sql_F = "SELECT * FROM [{0}]";

        OleDbConnection conn = null;
        OleDbDataAdapter da = null;
        DataTable tblSchema = null;
        IList<string> tblNames = null;

        // 初始化连接，并打开
        conn = new OleDbConnection(connStr);
        conn.Open();

        // 获取数据源的表定义元数据
        //tblSchema = conn.GetSchema("Tables");
        tblSchema = conn.GetOleDbSchemaTable(OleDbSchemaGuid.Tables, new object[] { null, null, null, "TABLE" });

        //GridView1.DataSource = tblSchema;
        //GridView1.DataBind();

        // 关闭连接
        //conn.Close();

        tblNames = new List<string>();
        foreach (DataRow row in tblSchema.Rows) {
            tblNames.Add((string)row["TABLE_NAME"]); // 读取表名
        }

        // 初始化适配器
        da = new OleDbDataAdapter();
        // 准备数据，导入DataSet
        DataSet ds = new DataSet();

        foreach (string tblName in tblNames) {
            da.SelectCommand = new OleDbCommand(String.Format(sql_F, tblName), conn);
            try {
                da.Fill(ds, tblName);
            }
            catch {
                // 关闭连接
                if (conn.State == ConnectionState.Open) {
                    conn.Close();
                }
                throw;
            }
        }

        // 关闭连接
        if (conn.State == ConnectionState.Open) {
            conn.Close();
        }

        // 对导入DataSet的每张sheet进行处理
        // 这里仅做显示
        GridView1.DataSource = ds.Tables[0];
        GridView1.DataBind();

        GridView2.DataSource = ds.Tables[1];
        GridView2.DataBind();

        // more codes
        // .

这里我们就不需要对SELEC 语句进行“硬编码”，可以根据需要动态的构造FROM 字句的“表名”。

不仅可以，获取表明，还可以获取每张表内的字段名、字段类型等信息：

tblSchema = conn.GetOleDbSchemaTable(OleDbSchemaGuid.Columns, new object[] { null, null, null, null });

在ADO.nET 1.x 时候只有OleDb提供了GetOleDbSchemaTable 方法，而SqlClient或者OrcaleClient没有对应的方法，因为对应数据库已经提供了类似功能的存储过程或者系统表供应用程序访问，比如对于Sql Server：

SELECT *
FROM Northwind.INFORMATION_SCHEMA.COLUMNS
WHERE TABLE_NAME = N'Customers'

而在ADO.NET 2.0中每个xxxConnenction都实现了基类System.Data.Common.DbConnection的 GetSchemal 方法
来获取数据源的架构信息。