如何用Python进行抽样?
用Python进行抽样的步骤:
第1部分:导入需要的库
importrandom#导入标准库
importnumpyasnp#导入第三方库
这里用到了Python内置标准库random以及第三方库Numpy,前者用于做随机抽样,后者用于读取文件并做数据切片使用。
第2部分:实现简单随机抽样
data=np.loadtxt('data3.txt')#导入普通数据文件
data_sample=data[random.sample([iforiinrange(len(data))],2000)]
#随机抽取2000个样本
print(data_sample[:2])#打印输出前2条数据
print(len(data_sample))#打印输出抽样样本量
首先通过Numpy的loadtxt方法读取数据文件。
然后使用Random库中的sample方法做数据抽样。
由于sample库要求抽取的对象是一个序列或set,因此这里使用了一个列表推导式直接基于data数据集的记录数生成索引列表,
然后再返回给sample随机抽样,抽样数量为2000;最后从data中直接基于索引获得随机抽样后的结果。
打印输出前2条数据和总抽样样本量。返回结果如下:
[[-4.595013488.827416534.400965993.40332532-6.54589933]
[-7.23173404-8.926925196.828308733.03780054.64450399]]
2000
第3部分:传统方法
ind=[]
foriinrange(len(data)):
ind.append(i)
而这里的列表推导式的写法[iforiinrange(len(data))]除了在语法上更加简洁和优雅外,在性能上同样会有提升。
我们通过如下实验做简单测试,对从0到1000000的每个数求平方然后添加到列表。两种方法如下:
#方法1:传统方法
importtime
t0=time.time()#开始时间
ind=[]
foriinrange(1000000):
sqr_values=i*i
ind.append(sqr_values)
t1=time.time()#结束时间
print(t1-t0)#打印时间
#方法2:列表推导式
importtime
t0=time.time()#开始时间
sqr_values=[i*iforiinrange(1000000)]
t1=time.time()#结束时间
print(t1-t0)#打印时间
上述代码执行后的输出结果分别是:
0.39202237129211426
0.12700724601745605
上面只是简单的计算逻辑并且数据量也不大,
如果配合大数据量以及更复杂的运算,
那么效率提升会非常明显。
以上内容为大家介绍了如何用Python进行抽样?希望对大家有所帮助,如果想要了解更多Python相关知识,请关注IT培训机构:千锋教育。
相关推荐HOT
更多>>Python 枚举
1.枚举的定义首先,定义枚举要导入enum模块。枚举定义用class关键字,继承Enum类。用于定义枚举的class和定义类的class是有区别【下一篇博文继...详情>>
2023-11-06 13:46:00Python多核编程mpi4py实践
一、概述CPU从三十多年前的8086,到十年前的奔腾,再到当下的多核i7。一开始,以单核cpu的主频为目标,架构的改良和集成电路工艺的进步使得cpu...详情>>
2023-11-06 09:21:36python之增量式爬虫是什么?
引言:当我们在浏览相关网页的时候会发现,某些网站定时会在原有网页数据的基础上更新一批数据,例如某电影网站会实时更新一批最近热门的电影。...详情>>
2023-11-06 07:21:56Python之父Guido谈Python的未来
Python在移动计算领域的应用Guido:移动对Python来说仍是一个很难啃下来的平台,但是并没有浏览器平台的难度大,因为Python实际上是可以运行在...详情>>
2023-11-06 02:14:20