V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  sunhk25  ›  全部回复第 1 页 / 共 14 页
回复总数  262
1  2  3  4  5  6  7  8  9  10 ... 14  
168 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@c0xt30a numpy 按 16bit 的 array 数组存到文件,然后 c++dump 这个文件后,数组再转换到 float ?这个方案可以参考下。
182 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@kirory
刚才测了一下转换是没有问题,效率有点慢。
比 numpy 的 load 处理慢了 35 倍。
182 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@kirory
以 16bit 从二进制文件取出来后放到数组,然后再进行转换吗,效率会不会是个问题。
稍候测一下。
183 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@lonewolfakela
对 是这个问题。不知道如何指定 float16 类型。
刚才那位说了不支持 float16 需要编译一下。
183 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@tool2d
Python 里 float16 和 float32 的计算速度之前有过比较没有变慢所以才想到保存为半精度也没有问题。
想着用 C++来再提高下速度,就遇到了这个问题了。
gcc 编译的话好像挺麻烦的样子 我了解了解。
183 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@lonewolfakela
16 位的数据时我读取的时候指定的大小是 2 ( float 的时候 sizeof 是 4 )
183 天前
回复了 sunhk25 创建的主题 C++ C++读取 npy 保存的 float16 精度的二进制文件
@lonewolfakela
Scalar 是 float 类型,C++不太理解好像没有 numpy 对应的 float16 。
numpy 可以正常读取保存的 float16 类型。
以上代码是在 Windows 下执行的,Celery 从版本 4 之后虽然可以使用,但是不太维护。
在 Ubuntu 上测试了一下,上面的代码没有问题。
@sunhk25 后来查看代码,原来有 disconnect 处理。去掉后就没有问题了。
@rrfeng 那第一次连接的时候,就是无法避免这些开销吗
2021-08-20 16:35:33 +08:00
回复了 sunhk25 创建的主题 MongoDB Windows 下用 mongodump 命令,很小的数据库也花 8 秒
@ch2
谢谢 现在改成 127.0.0.1 就好
2021-08-20 16:35:03 +08:00
回复了 sunhk25 创建的主题 MongoDB Windows 下用 mongodump 命令,很小的数据库也花 8 秒
@tammy
确实是花在解析上了,改成 127.0.0.1 后就好了
2021-08-20 09:02:17 +08:00
回复了 azur 创建的主题 MongoDB mongodump 遇到一个奇怪的问题,向各位大佬请教
@azur
借问一下,Windows 下的 mongodump 连接慢吗。
我这里很小的数据库连接和下载需要 8 秒,用 Pymongo 下载的话不到一秒,但是无法取得 meta 文件。
@miniyao celery 自动假死是指定期任务不执行吗?
2021-04-21 07:20:06 +08:00
回复了 sunhk25 创建的主题 Python Python numpy 如何优雅的进行矩阵的并行计算
@necomancer target 参数学习了
2021-04-19 18:32:56 +08:00
回复了 sunhk25 创建的主题 Python Python numpy 如何优雅的进行矩阵的并行计算
@princelai 对 是这个意思。我研究一下 numba,谢谢
2021-04-19 18:19:49 +08:00
回复了 sunhk25 创建的主题 Python Python numpy 如何优雅的进行矩阵的并行计算
@princelai sum 是我自定义的一个函数
2021-04-19 18:17:56 +08:00
回复了 sunhk25 创建的主题 Python Python numpy 如何优雅的进行矩阵的并行计算
@geelaw 那就是说用自定义的 how 函数来循环计算时还是没有优化方法呗
2021-04-02 10:58:46 +08:00
回复了 linlin6 创建的主题 Python 关于 Python 的库开源问题
2021-04-02 10:55:31 +08:00
回复了 linlin6 创建的主题 Python 关于 Python 的库开源问题
```python
import pkg_resources

def get_pkg_license(pkg):
try:
lines = pkg.get_metadata_lines('METADATA')
except:
lines = pkg.get_metadata_lines('PKG-INFO')

license = 'UNKNOWN'
labels = ['License: ', 'Classifier: License :: OSI Approved :: ']
for label in labels:
for line in lines:
if line.startswith(label):
license = line[len(label):]
break
if license != 'UNKNOWN':
return license

return '(Licence not found)'

def get_pkg_home_page(pkg):
try:
lines = pkg.get_metadata_lines('METADATA')
except:
lines = pkg.get_metadata_lines('PKG-INFO')
label = 'Home-page: '
for line in lines:
if line.startswith(label):
url = line[len(label):]
break
if url == 'UNKNOWN':
url = 'https://pypi.python.org/pypi/'+pkg.key
return url

def create_packages_and_licenses_text():
text = ''
for pkg in sorted(pkg_resources.working_set, key=lambda x: str(x).lower()):
text += '\t'.join([pkg.key,pkg.version,get_pkg_license(pkg),get_pkg_home_page(pkg)]) + '\n'
return text

if __name__ == "__main__":
text = create_packages_and_licenses_text()
print(text)

filename = 'packages_and_licenses.txt'
with open(filename, 'w', encoding='Shift-JIS') as f:
f.write(text)
```
1  2  3  4  5  6  7  8  9  10 ... 14  
关于   ·   帮助文档   ·   博客   ·   nftychat   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1685 人在线   最高记录 5634   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 35ms · UTC 00:32 · PVG 08:32 · LAX 17:32 · JFK 20:32
Developed with CodeLauncher
♥ Do have faith in what you're doing.