V2EX › llsquaer 的所有回复 › 第 10 页 / 共 11 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 2 3 4 5 6 7 8 9 10 11

❮

❯

2020-06-13 10:58:47 +08:00

回复了 llsquaer 创建的主题 › 问与答 › 爬虫查重复,数据库占 cpu 超高,怎么解决呢?

@sadfQED2 用默认的,还不知道怎么建立索引, 我先去研究下...还有布隆过滤器 ..谢谢.

2020-06-13 10:57:54 +08:00

回复了 llsquaer 创建的主题 › 问与答 › 爬虫查重复,数据库占 cpu 超高,怎么解决呢?

@njshiyanhz 总共 6 个字段,分析了 6 个字段必须要同时查,,不然会出现某个字段是重复,其他不重复的情况,,会跳过一部分内容,,MongoDB 用的默认的配置,,没研究过怎么建立索引..我去研究下...谢谢..

2020-05-14 11:40:22 +08:00

回复了 crella 创建的主题 › Python › 为什么爬虫大佬多用 re 而少用 soup、xml 来提取元素？

前段时间刚好将 xpath 改为 re....发现效率突然提升不少呢...原来不用 re 就是写不好啊..后来熟练点了.发现原来是没理解到 re 所以没用..现在发现普通的就直接 re,速度又快..混合使用提高效率

2020-05-14 11:32:32 +08:00

回复了 GTD 创建的主题 › Python › 问一个 Python 的简单语法区别， for i in list 和 for i in range 的区别？

for i in list:
print('i') 表示遍历列表,并打印 i 的值( 比如 a b c d).你的案例看不出区别

for i in range(len(list)):
print('i') 表示遍历的次数,并打印迭代后的数值

当然你问题有 list 和 range ...list 是列表,,而 range 简单理解为计数用的.

2020-05-13 10:46:59 +08:00

回复了 llsquaer 创建的主题 › 问与答 › 求教啊,怎么将电脑硬盘当 U 盘用? 用的时候加载,不用的时候就不挂载

@systemcall 先买个移动硬盘盒子用用看看效果.买虚拟感觉效率不得行呢.老电脑了

2020-05-10 21:39:16 +08:00

回复了 mulandidi 创建的主题 › Python › Python 小白，请教各位大佬一个如何能够优化这个方法？

没明白你具体..如果计算其中三行某列的数据,直接取 index 就行了啊..100w 数据也是毫秒的事情..还用什么循环?

2020-05-09 20:58:35 +08:00

回复了 llsquaer 创建的主题 › 问与答 › 求教啊,怎么将电脑硬盘当 U 盘用? 用的时候加载,不用的时候就不挂载

@passerbytiny Chrome 就要全盘扫描..不过就第一次要扫描,开启后不关没问题..关了重新开又会扫描..这个不能不用啊.

2020-05-09 20:56:50 +08:00

回复了 llsquaer 创建的主题 › 问与答 › 求教啊,怎么将电脑硬盘当 U 盘用? 用的时候加载,不用的时候就不挂载

@Osk 请问完整的怎么写呢? 不会脚本啊. ..有个开关脚本是好多了..手动太麻烦.