Python 中文交流

29 Feb 2024 08:01

F大佬的文章，以前我很喜歡看，但是很多地方有看沒有真懂

Python 中文交流

29 Feb 2024 07:55

/channel/pythonzh/329191

Python 中文交流

29 Feb 2024 07:53

https://github.com/kevin197011/krun/tree/main 用我这个工具部署爽的飞起

Python 中文交流

29 Feb 2024 05:05

/channel/pythonzh/416492

Python 中文交流

29 Feb 2024 04:57

只需要管理python level的依赖，我都是venv，如果需要别的，可能conda之类的好一些吧。我主要是没有需要native依赖的时候。。

Python 中文交流

29 Feb 2024 04:50

https://blog.51cto.com/u_14235050/6034442

Python 中文交流

29 Feb 2024 04:48

好台湾的用词。。我到目前为止开发还是只用venv

Python 中文交流

29 Feb 2024 04:43

qxes4210/SJjJWEqLh" rel="nofollow">https://hackmd.io/@qxes4210/SJjJWEqLh

Python 中文交流

29 Feb 2024 03:40

gitee的插件应该是方便拉去gitee的仓库吧，不具备在线编辑的能力

Python 中文交流

26 Feb 2024 09:55

你可以试试检查一下执行的任务，有的任务因为上下文依赖无法并行，从而无法分配给多个工作者。

Python 中文交流

26 Feb 2024 09:48

哦，那为啥executor只有一个在跑呀

Python 中文交流

26 Feb 2024 09:45

还是要改换什么办法呢，就是说改一下方式。

我是一个mac笔电 一个windows电脑，想要2个executors一起跑

Python 中文交流

26 Feb 2024 09:42

spark操作的不是DataFrame吗？和文件路径有什么关系？

Python 中文交流

26 Feb 2024 09:38

两边都可以读取，但spark这边这么操作才能让2个executors一起跑

Python 中文交流

26 Feb 2024 09:36

Mac 这边可能需要其他处理，我没有Mac，不好说

Python 中文交流

29 Feb 2024 08:01

https://frostming.com/2019/11-18/python-setup/

Python 中文交流

29 Feb 2024 07:54

/channel/pythonzh/314394

Python 中文交流

29 Feb 2024 07:35

又干掉一个！
Samue2 已被封禁。

Python 中文交流

29 Feb 2024 05:03

https://frostming.com/2019/03-13/where-do-your-packages-go/

Python 中文交流

29 Feb 2024 04:51

AI發展日新月異，覺得應該會有更好用的東西，哈哈

Python 中文交流

29 Feb 2024 04:48

当然很多人喜欢相对功能性更强一些的东西。。

Python 中文交流

29 Feb 2024 04:43

以前會用anaconda但是有碰到相容性的問題

Python 中文交流

29 Feb 2024 04:42

python環境控制套件，大家目前最推薦開發的時候用什麼套件控管

Python 中文交流

26 Feb 2024 16:48

大佬 hdfs我先安装看看哦，这个hdfs安装还是个问题，我现在再研究

Python 中文交流

26 Feb 2024 09:50

分任务的时候不给 mac的executor分，88.5 是mac的，他只是给本地windows分

Python 中文交流

26 Feb 2024 09:46

文件只需要读取一次，得到io对象后，路径就不需要了。两个主机需要共享的应该是DataFrame而不是文件路径。

Python 中文交流

26 Feb 2024 09:43

是的，path 要怎么定义。

路径，如果我在windows用windows的路径，executor只有一个，我想2个

Python 中文交流

26 Feb 2024 09:39

同样也是将smb挂载到文件夹上 直接操作文件

Python 中文交流

26 Feb 2024 09:38

mac的工作者无法读取parquet文件是吗？

Python 中文交流

26 Feb 2024 09:34

Windows 已经帮你处理好 smb 协议了，对于用户来说 直接操作文件就可以了