#wechat-sync-venus
- w
WeChat-Sync
03/10/2023, 3:18 AM🆎 只打鱼不晒网:
我们的元数据中 是没有 hive_spark的这个 ? - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
应该是个子图吧，总不至于直接拎一整个库出来改吧。 - w
WeChat-Sync
03/10/2023, 3:18 AM😣 程训焘:
「长风：有没有语句能查询当前图有多少个节点的？」 - - - - - - - - - - - - - - - https://docs.nebula-graph.com.cn/3.4.0/3.ngql-guide/7.general-query-statements/6.show/14.show-stats/ - w
WeChat-Sync
03/10/2023, 3:18 AM🍭 NebulaGraph 讨论群 · Venus:
"明"与群里其他人都不是朋友关系，请注意隐私安全 - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
「只打鱼不晒网：这种情况下 参数应该怎么写啊」 - - - - - - - - - - - - - - - 我记得我看二点几的exchange源码，里面这四个配置的读取是写死的 - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
你的spark集群能直接访问hive就没必要搞这些配置，说明你们spark集群的配置文件里有hive相关的配置了，代码里配置优先级大于配置文件的，所以你可以先把这部分配置去掉试试看 - w
WeChat-Sync
03/10/2023, 3:18 AM🕖 ZGT:
「程训焘：这种玩法扩展性很差，数据量大了就不行了，除非你不考虑扩展性」 - - - - - - - - - - - - - - - 感谢大佬，请问大佬有没有一些推荐的nebula使用的案例？这种架构可能确实有点粗糙，但是暂时也不知该咋改进了 - w
WeChat-Sync
03/10/2023, 3:18 AM👆 长风:
有没有语句能查询当前图有多少个节点的？ - w
WeChat-Sync
03/10/2023, 3:18 AM🍛 张hanwen:
问一下各位大佬，怎么今天登不上studio了，账号密码都是对的啊，显示ErrBadRequest: 1002Create session failed: Unknown error! - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
但是具体实践我也没做过[吃瓜] - w
WeChat-Sync
03/10/2023, 3:18 AM🕖 ZGT:
[收到了一个表情，请在手机上查看] - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
是个子图可以读到缓存里，拿个图框架存着做可视化，用户的修改你可以存下来（不管什么方式，持久化mysql也行，做个小git那种可以回退的也行），然后最后入库直接把最终修改映射到nebula里，哪些要删哪些要加。内存里的直接丢了也行或者你看办法能不能复用。 - w
WeChat-Sync
03/10/2023, 3:18 AM🆎 只打鱼不晒网:
这样是能连接到的 - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
你可以改一下这块代码遍历hive site的配置文件全读到sparksql的配置里 - w
WeChat-Sync
03/10/2023, 3:18 AM🆎 只打鱼不晒网:
还是报这个 - w
WeChat-Sync
03/10/2023, 3:18 AM🆎 只打鱼不晒网:
把那部分配置 去掉了 - w
WeChat-Sync
03/10/2023, 3:18 AM👆 长风:
MATCH (v) RETURN count(v); - w
WeChat-Sync
03/10/2023, 3:18 AM🆎 只打鱼不晒网:
好像也没找到 - w
WeChat-Sync
03/10/2023, 3:18 AM🤠 织寒:
官方这个配置是用的jdbc连的，你把这些配置去了看能不能跑，把hivesite文件丢到spark的conf里，如果你们的spark集群和hive的是隔离的，我不清楚官方后面的版本有没有加强这部分，我是改了代码把整个hive site配置读进去了 - w
WeChat-Sync
03/10/2023, 3:33 AM🤠 织寒:
频繁修改而且数据量不大你可以试试用一些内存图框架在内存保存@ZGT - w
WeChat-Sync
03/10/2023, 3:33 AM🤠 织寒:
@ZGT Java可以考虑guava的graph frame，官方说能搞个个几百万的点边 - w
WeChat-Sync
03/10/2023, 3:33 AM🤠 织寒:
@ZGT 入完库之后还会再修改吗？ - w
WeChat-Sync
03/10/2023, 3:33 AM🤠 织寒:
@ZGT 你们数据量大吗 - w
WeChat-Sync
03/10/2023, 3:33 AM📐 :
「只打鱼不晒网：[文件]新建文本文档.txt」 - - - - - - - - - - - - - - - @织寒 麻烦您了 - w
WeChat-Sync
03/10/2023, 3:33 AM🔩 赵天增:
一个简单的例子 - w
WeChat-Sync
03/10/2023, 3:33 AM🔩 赵天增:
「赵天增：[图片]」 - - - - - - - - - - - - - - - 类似这个语句，我要先跑一边查询，然后发现出来的结果是这样的，然后再去写后面的处理逻辑 - w
WeChat-Sync
03/10/2023, 3:33 AM🤠 织寒:
但是真的巨慢 - w
WeChat-Sync
03/10/2023, 3:33 AM🔩 赵天增:
就是我得先验证我的结果 - w
WeChat-Sync
03/10/2023, 3:33 AM🔩 赵天增:
逃脱不了就是我要先跑一边查询语句，然后看一下结果格式是不是符合预期，然后再解析 - w
WeChat-Sync
03/10/2023, 3:33 AM🔩 赵天增:
嗯，是要提前知道的，但是这个“知道”的代价有点繁琐