spark共74篇
排序
Spark 凭什么成为最火的大数据计算引擎？| 极客时间
原标题：Spark 凭什么成为最火的大数据计算引擎？| 极客时间 现在，几乎所有公司都离不开推荐、广告、搜索这 3 类业务场景，因此 Spark 也相应成了大多数互联网公司的标配： 美团在 2014 年就引...
11个月前
YARN资源分配，没有比这说的更清楚的了
让你彻底搞明白YARN资源分配 - 知乎 (zhihu.com)本篇要解决的问题是：Container是以什么形式运行的？是单独的JVM进程吗？YARN的vcore和本机的CPU核数关系？每个Container能够使用的物理内存和虚...
1年前
AI大模型团队Colossal-AI破局创新，火热招募中！
公司简介 潞晨科技致力于解放 AI 生产力，通过高效多维并行、异构内存管理、大规模优化库、自适应任务调度等自研技术，打造面向大模型时代的通用深度学习系统 Colossal-AI ，高效促进 AI 大模型...
11个月前
与 Hadoop 对比，如何看待 Spark 技术？
Hadoop 首先看一下Hadoop解决了什么问题，Hadoop就是解决了大数据（大到一台计算机无法进行存储，一台计算机无法在要求的时间内进行处理）的可靠存储和处理。HDFS，在由普通PC组成的集群上提供...
1年前
Spark: 基本架构及原理
Spark(一): 基本架构及原理 Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hado...
1年前
大数据开发：Hadoop、Spark、Flink三大框架对比
目前来说，大数据领域最为活跃的三个计算框架，当属Hadoop、Spark以及Flink这三者。三个框架在不同的大数据处理场景当中，表现各有优势，因此也常常被拿来做比较。今天我们也来做个对比，看看Ha...
11个月前我的面板
看一看
算法基础：五大排序算法Python实战教程
本文为 AI 研习社编译的技术博客，原标题 ： A tour of the top 5 sortin 本文为 AI 研习社编译的技术博客，原标题 ： A tour of the top 5 sorting algorithms with Python code 作者 |George ...
11个月前揭秘AI绘画 怎么把真人照片画成二次元人物？为找刺激，女子给自己注射黑寡妇蜘蛛，心率飙升188，结果如何？
AI绘画的“小秘密”都在这一篇文章里 【怎么把真人照片画成二次元人物？为何会“翻车”将猫狗画成人？】 ◎本报记者 金 凤 有了AI，人人都可以是艺术家。AI绘画的出现，恰如瑞士艺术家保罗·克...
11个月前
我的Threejs起步笔记
本文章收录在黑鲸智能系统知识库 -黑鲸智能系统知识库成立于2021年，致力于建立一个完整的智能系统知识库体系。我们的工作：收集和整理世界范围内的学习资源，系统地建立一个内容全面、结构合理...
11个月前
Meitu靠AI绘画爬榜，但广告投放只是加成眉毛长的人会更长寿？50岁后眉毛变长，是好事还是坏事？不妨了解
前有 ChatGPT 5 天拿下了 100 万用户，后有图片/视频 App Lensa 日流水超过 TikTok，登顶美国畅销总榜，根据点点数据，Lensa 的全球日流水超过了百万美金。 Lensa 12 月 7 日日流水破百万美金|...
11个月前
GitLab 13.7，增加MR审阅者，部署失败时自动回滚等功能
12月22日距离平安夜还有两天，距离新年还有一周多点，又到Gitlab发版的日子了。这次发布的版本是Gitlab 13.7，虽然和日常的功能略少点，但是也包括了45项功能和改进，详细的功能请和虫虫一道学...
11个月前
2023年北京科技周闭幕 对话模型ChatGLM、元宇宙、航天科普等最受关注从国民女神，到央视“查无此人”，50岁董卿，如今也塌房了？
5月31日，2023年北京科技周闭幕式在城市副中心绿心活力汇举行。千亿参数的对话模型ChatGLM、单孔腔镜手术机器人、元宇宙虚拟场景展示、航天科普展项等成为科技周最受关注展项。 相关负责人介绍...
11个月前
