ITPub博客

首页 > 数据库 > SQL on Hadoop

关于 “SQL on Hadoop” 的内容如下:

  • Hive-1.1.0-cdh5.7.0安装部署

    Hive-1.1.0-cdh5.7.0安装部署

    13545163656 SQL on Hadoop 545 2018-06-03 15:42
  • 通关TPC-DS,中国数据库领域首破纪录诞生!

    “不服跑个分?”是一个老梗了。虽然,我们不能盲目崇信跑分,但跑分的确是一种比较直观反映软硬件性能的方式。不过,相比手机跑个分,数据库性能测试却要复杂的多……

    老鱼笔记 SQL on Hadoop 3265 2018-05-15 09:02
  • sh调用sh(串行和并行调度)

    sh调用sh(串行和并行调度)

    blt32034 SQL on Hadoop 2046 2018-05-07 14:48
  • 创建sh调用hive程序

    创建sh调用hive程序

    blt32034 SQL on Hadoop 1310 2018-05-07 14:39
  • hive程序脚本样本

    hive程序脚本样本

    blt32034 SQL on Hadoop 1647 2018-05-07 14:23
  • sqoop同步hdfs到关系库

    sqoop同步hdfs到关系库

    blt32034 SQL on Hadoop 916 2018-05-07 14:08
  • Figma 到 Qt 1.1:实时测试设计,随处交付

    在开发者构建之前,先在 Live Preview 中点击、拖拽并调整你的设计。将相同的工作流交付到旗舰触摸屏和微控制器上。并让你绘制的更多内容以原生 QML 形式返回。 你的设计在到达产品时,应当与你精心打造的样子完全一致,减少来回沟通,把更多时间留给真正重要的体验。这正是 Figma to Qt 的用途。它是一个内置于 Figma 的助手,帮助你在不离开画布的情况下设计 Qt 应用程序。全新的 1.1 版本更进一步。 此版本将 Live Preview 变成一个可以真正测试和把玩作品的地方,把 Figma to Qt 带到微控制器项目,并在设计内容上给予你更多自由。结果很简单:你在 Figma 中设计的更多内容,能够以你想象的方式到达设备。

    ITPUB社群 SQL on Hadoop 0 1970-01-01 08:33
  • 如何成为10倍数据科学家,第1部分 - KDnuggets

    博客热门文章关于 主题 AI 职业建议 计算机视觉 数据工程 数据科学 语言模型 机器学习 MLOps NLP 编程 Python SQL 数据集 活动 资源 速查表 推荐 技术简报 广告 10倍开发者是指生产力是平均水平10倍的人。我们借鉴开发者社区的建议和技巧,帮助您成为更精通的数据科学家,受到团队成员和利益相关者的喜爱。 作者:Stephanie Kim,Algorithmia。 最近我在PyData Seattle发表演讲,讲述如何通过借鉴开发者社区的建议和技巧来提升您的数据科学技能。这些建议将帮助您成为更精通的数据科学家,受到团队成员和利益相关者的喜爱。 这篇文章分为五个部分,包括: 10倍开发者的历史和争议。 项目设计。 代码设计。 工作工具。 模型生产化。

    ITPUB社群 SQL on Hadoop 0 1970-01-01 08:33
  • 亚洲数据中心淘金热遇阻

    投资 数据中心选址 数据中心建设 商业 新闻 Firmus 和 PLDT 本周撤回数据中心 IPO,同时多国政府暂停开发,成为亚洲数据中心热潮面临的最新障碍。 亚太地区繁忙的数据中心部署遭遇了一系列减速带。迄今为止最引人注目的是澳大利亚公司 Firmus 周五计划中的 71 亿澳元(49.7 亿美元)IPO 告吹,该 IPO 原本预计将成为自 1997 年 Telstra IPO 以来澳大利亚证券交易所最大规模的上市。 据《金融时报》报道,Firmus 是一家 neocloud 公司,其股东包括 Blackstone、Jane Street 和 Nvidia。该公司周五撤回了在澳大利亚证券交易所的上市申请,并表示将寻求通过私募融资最多 30 亿美元。

    ITPUB社群 SQL on Hadoop 0 1970-01-01 08:33
  • 决策树在大数据集上的局限性

    这是一个组合搜索问题:在每次分裂时,我们希望找到能带来“最佳性价比”的特征(即最大化信息增益)。如果我们选择“暴力”方法,计算复杂度为 O(m^2),其中 m 是训练集中的特征数量;对于 n 个训练样本,复杂度为 O(n^2)(我认为运气好的话可以是 O(n log(n)))。 让我们看一个简单的数据集,Iris(150 朵花,3 个类别,4 个连续特征)。在每次分裂时,我们必须重新评估所有 4 个特征,并且对于每个特征,我们必须找到最佳的分裂值,例如,萼片长度

    ITPUB社群 SQL on Hadoop 2 1970-01-01 08:33
  • 大规模学习:FreeBSD 基金会实习生 Nimish Jain 探索 FreeBSD 代码库 | FreeBSD 基金会

    对于Nimish Jain来说,这个夏天参与FreeBSD的工作意味着近距离观察他长期以来一直好奇的事情:大型、复杂的软件是如何协同工作的。 “我一看到‘FreeBSD’这个词,就决定必须申请,”他说。 这个决定让他度过了一个在操作系统多个领域工作的夏天,向经验丰富的FreeBSD贡献者学习,并看到自己的代码进入了一个被全世界使用的项目。 Nimish并不记得有某个特定时刻激发了他对系统编程的兴趣。相反,这种兴趣源于他对软件更广泛的好奇心。 “我一直好奇大型软件是如何协同工作来完成一项任务的,”他说。 这种好奇心,加上他使用FreeBSD的经验,让基金会的实习项目立刻脱颖而出。这次实习也让Nimish有机会参与项目的多个领域。

    ITPUB社群 SQL on Hadoop 1 1970-01-01 08:33
  • 互联网的密钥将于2026年10月11日更换。你准备好了吗?

    Sebastiaan Neuteboom 和 James Godlewski 2026年10月11日,DNS 根区计划进行有史以来第二次密钥签名密钥(KSK)更换。该密钥是 DNSSEC 信任链的锚点,使 DNS 解析器能够使用加密签名验证应答的真实性。这一变更称为 KSK 轮换。验证型解析器需要在切换前信任新密钥,否则原本正常的网站可能变得无法访问。 当我们在 2018 年撰写关于首次根区 KSK 轮换的文章时,我们发现解析器在软件升级或跨机器迁移过程中会丢失对新密钥的已学习信任。提前发布密钥只是工作的一部分。我们还需要知道解析器是否保留了该密钥,而当时我们无法为用户提供一种实用的检查方式。 大多数网站运营者无需为此次轮换做任何更改。

    ITPUB社群 SQL on Hadoop 1 1970-01-01 08:33
  • 每秒超过 7 亿个事件:我们如何理解海量数据

    Constantin Pan 和 Jim Hawkridge Cloudflare 的网络为客户提供了大量服务。我们以事件日志和聚合分析的形式收集相关数据并将其交付给客户。截至 2024 年 12 月,我们的数据管道每秒摄取高达 7.06 亿个由 Cloudflare 服务生成的事件,这代表自我们 2018 年数据管道博客文章以来增长了 100 倍。 在峰值时,我们每秒传输 107 GiB 的压缩数据,要么直接推送给客户,要么进行额外的排队和批处理。 所有这些数据流为 Logs、Analytics 和计费等产品提供支持,也为其他产品提供支持,例如训练用于机器人检测的机器学习模型。本博客文章重点介绍我们用于高效且准确地处理为 Analytics 产品摄取的大量数据的技术。

    ITPUB社群 SQL on Hadoop 1 1970-01-01 08:33
  • EBS 的真实故障率 — PlanetScale

    Nick Van Wiggeren [ @ NickVanWig ] | 2025年3月18日 PlanetScale 已在全球范围内部署了数百万个 Amazon Elastic Block Store (EBS) 卷。我们每天创建和销毁数万个卷,为客户搭建数据库、进行备份以及端到端测试我们的系统。通过这些经验,我们对 EBS 的故障率和故障机制有着独特的视角,并花费了大量时间研究如何缓解这些问题。 在复杂系统中,故障并非二元结果。云原生系统的构建不存在单点故障路径,但部分故障仍可能导致性能下降、面向用户的可用性丧失以及未定义行为。通常,堆栈中某一环节的轻微故障会在其他环节表现为完全故障。 例如,如果多节点分布式缓存系统中的某个实例耗尽了网络资源,下游应用程序会将错误情况解释为缓存未命中,以避免请求失败。

    ITPUB社群 SQL on Hadoop 10 1970-01-01 08:33
  • pgFormatter v5.9 已发布

    关于 治理 政策 功能矩阵 捐赠 历史 赞助商 贡献 财务 服务器 最新新闻 即将举行的活动 过往活动 新闻 许可证 坦桑尼亚达累斯萨拉姆 - 2025年12月21日 pgFormatter,即使并不完美,也是专为 PostgreSQL(开源关系型数据库) 打造的最先进的 SQL 和 PlPgsql 代码格式化与美化工具。它提供 CLI 或 CGI 程序形式。 此版本增加了多项格式化改进,并修复了自上次发布以来用户报告的若干问题。 主要改进: 修复 JOIN 格式化中的若干问题。 修复 RAISE EXCEPTION ... USING 后的缩进。 修复带变量赋值的 CASE 语句中的错误格式化。 添加 CI 操作以在提交推送时测试 pgFormatter 修复美元引号符号作为字符串分隔符时紧贴单词的情况。

    ITPUB社群 SQL on Hadoop 3 1970-01-01 08:33
  • 在FreeBSD上使用Sanoid实现ZFS自动快照 | FreeBSD基金会

    多年来,OpenZFS 在 FreeBSD 上一直是一等公民。从安装程序开始,用户就可以安装完整的 root-on-ZFS 系统。FreeBSD 会为基础操作系统创建必要的数据集,包括 /usr、/var 和 /home 的数据集。 如果灾难降临导致文件丢失,ZFS 可以通过回滚到之前的快照来恢复数据——前提是该数据集存在快照。缺失的功能是定期自动创建快照并轮换它们。轮换意味着根据用户定义的策略删除较旧的快照。这避免了数据集随时间推移被数百万个快照填满。虽然 OpenZFS 提供了创建和删除快照的所有基本命令,但用户需要自行管理快照计划。这意味着每个数据集应该多久创建一次快照,以及删除它们的规则是什么。 多年来,程序员们创建了提供这种自动快照功能的独立解决方案。

    ITPUB社群 SQL on Hadoop 2 1970-01-01 08:33
  • FreeBSD 上实现更好 Wi-Fi 之路 | FreeBSD 基金会

    FreeBSD 在可靠性和坚如磐石的稳定性方面的声誉是当之无愧的。但在 Wi-Fi 方面,它的历程则更为坎坷。多年来,用户一直在与缓慢的速度和过时的默认设置作斗争。 这一直是一个长期存在的痛点。好消息是?情况已不再如此。 截至 2025 年,FreeBSD 的 Wi-Fi 支持正在经历多年来最重大的改革之一。开发者正在积极致力于实现从 Linux 轻松移植现代驱动程序,包括 iwlwifi 驱动。这项工作将极大改善对近期 Intel 无线芯片组的支持——这是迈向更广泛笔记本电脑兼容性的重要一步。 与此同时,核心 net80211 无线协议栈正在更新,以支持 WPA3 等更新协议以及即将到来的 802.11 标准。这些变化正在使 FreeBSD 无线网络的基础设施现代化。

    ITPUB社群 SQL on Hadoop 1 1970-01-01 08:33
  • 在PlanetScale上通过工作流引入分片 — PlanetScale

    博客 | 产品 | Vitess Ben Dicken [ @ BenjDicken ] | 2024年11月7日 我们刚刚发布了新的工作流功能,它为您提供了一系列预定义的步骤配方,用于在数据库上执行操作。我们的第一个工作流使您能够通过将表移动到分片键空间来水平扩展数据库,所有这些都可以在 PlanetScale 仪表板内完成。 如果您熟悉 Vitess,这个第一个工作流类似于 MoveTables,这是 Vitess 中管理数据分布的关键组件。我们很高兴现在能在 PlanetScale 中直接提供此功能。 工作流功能在所有 PlanetScale 计划中均可使用。 在 PlanetScale,我们的目标是成为运行关系型数据库最可靠和可扩展的平台。

    ITPUB社群 SQL on Hadoop 4 1970-01-01 08:33
  • 使用 Markdoc 个性化你的入门引导 — PlanetScale

    Ayrton | 2023年10月6日 我们最近为 PlanetScale 发布了一个全新且改进的入门引导流程。我们新入门引导的目标是帮助开发者快速连接并查询他们的 PlanetScale 数据库。 连接方式因应用程序使用的语言和框架而异。每个框架都有细微的差异,因此对我们来说,无论你的应用程序使用什么语言/框架,都能为你提供一条单一路径来完成连接,这一点非常重要。 构建这个入门引导的关键是 Markdoc。本文将更详细地介绍我们如何使用 Markdoc 构建产品入门引导。 Markdoc 由 Stripe 创建,是一种基于 Markdown 的语法,用于创建自定义文档站点。 我们在 PlanetScale 能够如此快速交付的原因之一,是我们优先使用易于上手的工具,让公司中的任何人都能做出贡献。

    ITPUB社群 SQL on Hadoop 5 1970-01-01 08:33
点击加载更多下一页

成为大咖

联系我们
itpub
help@itpub.net
ITPUB-饶
扫描二维码联系客服
关于• 广告服务• 使用条款
京ICP备16024965号
经营性网站备案信息
网络110报警服务
中国互联网举报中心
北京互联网违法和不良信息举报中心

关注公众号获取更多技术文章