ITPub博客

首页 > 大数据

关于 “大数据” 的内容如下:

  • 星环科技语义补全Agent:百万字段,从"数据天书"到智能注释

    星环资产挂载 Agent 是基于编目体系的智能资产上架引擎,可通过分析表名、注释、字段等元数据信息,自动匹配最合适的资产目录,实现数据表的编目挂载与一键上架。相比传统人工逐表理解、手动找编目的方式,Agent 支持批量匹配、在线审核、结果编辑与一键推送至 TDS,帮助企业提升数据运营效率,降低人工成本,让数据上架从“逐表人工”走向“批量智能”。

    星环科技 数据挖掘 1183 2026-06-22 15:28
  • 1688商品详情API接口:跨境采购实战全解

    一、先说结论跨境采购用1688 API,核心就三件事:用alibaba.product.get拿商品详情,用alibaba.item.get拿完整SKU,再用alibaba.item.get.specifications拿跨境属性(重量/体积)算物流成本。签名做错是90%失败的根源,必须严格按HMAC-MD5来。二、跨境采购为什么必须用API场景手动操作API调用批量选品(100个SKU)逐个点开

    万邦科技Lafite 数据分析 1231 2026-06-22 14:50
  • 别被技术唬住!产品经理懂点API,真的能少背锅

    一、到底啥是API?别被“应用程序编程接口”这种词吓到。说白了,API就是研发提前封装好的“标准化交互入口”。服务商把复杂的底层代码和业务逻辑都写好了,只对外开个口子。我们不需要懂源码,只要按规范传参数,就能直接调取数据。打个比方:数据库就像一杯密封的果汁,你没法直接把手伸进去喝。API就是那根插在杯子上的吸管。所有系统想拿数据,都得通过这根吸管,它是唯一的数据通道。有了它,系统A想复用系统B的功

    Lottie 数据分析 1145 2026-06-22 11:29
  • 正面吊集装箱号智能识别 高精度无人化采集解决方案

    正面吊智能识别集装箱号,是搭载AI深度学习+OCR光学字符识别的港口智能化采集方案,硬件搭载于集装箱正面吊吊臂、驾驶室前端,在集装箱起吊、移位动态作业中,全自动捕捉、解析集装箱标准箱号、箱型代码、ISO校验码,全程无需人工手持登记、近距离抄号,是堆场、码头自动化改造的核心基础设备。传统模式下,司机或现场人员需近距离目视记录箱号,高空作业存在安全风险,人工疲劳极易出现错记、漏记;智能识别方案直接替代

    深圳华明视讯科技 数据分析 1113 2026-06-22 11:04
  • Shopee 商品数据高效抓取:请求与缓存校验 3 大核心

    一、URL 结构与 ID 快速提取Shopee 全球所有站点采用完全统一的商品 URL 设计,无需针对不同地区单独适配解析逻辑,这是实现批量自动化抓取的基础。1.全球通用 URL 格式标准商品 URL 结构:代码语言:BashAI代码解释https://{地区代码}.shopee.com/product/{店铺ID}/{商品ID}常见地区代码:tw (中国台湾)、sg (新加坡)、my (马来西亚

    ob_Alan 数据分析 494 2026-06-18 17:29
  • 基于自研 HT 引擎数字孪生港珠澳大桥综合管理实现方案

    港珠澳大桥全长 55km,作为世 界级跨海集群工程,具备投资规模大、跨三地协同管理、海洋高盐高湿复杂环境、海量结构传感监测、多业务数据异构融合等业务痛点。传统可视化方案普遍存在 2D 组态与 3D 场景引擎割裂、依赖第三方 GIS / 图表渲染插件、多终端适配差、海量传感数据实时渲染性能瓶颈等问题,无法满足大桥全生命周期一体化运维管控需求。本项目全程采用图扑软件自主研发 HT for Web 图形

    一只物联网鲸鱼 可视化 1280 2026-06-18 15:20
  • 京东商品信息批量获取实战指南(2026最新版)

    一、先选对接口:两条路,别走错京东联盟接口 jd.union.open.goods.detail.query京东开放平台 jingdong.item.read.get适用场景选品分析、比价工具、CPS推广商家自有ERP、店铺数据同步门槛低,个人/企业均可高,需企业认证+店铺授权价格✅ 到手价/券后价/佣金✅ 原价/会员价/成本价销量✅ monthSales 月销量✅ 更细粒度的销售数据SKU✅ 规

    万邦科技Lafite 数据分析 1306 2026-06-18 15:12
  • 百分点科技大模型应急数据治理方案获评信创典型

    近日,2026信息技术应用创新发展大会在山东举办,会上正式发布了2025年信息技术应用创新解决方案征集工作成果。百分点科技“基于大模型的应急数据治理解决方案”成功入选。本次征集工作由工信部信息技术发展司指导,工信部网络安全产业发展中心联合地方主管部门及行业用户共同开展,旨在遴选技术水平先进、应用示范效果突出的标杆案例。此次入选,标志着百分点科技在应急管理领域的技术能力与信创实践成果获得权威认可,进

    搬砖头的 数据分析 1190 2026-06-18 14:45
  • SpringBoot API参数校验

    一、核心说明本文整理了SpringBoot项目开发中,API参数校验最核心的三项实战能力,均为企业项目通用落地方案。内容精简实用,无冗余理论,包含可直接上线使用的完整代码、开发规则、易错点及统一返回规范,适配日常开发、功能迭代及接口标准化整改场景。三大核心:请求体Body自动化校验、查询参数Query自动化校验、全局统一错误返回格式1.必备前置依赖SpringBoot2.3+ 必须手动引入,提供所

    ob_Alan 数据分析 3663 2026-06-18 09:16
  • Apache DolphinScheduler 新手指南:手把手教你创建第一个工作流!

    在本文中,我们将使用 Apache DolphinScheduler 逐步创建和运行一个简单的工作流。在这段旅程中,你将学习 DolphinScheduler 的基本概念,并了解运行工作流的最基本配置。我们在本教程中提供了视频和文字两种方式,你可以选择喜欢的方式。设置 Dolphinscheduler在继续之前,你必须先安装并启动 DolphinScheduler。对于初学者,我们建议使用官方 D

    DolphinScheduler 数据挖掘 854 2026-06-17 18:21
  • MySQL 元数据库 Docker Compose 部署 Apache DolphinScheduler 3.1.9 集群实战

    今天我们将深入探讨一个备受关注的话题:如何使用MySQL元数据库,通过 Docker Compose 快速部署Apache DolphinScheduler 3.1.9 集群。

    DolphinScheduler 数据挖掘 856 2026-06-17 18:03
  • 京东商品详情 API (V1)

    京东商品详情 API (V1)

    tbapi 数据挖掘 786 2026-06-17 17:49
  • API 接口缓存策略:Redis 在 API 优化中的应用

    在高并发Web服务与接口开发场景中,数据库高频查询、重复参数请求、静态数据反复加载是导致API响应延迟、服务器负载过高的核心问题。Redis作为高性能内存数据库,凭借毫秒级读写、多数据结构支持、高并发适配性强的核心优势,成为API接口性能优化的核心解决方案。合理落地Redis缓存策略,可大幅降低数据库QPS、压缩接口响应时长、提升系统吞吐量与运行稳定性。本文摒弃模板化表述,结合一线生产业务场景,整

    ob_Alan 数据分析 806 2026-06-17 16:41
  • 星环科技数据血缘Agent,让数据的每一步流转都有迹可循

    传统数据血缘管理面临人工追溯耗时、文档滞后、ETL 脚本解析盲区等痛点。Astro 数据血缘 Agent 凭借 SQL + ETL 双引擎,实现表级与字段级的自动化、双精度解析,全面兼容主流数据库及五种常用 ETL 工具。系统打通了从“自动解析”到“工单治理”的闭环,并支持自然语言多轮对话查询,助力企业高效掌控全局数据链路。

    星环科技 数据分析 1181 2026-06-17 16:19
  • 基于 SeaTunnel 与 DolphinScheduler 实现 MySQL 到 Doris 离线定时增量同步

    本次演示将结合 Apache SeaTunnel 与 Apache DolphinScheduler,实现一个典型的离线增量同步场景:通过 DolphinScheduler 获取目标端同步位点,并将该位点作为参数传递给 SeaTunnel,从而实现 MySQL 到 Doris 的增量数据同步。

    SeaTunnel 数据分析 1365 2026-06-17 15:55
  • 从学生贡献者到 Apache SeaTunnel Committer:Doyeon Kim 的开源成长之路

    本次演示将结合 Apache SeaTunnel 与 Apache DolphinScheduler,实现一个典型的离线增量同步场景:通过 DolphinScheduler 获取目标端同步位点,并将该位点作为参数传递给 SeaTunnel,从而实现 MySQL 到 Doris 的增量数据同步。

    SeaTunnel 可视化 1137 2026-06-17 15:31
  • 技术视角 vs 销售视角:自研接口的 5 个核心痛点分析

    今天上午刚送走一个客户,他临走前掐着烟跟我说的一句话,我到现在都记得:“早知道三年前就找你们买接口了,这三年砸进去的冤枉钱,够买你们十年服务还带送两年技术支持。”作为一个从后端开发转做数据接口销售的人,我每天都在跟各行各业的技术负责人、老板打交道。亲眼看着这个行业的风向彻底转了:早些年,十个客户里有九个会拍着桌子说 “数据是核心资产,必须自研”;现在呢?从几个人的创业团队到几百人的中型公司,甚至一

    ob_Alan 数据分析 827 2026-06-16 17:15
  • 1688商品详情API实战总结(跨境数据采集项目复盘)

    1688商品详情API实战总结(跨境数据采集项目复盘)

    tbapi 数据挖掘 1202 2026-06-16 14:14
  • taobao.item_search API:精准关键字搜索的技术全景

    taobao.items.search(也写作 taobao.item_search)是淘宝开放平台提供的商品检索标准化接口,核心能力是通过关键字精准匹配商品,并支持多维度筛选与智能排序。以下是完整的技术解析。一、接口核心能力能力说明精准关键字匹配基于 NLP + 深度学习,支持同义词/近义词识别,输入有微小差异也能命中目标商品多类型搜索除文字外,还支持图片搜索、语音搜索、扫码/条形码搜索智能排序

    万邦科技Lafite 数据分析 1229 2026-06-16 14:03
  • 2026 SelectDB AI 产品发布会:Agent Native 数据基础设施能力全景发布

    2026 年 SelectDB AI 产品发布会圆满举行。本次发布会聚焦 Agent 时代下数据分析基础设施的全新变化,围绕极速分析、多模数据统一管理、Agent Native、Agent Observability 以及 Serverless 弹性架构等方向,系统展示了 SelectDB 面向 AI 与 Agent 场景的最新产品演进。发布会吸引了 3 万余名开发者、架构师及企业用户在线观看,共

    SelectDB 数据分析 1215 2026-06-15 18:10
点击加载更多下一页

成为大咖

联系我们
itpub
help@itpub.net
ITPUB-饶
扫描二维码联系客服
关于• 广告服务• 使用条款
京ICP备16024965号
经营性网站备案信息
网络110报警服务
中国互联网举报中心
北京互联网违法和不良信息举报中心

关注公众号获取更多技术文章