产业链大数据平台方案
星环大数据基础平台(TDH) 是星环自主研发的一站式多模型大数据基础平台,包括多个大数据存储与分析产品,能够存储 PB 级别的海量数据,可以处理包括关系表、文本、时空地理、图数据、文档、时序、图像等在内的多种数据格式,提供高性能的查询搜索、实时分析、统计分析、预测性分析等数据分析功能。目前 TDH 已经在政府、金融、能源、制造业等十多个行业内落地,支撑如金融风控与营销、智慧制造、城市大脑、智慧交通等多种核心行业应用。
产业链大数据平台方案 更多内容
平台的定位二、天士力全产业链的业务版图三、利用星环大数据平台打通全产业链四、为什么选择星环五、产品追溯手机版演示感谢大家,非常荣幸能参加星环大数据行业大会。感觉我们还是很庆幸的,选择了与星环合作。其实我,数字创新的想法就是技术改变世界。第二块业务叫中药材,中药材它不属于天士力的业务,严格意义上讲,它是产业链中的一个平台。信息大数据平台的定位不知道大家了解不了解天士力,大家可能会认为天士力就是一家生产复方,有一个定位就是信息大数据的创新平台,这是由一个团队来做的,服务于这200多家,致力于把整个产业链做一个穿透。再说一下这个团队的定位,这个团队不隶属于某一个企业,它隶属于一个集团和行业。这个团队的定位,整个从种药一直到药的入口,它是涵盖了整个全产业链。利用星环大数据平台打通全产业链全产业链的早期动态追溯。我们现在做的就是如何打通全产业链,如何利用星环的大数据平台构建一个全产业链。我们是用星环大数据这个大健康基金,搭建各个不同维度的平台。大家看到下面是专业系统,农事平台,信息平台,电商交易的平台,质检平台,还有仓储物流平台等等,后是大数据平台,贯穿了产业链的各个环节,在这个产业链上的任何一个业务

行业资讯
大数据平台构建与应用案例
分析工具Sophon和星环云课堂服务,从管理服务结构、终端布局设置、系统互联互通、垂直资源共享与管理功能覆盖五个层面搭建棉花生产全产业链的农业大数据应用云平台。平台分为三个部分,分别为大数据可视化展示增效、农产品竞争力提升和绿色农业的发展具有重要的现实意义。案例创新点针对新疆的棉花生产特色和区位优势,构建了我国首个覆盖从农业资源、农情监测、生产管理、农机调度、市场预测全产业链的棉花单品大数据平台决策不科学,农业资源利用率低;生产控制不精准,劳动强度大、先进装备少方面。解决方案平台构架采用“可视化展示平台+数据管理系统”的设计方法,利用星环科技大数据基础平台TDH、大数据开发工具TDS、智能棉花生产的智能化水平,实现棉花全产业链的健康高效可持续发展,是信息化时代加强和提升屯垦戍边能力的关键问题。面临的主要痛点体现在:农业数据采集困难、信息整合利用困难;农情信息监测不精确,时效性差;生产管理平台、大数据实时处理框架、数据标准化管理系统。集成农业资源、棉花生产、农业遥感、农业机械、棉花质量与市场信息等功能,整合大量分散的农业信息,为棉花生产提供全方位的服务。关键技术全生命周期数据治理技术通过

近日,艾瑞咨询发布了《2022年中国数据中台行业研究报告》,星环科技入选其“数据中台产业链生态图谱”。艾瑞咨询在报告中指出,数据中台是一种数字化综合解决方案。狭义来看,数据中台是一套实现数据资产化和服务复用的工具;广义来看,数据中台是一套运用数据推动企业数字化转型升级的机制和方法论。数据中台始于业务数据的沉淀积累,用于数据的收集、整合、分析及应用,循环往复,形成生态闭环。在大数据、云原生、人工智能等技术发展和企业数字化转型加速的双重驱动下,数据中台在多场景快速落地。作为一家企业级大数据基础软件开发商,星环科技很早就在数据中台领域布局,结合星环科技全系产品的相关组件实现数据中台能力建设。星环科技把数据中台建设归纳为三中心、六能力、两个体系,这当中都会有星环科技产品作为支撑,从而保证企业能够快速实现,并搭建起数据中台,满足企业未来发展变化。其中,三中心分别是存储中心、分析探索中心、业务赋能中心;六能力包括数据汇聚能力、数据整合能力、智能分析能力、实时计算能力、统一访问能力、统一服务能力;两个体系则是安全和运维保障体系与数据和分析支撑体系。三中心、六能力、两个保障体系都构建在一个云底座之上
.jpg)
近日,由江苏省人工智能学会承办的走进长三角·人工智能技术产业链研讨交流会在南京举办。来自政府、学术界、企业以及科技领域的专家学者等多方力量齐聚一堂,共同探讨人工智能技术在长三角地区的产业链上的应用与关键;三是坚持长期实践。当前AI大模型正深刻地影响着每个人的生活和所有行业的发展,重塑人与数据的交互方式。作为一家企业级大数据基础软件开发商,星环科技全面布局行业(领域)大模型发展,为行业用户提供大模型应用构建的全栈软件工具,包括大模型开发工具SophonLLMOps,承载多模态数据的向量数据库Hippo和图数据库StellarDB,业界首创的金融大模型“星环无涯”、大数据分析大模型SoLar“求索”等行业大模型,助力企业抓住大模型时代的新机遇。星环科技大模型解决方案包括融入了知识图谱、向量数据库、模型仓库和图数据库构成的知识语义层,与模型运行层、大语言模型、提示工程层、应用前端集成层协同,能够切实帮助用户创建大模型应用,让每个人都拥有个性化的AI助理。促进长三角企业与华中重点航空枢纽城市的交流,促进长三角人工智能技术企业落地鄂州,同时探讨人工智能与产业融合的新趋势,推动长三角地区产业智能化升级。孙煜华分享了关于数字化转型背景下人工智能技术的三个基本

行业资讯
大数据平台信创国产化
运行环境。加强企业合作,形成产业链协同发展的良好局面。大数据平台信创国产化涉及众多企业,从上游的硬件设备制造商、基础软件开发商,到下游的系统集成商、应用服务提供商,各企业之间应加强合作,实现资源共享、优势互补。(三)政策支持保驾护航政府出台的扶持政策对大数据平台信创国产化产业发展具有重要的引导和推动作用。政府应加大对信创产业的资金投入,设立专项基金,支持大数据平台相关企业的研发和创新。通过财政补贴,营造良好的创新环境。知识产权是企业创新的重要成果,保护知识产权能够激励企业加大研发投入,推动技术创新。政府应加强知识产权保护力度,完善知识产权法律法规,严厉打击侵权行为,维护企业的合法权益。建立健全知识产权评估和交易机制,促进知识产权的转化和应用,为大数据平台信创国产化产业的发展提供有力保障。信创浪潮下,大数据平台国产化的崛起与突破信创国产化:时代的必然选择在全球科技竞争日益激烈的当下,信息技术领域的自主可控已成为国家发展的关键所在,信创国产化也应运而生,成为时代发展的必然选择。信创,即信息技术应用创新,其核心在于实现信息技术领域的自主创新与国产化替代,涵盖从芯片、操作系统、数据库、中间件到应用软件的全产业链。信创国产化的首要意义在于保障国家信息安全。长期以来,我国在信息技术领域对

团队研发企业级大数据平台等基础软件产品,在实时计算、分布式事务、分布式计算、分布式存储等多方面做出重大革新,积极推动了大数据技术在中国的落地和实施。星环科技致力于打造企业级大数据基础软件,围绕数据全11月27日下午,徐汇区政协召开十五届十一次常委会会议,围绕“推动‘创新链、产业链、资金链、人才链’四链融合发展,打造科创核爆点”进行议政性协商。区政协党组书记、主席黄冲主持会议。区委副书记、区长钟生命周期提供基础软件与服务。自成立以来,星环科技一直坚持自主研发与技术创新,已形成大数据与云基础平台、分布式关系型数据库、数据开发与智能分析工具的软件产品矩阵。目前公司产品已经在金融、政府、能源、交通、制造等十几个行业应用落地,拥有超过1400家终端用户。智慧转化为具体工作举措。图片来源:徐汇政协微信公众号星环科技创始人兼CEO孙元浩受邀参加会议,围绕打造徐汇特色大模型产业高地,在会上作现场建言。图片来源:徐汇政协微信公众号星环科技创始人兼CEO孙元浩:第十五届徐汇区政协委员,中国人工智能产业发展联盟理事,入选上海领军人才培养计划,获得上海市十大杰出青商、上海市智慧城市建设领军先锋、上海市优秀学术技术带头人、上海市青年科技杰出贡献奖等多项荣誉。带领

共建活动平台、分享工作资源、交流工作经验、解决实际问题等途径,形成产业核心竞争力,有效提升江苏大数据联盟和建邺区人工智能产业链联盟关键技术创新水平。南京建邺区人工智能产业链党建联盟轮值主席单位、星环智能9月1日,由江苏南京生态科技岛经开区管委会指导,南京市建邺区人工智能产业链党建联盟、江苏大数据联盟、星环科技共同主办的“向星力·未来数据技术论坛”城市巡回南京站活动圆满举办。来自政府、金融、能源子公司总经理孙煜华活动现场举行了南京市建邺区人工智能产业链党建联盟*江苏大数据联盟共建协议、星环科技*南数研究院战略合作两大签约仪式。此次签约南京市建邺区人工智能产业链党建联盟与江苏大数据联盟将通过党支部书记李斌,江苏大数据联盟理事长、南京大学教授潘金贵参加了该签约仪式。星环科技与南数研究院正式签约为战略合作伙伴,将构建业内领先的大数据平台及基于该平台的大数据业务应用,推动实现在江苏省及各地在利用数据资源,将其转化为数据资产,从而实现降本增效、创造机遇。湖仓集一体化也是星环科技大数据基础平台的主要演进方向,TDH9.3推出新一代湖仓集存储格式Holodesk,一份数据满足数据湖的离线实时

近日,江苏省工业软件产业链联盟、江苏省人工智能学会公布了2024年度江苏省工业软件优秀产品和应用解决方案名单,星环科技云边端一体化工业互联网平台成功入选。随着制造业数字化转型的发展,制造企业需要基于环境之间的实时交互,增强工厂信息获取、实时反馈与智能控制的能力,做到“人、机、料、法、环”生产要素的实时分析与预测。星环科技云边端一体化工业互联网平台由星环科技大数据基础平台TDH、边缘计算平台SophonEdge和数据科学平台SophonBase构成,以AIoT架构为基础,搭起工业生产过程中数据闭环的“桥梁”。将大数据与人工智能技术应用于海量工业数据中,通过设备连接、可视化探索分析、高性能算法全面感知、物联网、大数据、人工智能、可视化等技术,深度融合多源数据,实现对工业制造企业生产和经营管理的全方位监测和感知,实现对海量工业数据的计算、分析和挖掘,实现工厂设备与设备、人与设备、人与人、人与、规则计算、函数计算、智能推理、消息转发、断网续传等功能;云端由工业大数据平台+人工智能平台组成,工业大数据平台提供分布式的数据存储与计算能力,主要由时序数据库、分析型数据库、关系型数据库以及分布式计算

题,汇聚全产业链力量,聚焦基础软件核心能力构建,引领基础软件持续创新。会议期间,星环科技受邀参加麒麟软件分论坛,生态合作总监张雷分享了星环大数据&麒麟操作系统联合解决方案。星环大数据&麒麟操作系统联合解决方案以银河麒麟高级服务器操作系V10为底层基座,星环科技一站式大数据基础平台TDH、分布式数据库ArgoDB、交易型数据库KunDB、基于容器的智能数据云平台TDC等基础软件作为体现在自主创新、功能丰富、高性能等方面。自主创新:该方案核心基于银河麒麟高级服务器操作系统V10和星环科技自主研发的大数据基础平台TDH、分布式数据库ArgoDB,为用户提供自主创新的国产基础数据平台,该联合解决方案可满足客户对于数据云、基础大数据平台、OLAP/OLTP数据库等方面的需求,支持数据集市、实时数仓等场景。比如某全国股份制银行数据集市建设项目通过该方案建立新一代数据集市,满足数据,联合解决方案整合所有终端实时数据进行业务指标分析,基于银河麒麟高级服务器操作系统V10内核优化,性能提升到秒级别响应。作为大数据基础软件国产化的重要推动者之一,星环科技一直积极融入信创生态,在信创生
猜你喜欢
表10.Hyperbase在Zookeeper上的znode节点及作用说明节点分类作用/hyperbase1(zookeeper.znode.parent)Operation节点根节点,包含所有被Hyperbase创建或使用的节点/hyperbase1/hbaseid(zookeeper.znode.clusterId)Operation节点HBaseMaster用UUID标示一个集群。这个clusterId也保存在HDFS上:hdfs:/<namenode>:<port>/hyperbase1/hbase./hyperbase1/rs(zookeeper.znode.rs)Operation节点RegionServer在启动的时候,会创建一个子节点(例如:/hbase/rs/m1.host),以标示RegionServer的在线状态。HbaseMaster监控这个节点,以获取所有OnlineRegionServer,用于Assignment/Balancing。/hyperbase1/master(zookeeper.znode.master)Operatio...
产品文档
2.3 Hyperbase 管理页面
HyperbaseWeb管理页面主要用于Hyperbase服务的各种数据和信息的查看,下面我们将介绍管理页面的一些简单操作。HMaster管理页面打开HyperbaseActiveMaster管理页面的方法有两种:根据集群的ActiveMaster的IP地址打开:http://master_node_ip:60010。如下图:图25.ActiveMasterWeb页面通过TDH管理页面中Hyperbase服务的HMaster的ServiceLink打开,详细流程如下:TranswarpDataHubWEB管理页面也要根据集群的ActiveMaster的IP地址打开,地址一般是http://master_node_ip:8180。打开对应的Hyperbase服务的Roles页面。如下图:图26.Hyperbase角色页面左上角服务名后的圆点颜色表示集群中的Hyperbase服务的状态,比如当前是绿色的Green(HEALTHY),健康状态。另两种状态是Yellow(WARNING)和Red(DOWN)。通过每个HMaster对应的ServiceLink可以打开HMaster管理页面。如下...
产品文档
2 社区版家族介绍及资源获取
2.1关于社区版您可能想要知道的2.2怎么联系到我们?遇到问题怎么办2.3产品资源汇总
产品文档
附录 D: JSON 配置使用说明
JSON配置操作简介表数据VS表的扩展数据索引是Hyperbase的核心功能之一,我们在使用Hyperbase时,常常会为表建各类索引,包括全局索引、局部索引和LOB索引,利用索引中的数据提高查询效率。索引中的数据不属于表数据,但是从表数据而来,和表密不可分,所以我们将表数据和它所有索引中的数据合称为表的扩展数据,也就是说,我们做如下定义:表的扩展数据=表数据+全局索引数据+局部索引数据+LOB索引数据表的元数据VS表的扩展元数据Hyperbase表的元数据包括表名、列族名、DATA_BLOCK_ENCODING、TTL、BLOCKSIZE等等。一张Hyperbase表的各个索引也有自己的元数据,和索引数据一样,索引的元数据和表的关系也十分紧密,所以我们将表的元数据和它所有索引的元数据合称为表的扩展元数据:表的扩展元数据=表的元数据+全局索引元数据+局部索引元数据+LOB索引元数据我们有时也会将表的元数据称为基础元数据或者Base元数据。JSON配置的命令行指令为操作表的扩展数据和扩展元数据服务,Hyperbase提供了扩展的命令行指令:describeInJson、alterUseJ...
hbaseSQL的IndexDDL支持创建和删除表的全局索引,包括:创建全局索引:CREATEGLOBALINDEX删除全局索引:DROPGLOBALINDEX但是,目前Hyperbase不支持使用SQL生成索引,您可以从HyperbaseShell中执行rebuild指令来生成索引,具体请参考《Hyperbase使用手册》。(创建索引前插入的数据没有索引,但是创建索引之后的数据有索引。)下面将具体介绍创建和删除索引的语法。创建全局索引:CREATEGLOBALINDEX语法:为Hyperbase表建全局索引CREATEGLOBALINDEX<index_name>ON<tableName>(<column1><SEGMENTLENGTHlength1>|<<(length1)>①[,<column2><SEGMENTLENGTHlength2>|<(length2)>,...]②);①column1:指根据哪个列建全局索引,可以有多个列,但不可包含首列(因该列映射为RowKey)。②...
产品文档
客户服务
技术支持感谢你使用星环信息科技(上海)股份有限公司的产品和服务。如您在产品使用或服务中有任何技术问题,可以通过以下途径找到我们的技术人员给予解答。email:support@transwarp.io技术支持热线电话:4007-676-098官方网址:http://www.transwarp.cn/论坛支持:http://support.transwarp.cn/意见反馈如果你在系统安装,配置和使用中发现任何产品问题,可以通过以下方式反馈:email:support@transwarp.io感谢你的支持和反馈,我们一直在努力!
产品文档
1 产品介绍
QuarkGateway是连接客户端与QuarkServer服务器的一个中间件,是客户请求QuarkServer服务的总入口,它严格按照用户预定义的配置文件,根据用户的不同需求来提供负载均衡、SQL规则路由、高可用(包括超时转发和宕机转发)、Web运维、Inceptor安全(LDAP,KERBEROS)等各项功能。QuarkGateway可以在多个QuarkServer间平衡业务流量,能够有效地为客户端屏蔽掉集群细节,能将不同的SQL类型路由到不同的QuarkServer,并且解决了QuarkServer超时或宕机后无法执行任务的问题,提高了产品的可用性。QuarkGateway的主要功能包括:负载均衡在这种情景下QuarkGateway可以将特定的业务分担给多个QuarkServer,从而实现多个InceptorServer平衡业务流量的功能,完成此项功能的前提是QuarkServer的TAG属性一致。SQL规则路由QuarkGateway基于特定规则,可将不同类型的SQL路由到不同的QuarkServer。高可用性包括超时转发和宕机转发等,QuarkGateway可将超时或者宕机的...
产品文档
2.1 安装 Hyperbase
通过Manager管理平台,可一键部署Hyperbase。可以在第一次安装TranswarpDataHub集群时安装,也可以向安装好的集群另外安装Hyperbase服务。详细安装步骤及配置项,请参考《TDH安装手册》。安装Hyperbase可以分为以下步骤:软硬件环境检查:检查服务器配置、操作系统、浏览器是否满足要求。安装前配置:配置系统运行过程中所需的文件目录,确保系统运行正常。确认网络配置、Java环境、NTP服务器配置、安全配置、节点访问配置。安装Manager:安装Manager并实现集群管理。安装Hyperbase:您可以通过Manager管理平台安装Hyperbase,并在安装过程中选择所需的HDFS、YARN和Zookeeper等依赖服务以完成部署。产品包上传:在【应用市场】>【产品包】页面上传Hyperbase及相关服务的产品包。服务添加:通过【集群管理】>【添加服务】添加TranswarpHyperbase服务及TranswarpBasic组件(包括HDFS、YARN、Zookeeper、KunDB等)。配置安全:选择安全认证方式,可选简单认证或Kerbe...
表9.Hyperbase在HDFS中的目录结构简介目录作用有无清理机制or如何清理/hyperbase1根目录/hyperbase1/.tmp临时目录,用于存储临时文件和写入过程中的临时数据。这些临时文件可能包括数据块的临时副本、临时索引文件或其他中间结果文件。写入过程中的临时数据:在hyperbase1中,数据的写入是通过WAL(Write-AheadLog)进行的,WAL用于记录数据变更操作。在写入过程中,hyperbase1会将数据写入到WAL中,同时也会将数据写入到对应的数据文件中。/hyperbase1/.tmp目录用于存储在写入过程中尚未完全写入数据文件的临时数据。这样做是为了确保数据写入的原子性和可靠性。hyperbase1会定期清理/hyperbase1/.tmp目录中的过期临时文件和数据,以避免该目录占用过多的磁盘空间。清理策略可以通过hyperbase1的配置进行调整和设置。/hyperbase1/archive归档目录,用于存储已归档的hyperbase1数据。表数据经过一段时间的存储后,可能会变得不再频繁访问或需要长期保存。为了节省存储空间和提高性能,hyper...
为了方便您接下来的安装使用,社区版团队为您准备了视频教程,可以搭配手册内容一起查看:https://transwarp-ce-1253207870.cos.ap-shanghai.myqcloud.com/TDH-CE-2024-5/%E8%A7%86%E9%A2%91/%E5%BC%80%E5%8F%91%E7%89%88StellarDB%E5%AE%89%E8%A3%85%E8%A7%86%E9%A2%912024.5.mp4安装教程在安装启动StellarDB社区开发版容器之前,请务必执行dockerps确保环境当前无其他正在运行的开发版容器,如果有,请及时停止以防止后续端口冲突。请务必确保您的安装环境已经配置好了hostname以及/etc/hosts文件,否则hostname和IP地址将无法映射,最终导致安装失败。具体配置方式详见安装前系统配置改动安装流程步骤一将从官网下载下来的产品包上传至安装环境产品包名称:TDH-Stellardb-Standalone-Community-Transwarp-2024.5-X86_64-final.tar.gz步骤二执行下述命令进行解...