XML Schema기반 시맨틱 데이타 통합 (pp.563-573)

김동광(Dongkwang Kim),정갑주(Karpjoo Jeong),신효섭(Hyoseop Shin),황선태(Suntae Hwang) 한국정보과학회 2006 정보과학회논문지 : 시스템 및 이론 Vol.33 No.9

과학 · 공학 분야의 사이버 인프라스트럭쳐는 다양한 도메인에서 수행되는 연구 활동을 통해서 얻어지는 다양한 형식의 데이타들뿐만 아니라 이런 데이타를 저장 · 관리하기 위한 이질적인 저장소들의 통합이 요구되고 있다. 데이타 통합 작업의 어려움은 다음과 같다: (1) 시스템 독립적인 다중 데이타 스키마 지원, (2) 다양하게 변화하는 스키마들의 쉬운 관리, (3) 직관적인 스키마 맵핑. 이 같은 문제를 해결하기 위해서, 우리는 XML Schema를 이용해서 과학 분야의 데이타 모델을 정의하고 RDF기반의 스키마 맵핑을 이용해서 의미적으로 통합할 수 있는 새로운 방법을 제안한다. XML Schema기반의 데이타 모델 정의 방법은 실험 데이타들을 과학자들이 직관적이고 간편하게 표현 할 수 있게 해주며, 이 데이타 모델은 많은 시스템에서 사용중인 XML DBMS를 그대로 이용할 수 있는 장점이 있다. 또한, 스키마 맵핑을 위해서 RDF로 구축된 온톨로지를 이용해서 XML Schema로 정의되어 있는 스키마의 구조적인 관계를 정의하고, 맵핑 정보를 이용해서 통합 질의를 수행한다. 우리는 제안 시스템의 프로토타입을 토목 공학 분야 프로젝트인 KOCED에 적용하였다. Cyber-infrastructures for scientific and engineering applications require integrating heterogeneous legacy data in different formats and from various domains. Such data integration raises challenging issues: (1) Support for multiple independently-managed schemas, (2) Ease of schema evolution, and (3) Simple schema mappings. In order to address these issues, we propose a novel approach to semantic integration of scientific data which uses XML schemas and RDF-based schema mappings. In this approach, XML schema al-lows scientists to manage data models intuitively and to use commodity XML DBMS tools. A simple RDF-based ontological representation scheme is used for only structural relations among independently-managed XML schemas from different institutes or domains We present the design and implementation of a prototype system developed for the national cyber-environments for civil engi-neering research activities in Korea (similar to the NEES project in USA) which is called KOCEDgrid (http://www.koced.net).

연구데이터 관리 및 검색을 위한 스키마 클래스 상속 모델

김선태 한국정보관리학회 2014 정보관리학회지 Vol.31 No.2

The necessity of the raw data management and reuse is issued by diffusion of the recognition that research data is a national asset. In this paper, a metadata design model by schema class inheritance and a metadata integrated search model by schema objects are suggested for a structural management of the data. A data architecture in which an schema object has an 1:1 relation to the data collection was designed. A suggested model was testified by creation of a virtual schema class and objects which inherit the schema class. It showed the possibility of implement systematically. A suggested model can be used to manage the data which are produced by government agencies because schema inheritance and integrated search model present way to overcome the weak points of the ‘Top-dow Hierarchy model’ which is being used to design the metadata schema. 최근 연구데이터가 국가자산이라는 인식의 확산으로 원시데이터 관리 및 재사용의 필요성이 이슈이다. 본 연구에서는 데이터의 체계적인 관리를 위해, 스키마 클래스를 상속하는 방식의 메타데이터 설계 모델과 상속을 통해 생성된 스키마 객체들을 대상으로 메타데이터 통합 검색 모델을 제안하였다. 스키마 클래스를 상속한 스키마 객체가 데이터 컬렉션에 1대1의 관계를 갖도록 데이터 아키텍처를 설계하였으며, 제안된 모델의 검증을 위해서 가상 스키마 클래스 및 객체가 시스템적으로 구현 가능함을 증명하였다. 본 연구에서 제안하는 스키마 클래스 상속 및 통합검색 모델은 일반적으로 사용되는 ‘하향식 계층 모델’의 단점을 극복하는 모델로서, 정부 기관에서 생산되는 데이터를 독립적으로 관리하는데 활용될 수 있다고 사료된다.

XML 소스 데이터로부터 스타 스키마를 생성하기 위한 XML2Star 알고리즘

최은하,김진호,문양세 강원대학교 정보통신연구소 2006 정보통신논문지 Vol.10 No.-

Star Schema is widely used for OLAP(On-Line Analytical Processing) systems to represent multidimensional data in relational database management systems which can be used to analyze for an enterprise's decision making. The star schema consists of a fact table and a set of dimension tables surrounding the fact table. Many researchers have investigated the methodologies for designing the Star Schema from the source data in relational databases. Meanwhile, XML is emerging as a new standard representing data and documents in the Internet. We also need to analyze a huge amount of data represented by XML files, thus we present an algorithm, XML2Star, for designing Star Schema from XML source data. The XML2Star extracts the components of star schema, which are measurements (i.e., facts), dimensions, and dimension hierarchies, from DTDs in XML documents. Based on th star schema, this algorithm also builds star schema instances (i.e., multidimensional cube) from XML documents. The star schema instances will be used for users' multidimensional analyses by using OLAP tools. Therefore, the proposed algorithm can help user deriving star schema from XML source data in the Internet easily and analyzing the schema over various dimensions effectively.

식품 빅데이터 분석을 위한 데이터 허브의 설계

김종민,권오흠,송하주 한국정보과학회 2020 데이타베이스 연구 Vol.36 No.3

In this paper, we propose a data storage system for analysis of sea food big data. Existing food analysis stems are based on data warehouses that are constructed on relational databases. Therefore data analysis should be performed on the predefined database schema and data losses can happen while extracting data from the source to the data warehouse. The proposed system connects various data sources with different types and provides flexible processing of the data which is stored in its original form as it is done in data lakes. Users can store data in relational databases, non-SQL databases, and files with their selection. Files are ingested by Elasticsearch so that they can be efficiently retrieved later even though they are stored in its raw format. The data files are stored in HDFS to support massive data analysis. Users can easily access and analyze the data using a web browser via Jupiter notebook or Google’s Colab interface. 본 논문에서는 식품 빅데이터의 분석을 위한 데이터 저장시스템을 제안한다. 기존의 식품관련 분석시스템에서는 관계형데이터베이스 기반의 데이터웨어하우스를 사용하였고 정형화된 데이터에 기반한 식품 추천을 목적으로 하였다. 따라서 미리 정의된 스키마만을 사용해서 분석해야 하는 한계가 있고, 데이터 소스에서 웨어하우스로 데이터를 추출하는 과정에서 데이터의 소실이 빈번하게 발생한다. 제안하는 시스템은 데이터레이크 형식으로 다양한 데이터 소스를 연계하고 원데이터를 그대로 유지하여 유연한 데이터 처리가 가능하도록 하였다. 아울러 관계데이터베이스 또는 NoSQL 데이터베이스 데이터를 적재하여 사용할 수 있도록 하였다. 파일 데이터는 Elasticsearch를 사용하여 원데이터의 인입(Ingestion)과 검색이 단순하게 이루어지도록 하였다. 원데이터 파일은 HDFS에 저장하여 대규모 데이터 분석이 가능하도록 하였다. 사용자 측면에서는 Jupyter 노트북과 Google Colab을 통해 공유된 데이터를 웹브라우저를 통해 간편하게 접근하여 분석할 수 있도록 하였다.

RDF 스키마 매핑 모델링을 이용한 관계형 데이터베이스 테이블 구현

김주리 국제차세대융합기술학회 2020 차세대융합기술학회논문지 Vol.4 No.4

본 논문은 웹 데이터를 컴퓨터가 직접 읽고 처리하는 링크드 데이터(Linked Data)가 공공 데이터와 문 화예술 데이터를 중심으로 확산되고 있다. 링크드 데이터 중심의 차세대 웹 기술이 활성화 되기 위해서는 유용한 데이터들이 RDF(Resource Description Framework) 형식으로 웹 상에 발표되어야 한다. 관계데이터베이스는 운 영 데이터 저장고로써 이들 데이터가 링크드 데이터의 RDF로 제공된다면 유용한 링크드 데이터를 효과적으로 확 보할 수 있다. 본 논문에서는 RDB(Relationl DataBase) 데이터를 RDF로 매핑하는 새로운 엔티티(Entity) 기반 매핑 방식을 제안한다. 엔티티 기반 매핑은 RDB-RDF 스키마 매핑으로, RDB 구조와 성능이 그대로 유지하면서 RDF의 SPARQL 질의 처리를 실현한다. 본 논문의 매핑 방식은 RDB에 간편하게 SPARQL(Simple Protocol and RDF Query Language) 엔드포인트(end-point)를 구현할 수 있도록 하여, RDB 데이터의 링크드 데이터화에 새로운 접근 방향을 제시할 것으로 기대된다. In this paper, linked data, which is directly read and processed by computers, is spreading around public data and cultural and artistic data. In order for the next generation of web technologies centered on linked data to be activated, useful data must be published on the web in RDF format. Relational databases are operational data stores that can effectively obtain useful linked data if these data are provided as RDFs of linked data. In this paper, a new entity-based mapping method of mapping RDB data to RDF is proposed. Entity-based mapping is an RDB-RDF schema mapping that realizes SPARQL query processing in RDF while maintaining the RDB structure and performance. The mapping method in this paper is expected to provide a new approach to linked dataization of RDB data by making it easy to implement SPARQL endpoints in RDB.

SEDRIS 기반 환경 데이터에 대한 XML 스키마 설계 및 변환

박창섭(Chang-Sup Park),이명원(Myeong Won Lee) 한국콘텐츠학회 2023 한국콘텐츠학회논문지 Vol.23 No.12

The SEDRIS provides a standard data model(DRM) which can represent structural and semantic information on various environments such as geography, ocean, and atmosphere, and used in various fields that exploit environmental information. Since a dedicated binary storage format and APIs must be used to store and retrieve SEDRIS data, there are a lot of difficulties in sharing and exploiting them in various platforms and applications. In this paper, we propose XML schema constructs for all components of DRM to represent SEDRIS-based data as XML data, which can increase the usability of environmental data built on the SEDRIS standards. We also design and implement a conversion algorithm that transforms a SEDRIS data stored in an STF file into XML data conforming to the proposed schema. Experiments on various example data sets show that the proposed algorithm can generate a valid XML data for a given SEDRIS data efficiently. Based on the proposed method, environmental data stored in SEDRIS proprietary binary files can be represented by platform-independent and language-neutral XML data, making it easy to generate and share environmental data on various platforms and systems without relying on the dedicated APIs. The environmental data in the proposed XML format can be exploited for data visualization and virtual environment construction by transformation to the other XML-based data models such as X3D.

기존건축물 에너지 성능 정보 데이터베이스 구축을 위한 데이터스키마 제안 : 그린리모델링 사례연구를 통해

윤진하(Yoon, Jin-Ha),최준우(Choi, Jun-Woo),김혜기(Kim Hye-Gi),신혜리(Shin, Hey-Ry),김덕우(Kim, Deuk-Woo) 대한건축학회 2023 대한건축학회논문집 Vol.39 No.12

This paper proposes a basic data schema for the systematic collection and maintenance of field information in green remodeling projects. During the early stages of these projects, field surveys are conducted on target buildings to gather various information regarding building and facility conditions, operations, and more. However, these valuable materials are typically used only once for report writing and are stored in an unstructured manner, often neglected. This leads to problems such as inconsistency, inaccuracy, and reduced reliability, impacting the overall quality. Moreover, these materials are difficult to reuse as they are stored as document files without standardized forms, hindering interoperability. Thus, a customized data schema is necessary to systematically and continuously manage field information. To address this need, this study examined the existing building on-site collection data schemas from the United States and the European Union, identifying the essential elements required for a building data schema in Korea. The foreign data schemas exhibited characteristics such as modular composition, separation of objective information and subjective opinion, and scalability and compatibility of data. Drawing from these insights, the investigation items of green remodeling on-site documents were modularized through a process of data integration, separation, deletion, addition, and movement. Finally, this paper describes a proposed data schema with examples of inputs.

CONSTRUCTING MULTIDIMENSIONAL CUBE FROM XML SOURCE DATA USING RELATIONAL DATABASE SYSTEM

Eunha CHOI,Sung-Hyun SHIN,Jinho KIM,Yang-Sae Moon 한국멀티미디어학회 2007 한국멀티미디어학회 국제학술대회 Vol.2007 No.-

This research proposed a mechanism constructing multidimensional cubes from a large volume of WWW(World-wide Web) source data. Multidimensional cubes are popular structures for OLAP(On-Line Analytical Processing) processing. In relational databases, these multidimensional cubes are usually represented by star schema which consists of a fact table and a set of dimension tables surrounding the fact table. In this paper, we investigated a method for designing star schema from web source data expressed in XML, which is being used as a standard representing information on WWW applications. Based on the obtained star schema, we construct a multidimensional cube (i.e., an instance of the star schema) from XML documents automatically, which can be used for users' multidimensional analyses by using OLAP tools. Therefore, the proposed mechanism can help users to derive star schema from XML source data in the Internet easily and analyzing them over various dimensions effectively.

온톨로지 스키마의 효율적 관리를 위한 XMDR 기반의 데이터 모델 설계

이정훈,우용태 한국엔터프라이즈아키텍처학회 2013 정보기술아키텍처연구 Vol.10 No.2

본 논문에서는 OWL 형식으로 작성된 온토롤지 스키마를 데이터베이스에 의해 효율적으로 관리하기 위한 XMDR 기반의 데이터 모델을 제안하였다. 제안 모델은 기존의 ISO/IEC 11179에 의한 MDR 데이터 모델에서 관리하기 어려운 개념간의 관계를 효과적으로 관리할 수 있는 모델이다. 또한 온톨로지 스키마를 데이터베이스에 의해 관리하기 위한 알고리즘을 제시하였다. 본 연구에서 제시한 알고리즘의 효율성을 입증하기 위하여 OWL 표현력에 따른 다양한 형태의 온톨로지 스키마를 데이터베이스에 자동으로 저장하고, 원래의 OWL 문서를 재생성하는 실험을 진행하였다. 실험 결과, 제안 모델에 의해 OWL 형식으로 표현된 다양한 형태의 온톨로지 스키마를 효과적으로 관리할 수 있음을 보였다. In this paper, we propose a new XMDR-based data model to efficiently manage ontology schema structured in OWL format. The proposed model would be better equipped to manage the relationship between concepts, which is a problematic area in the existing MDR model. Moreover, we present an algorithm to manage ontology schema in the database. To demonstrate the effectiveness of the proposed algorithm, experiments were conducted to recreate OWL documents for the various expressive types of OWL ontology schema that are stored in the database. These experimental results demonstrated that the proposed model effectively managed the various types of OWL ontology schema.

인라이닝을 이용한 XML 스키마의 관계형 스키마 변환 기법

정지문,조정길 남서울대학교 공학연구센터 2003 공학연구 Vol.4 No.-

데이터 중심의 XML 문서를 관계형 데이터베이스에 저장하고 관리할 경우에 XML 스키마로부터 관계형 스키마를 추출하는 것이 보다 시급한 일이다. 또한 생성된 테이블에 XML 문서를 분할하여 저장할 경우에 많은 널 값을 초래하거나 조인 비용의 증가를 가져오기 때문에 이에 대한 해결책이 필요하다. 이 논문에서 제안한 관계형 스키마 생성의 구체적인 연구 내용은 다음과 같다. XML 스키마로부터 관계형 스키마를 생성하는 Schema Hybrid Inlining 기법을 제안하였다. 제안된 기법은 XML 스키마 그래프를 바탕으로 관계형 스키마를 생성하게 되는데, 기존의 Inlining 방식을 확장하여 출현 지시자와 진입 차수에서의 테이블 생성 방법을 휴리스틱하게 매뉴얼 처리를 하며, 유도 관계에서 최종 노드인 조상 노드는 새로운 테이블을 생성한다. When any data-centric XML documents are stored and managed in RDBMS, schema extracting from XML Schema is an imminent problem. Furthermore, when they are stored in partitioned way on created table, there will be produced lots of null values and/or be increased cost for join, so we need a solution to solve these problem. This thesis proposes a Schema Hybrid Inlining technique to generate relational schema. The suggested technique creates a relational schema based on the XML Schema graph. Also, the technique expands the legacy Inlining method to manual and heuristical processes table generation method of appearance indicator and in-degree, and an ancestor node, terminal node, createds a new table on derived relation in this technique.