본문 바로가기
SMALL

PAPER14

Road Traffic Event Detection Using Twitter Data,Machine Learning, and Apache Spark Ebtesam Alomari1, Rashid Mehmood2, and Iyad Katib1 1 Faculty of Computing and Information Technology, 2 High Performance Computing Center King AbdulAziz University Jeddah, Saudi Arabia EAlomari0011@stu.kau.edu.sa, {RMehmood, IAKatib}@kau.edu.sa abstract : 머신 러닝을 사용하여 트윗의 내용을 교통과 관련된 내용의 트윗을 분류하고, 교통과 관련된 트윗을 세부 분야로 분류하여 이벤트 탐지 시행 introduction: 도로 혼잡은 많은 부정적인 영향을 끼침으로써 이를 줄이거나 제거하기 위한 관리 전략을 설정하려.. 2021. 2. 16.
BusBeat: Early Event Detection with Real-Time Bus GPS Trajectories abstract : 규모가 큰 이벤트를 미리 탐지하는 연구 introduction: 규모가 큰 이벤트는 많은 부정적인 영향을 끼치는데, 이를 미리 탐지함으로써 피할 수 있다. method: periodic-car의 정보를 활용하여 예측. 예측을 수행하기 위해 잃어버린 데이터 보간 기법과 네트워크 기반의 이벤트 탐지 기법을 사용 experiment: 데이터 보간 기법을 통해 사용할 수 있는 데이터를 약 34.7%정도 더 확보하였으며, 통계적 기법을 활용하여 periodic-car 행동이 영향이 미침을 확인함. 또한 평일과 주말, 소셜과 현실의 차이에 대해서도 확인함. discussion: 1. 기차와 같은 다른 교통수단을 사용할 경우 탐지하기 어려움. 2. 탐지된 이벤트의 크기와 범위를 알 수 없음 3. .. 2021. 2. 2.
빅데이터처리 빅데이터 처리 방법으로 두 가지가 있다. 일괄처리(배치처리) 실시간 처리 일괄 처리는 과거의 데이터를 이용하여 미래에 필요한 정보를 예측하는 목적으로 데이터를 계속 쌓아놓다가 필요한 경우에 한번에 처리하는 방법이다. 대표적으로 맵리듀스(MapReduce)방식이 있다. 실시간 처리는 데이터의 발생과 동시에 즉시 처리하는 방식으로 스트리밍을 예로 들 수 있다. --참고-- Data 가공되지 않은 값 Information 데이터를 가공한 의미 있는 값 metadata 데이터를 설명하기 위한 데이터 2020. 11. 30.
데이터구조(자료구조) 데이터구조는 궁극적으로 어떻게 표현하고 어떻게 읽을 것인지를 정하는 것이다. HASH : 저장된 데이터를 빨리 읽기 위한 방법으로 읽기와 저장이 빠르다. 하지만 저장보다는 읽기에 초점이 맞추어져 있다. Key | Value : HASH함수를 보안한 방법으로 하나의 Key에 Value를 저장하는 방식이다. Key는 중복 데이터를 허용하지 않기 때문에 HASH Function을 사용하여 발급한다. 예를 들어, 학교 성적 처리 시스템을 만든다고 하자. 제공되는 값은 성적, 이름, 학번, 학년 등이 있다. 이 중에서 성적이 알고싶은 값이며 학번으로 중복데이터가 생기지 않도록 처리할 수 있기 때문에 Key가 될 수 있다. 이름과 학년은 부가적인 정보로 굳이 없어도 된다. 이렇게 value가 여러 개일 경우 Tab.. 2020. 11. 30.
StoryLine-Unsupervised Geo-event Demultiplexing in Social Spaces without Location Information(2017) 본 논문은 위치정보가 없는 소셜 공간의 비감독적인 지리이벤트로 디멀티플렉싱 시스템이다. 1. INTRODUCTION 도시에 스마트폰이 보급되면서 스마트폰은 IoT시대에 가장 많이 보급된 기기 중 하나가 되었다. 이러한 스마트폰 사용의 증가는 데이터 수집의 증가로 이루어졌는데 스마트폰의 전화 센서를 이용하여 다양한 도시 전체의 측정 작업에 이용되어왔다. 이러한 작업을 Crowd-Sensing이라고 한다. (crowd-sensing : 대규모 개인 그룹이 공동으로 데이터를 공유하고 정보를 추출하면서 공통의 관심있는 프로세스를 측정, 매핑, 분석, 추정하는 기술) Crowd-Sensing과 함께 본 논문에서는 demultiplexing을 사용한다. demultiplexing이란 multiplexing의 반대되.. 2020. 11. 27.
Event Estimation Accuracy of Social Sensing With Facebook for Social Internet of Vehicles(2018) Event Estimation Accuracy of Social Sensing With Facebook for Social Internet of Vehicles - Kardelen Cepni, Mustafa Ozgur , Member, IEEE, and Ozgur B. Akan , Fellow, IEEE 1. introduction SIoV란 인터넷을 통하여 차량끼리 연결을 제공하는 것이다. 보통 SIoV는 차량끼리의 통신을 말하지만 이 논문에서는 사람도 차량의 일부가 될 수 있다고 말하고 있다. 구체적으로는 사람이 제공하는 정보를 사용하는 것으로 소셜 네트워크를 사용하는 것을 말한다. 그래서 본 논문에서는 소셜 네트워크를 통해 차량에 탑승한 사람들의 관찰로부터 도로상의 사건들을 추정하는 것을 목표로 한.. 2020. 10. 12.
LIST