Semantic web mining and the representation, analysis, and evolution of web space

Semantic Web Mining aims at combining the two fast-developing research areas Semantic Web and Web Mining. This survey analyzes the convergence of trends from both areas: Growing numbers of researchers work on improving the results of Web Mining by exploiting semantic structures in the Web, and they use Web Mining techniques for building the Semantic Web. Last but not least, these techniques can be used for mining the Semantic Web itself. The second aim of this paper is to use these concepts to circumscribe what Web space is, what it represents and how it can be represented and analyzed. This is used to sketch the role that Semantic Web Mining and the software agents and human agents involved in it can play in the evolution of Web space.

Mining association rules in folksonomies

Social bookmark tools are rapidly emerging on the Web. In such systems users are setting up lightweight conceptual structures called folksonomies. These systems provide currently relatively few structure. We discuss in this paper, how association rule mining can be adopted to analyze and structure folksonomies, and how the results can be used for ontology learning and supporting emergent semantics. We demonstrate our approach on a large scale dataset stemming from an online system.

Semantic web mining

Semantic Web Mining aims at combining the two fast-developing research areas Semantic Web and Web Mining. This survey analyzes the convergence of trends from both areas: an increasing number of researchers is working on improving the results of Web Mining by exploiting semantic structures in the Web, and they make use of Web Mining techniques for building the Semantic Web. Last but not least, these techniques can be used for mining the Semantic Web itself. The Semantic Web is the second-generation WWW, enriched by machine-processable information which supports the user in his tasks. Given the enormous size even of today’s Web, it is impossible to manually enrich all of these resources. Therefore, automated schemes for learning the relevant information are increasingly being used. Web Mining aims at discovering insights about the meaning of Web resources and their usage. Given the primarily syntactical nature of the data being mined, the discovery of meaning is impossible based on these data only. Therefore, formalizations of the semantics of Web sites and navigation behavior are becoming more and more common. Furthermore, mining the Semantic Web itself is another upcoming application. We argue that the two areas Web Mining and Semantic Web need each other to fulfill their goals, but that the full potential of this convergence is not yet realized. This paper gives an overview of where the two areas meet today, and sketches ways of how a closer integration could be profitable.

Efficient mining of association rules based on formal concept analysis

Association rules are a popular knowledge discovery technique for warehouse basket analysis. They indicate which items of the warehouse are frequently bought together. The problem of association rule mining has first been stated in 1993. Five years later, several research groups discovered that this problem has a strong connection to Formal Concept Analysis (FCA). In this survey, we will first introduce some basic ideas of this connection along a specific algorithm, TITANIC, and show how FCA helps in reducing the number of resulting rules without loss of information, before giving a general overview over the history and state of the art of applying FCA for association rule mining.

Adaptive Real-time Anomaly-based Intrusion Detection using Data Mining and Machine Learning Techniques

Die zunehmende Vernetzung der Informations- und Kommunikationssysteme führt zu einer weiteren Erhöhung der Komplexität und damit auch zu einer weiteren Zunahme von Sicherheitslücken. Klassische Schutzmechanismen wie Firewall-Systeme und Anti-Malware-Lösungen bieten schon lange keinen Schutz mehr vor Eindringversuchen in IT-Infrastrukturen. Als ein sehr wirkungsvolles Instrument zum Schutz gegenüber Cyber-Attacken haben sich hierbei die Intrusion Detection Systeme (IDS) etabliert. Solche Systeme sammeln und analysieren Informationen von Netzwerkkomponenten und Rechnern, um ungewöhnliches Verhalten und Sicherheitsverletzungen automatisiert festzustellen. Während signatur-basierte Ansätze nur bereits bekannte Angriffsmuster detektieren können, sind anomalie-basierte IDS auch in der Lage, neue bisher unbekannte Angriffe (Zero-Day-Attacks) frühzeitig zu erkennen. Das Kernproblem von Intrusion Detection Systeme besteht jedoch in der optimalen Verarbeitung der gewaltigen Netzdaten und der Entwicklung eines in Echtzeit arbeitenden adaptiven Erkennungsmodells. Um diese Herausforderungen lösen zu können, stellt diese Dissertation ein Framework bereit, das aus zwei Hauptteilen besteht. Der erste Teil, OptiFilter genannt, verwendet ein dynamisches "Queuing Concept", um die zahlreich anfallenden Netzdaten weiter zu verarbeiten, baut fortlaufend Netzverbindungen auf, und exportiert strukturierte Input-Daten für das IDS. Den zweiten Teil stellt ein adaptiver Klassifikator dar, der ein Klassifikator-Modell basierend auf "Enhanced Growing Hierarchical Self Organizing Map" (EGHSOM), ein Modell für Netzwerk Normalzustand (NNB) und ein "Update Model" umfasst. In dem OptiFilter werden Tcpdump und SNMP traps benutzt, um die Netzwerkpakete und Hostereignisse fortlaufend zu aggregieren. Diese aggregierten Netzwerkpackete und Hostereignisse werden weiter analysiert und in Verbindungsvektoren umgewandelt. Zur Verbesserung der Erkennungsrate des adaptiven Klassifikators wird das künstliche neuronale Netz GHSOM intensiv untersucht und wesentlich weiterentwickelt. In dieser Dissertation werden unterschiedliche Ansätze vorgeschlagen und diskutiert. So wird eine classification-confidence margin threshold definiert, um die unbekannten bösartigen Verbindungen aufzudecken, die Stabilität der Wachstumstopologie durch neuartige Ansätze für die Initialisierung der Gewichtvektoren und durch die Stärkung der Winner Neuronen erhöht, und ein selbst-adaptives Verfahren eingeführt, um das Modell ständig aktualisieren zu können. Darüber hinaus besteht die Hauptaufgabe des NNB-Modells in der weiteren Untersuchung der erkannten unbekannten Verbindungen von der EGHSOM und der Überprüfung, ob sie normal sind. Jedoch, ändern sich die Netzverkehrsdaten wegen des Concept drif Phänomens ständig, was in Echtzeit zur Erzeugung nicht stationärer Netzdaten führt. Dieses Phänomen wird von dem Update-Modell besser kontrolliert. Das EGHSOM-Modell kann die neuen Anomalien effektiv erkennen und das NNB-Model passt die Änderungen in Netzdaten optimal an. Bei den experimentellen Untersuchungen hat das Framework erfolgversprechende Ergebnisse gezeigt. Im ersten Experiment wurde das Framework in Offline-Betriebsmodus evaluiert. Der OptiFilter wurde mit offline-, synthetischen- und realistischen Daten ausgewertet. Der adaptive Klassifikator wurde mit dem 10-Fold Cross Validation Verfahren evaluiert, um dessen Genauigkeit abzuschätzen. Im zweiten Experiment wurde das Framework auf einer 1 bis 10 GB Netzwerkstrecke installiert und im Online-Betriebsmodus in Echtzeit ausgewertet. Der OptiFilter hat erfolgreich die gewaltige Menge von Netzdaten in die strukturierten Verbindungsvektoren umgewandelt und der adaptive Klassifikator hat sie präzise klassifiziert. Die Vergleichsstudie zwischen dem entwickelten Framework und anderen bekannten IDS-Ansätzen zeigt, dass der vorgeschlagene IDSFramework alle anderen Ansätze übertrifft. Dies lässt sich auf folgende Kernpunkte zurückführen: Bearbeitung der gesammelten Netzdaten, Erreichung der besten Performanz (wie die Gesamtgenauigkeit), Detektieren unbekannter Verbindungen und Entwicklung des in Echtzeit arbeitenden Erkennungsmodells von Eindringversuchen.

Afrolatinidad y globalización : perspectiva étnica de la globalización. Estudio de caso : Proyecto Minero Mande Norte entre los municipios colombianos del Carmen del Darien y Murindó

El fenómeno de la globalización es una realidad que caracteriza la política internacional mundial que hace referencia principalmente a los procesos económicos, y a las innovaciones tecnológicas, sociales y culturales que están transformando nuestra manera de percibir e interpretar el mundo. En Colombia se han dado cambios muy importantes para el reconocimiento de los derechos de los grupos afrocolombianos. Uno de los cambios importantes, es el derecho de las comunidades afrocolombianas en cuanto a su desarrollo social, cultural y económico. Dentro del contexto nacional, el Pacifico colombiano es un territorio caracterizado por ser un polo de desarrollo, una región reconocida por su riqueza biológica y cultural, donde se realizan grandes proyectos de desarrollo y de extracción de recursos naturales. Pero estos proyectos tiene una alta incidencia en la pérdida de control de las comunidades sobre su territorio e incluso sobre su propio destino. La Muriel Minning Company es una multinacional de los Estados Unidos que actualmente desarrolla el Mega proyecto minero "Mandé Norte"; el gobierno colombiano le otorgó nueve títulos mineros para explotar y comercializar las reservas de cobre y los subproductos de oro y molibdeno. Colombia, como muchos otros países del sur, esta siendo fuertemente afectada en términos de diversidad cultural, construcción de sociedades sustentables y preservación del medio ambiente, por la intervención que en nuestros territorios hacen las multinacionales a través de megaproyectos, que sólo están generando pobreza, perdida de la diversidad cultural y biológica, deterioro de las condiciones ambientales sustentables, desplazamiento forzado.

TU Graz: Course: 707.000 Web Science and Web Technology: Lecture 10: Text Mining

This class introduces basics of web mining and information retrieval including, for example, an introduction to the Vector Space Model and Text Mining. Guest Lecturer: Dr. Michael Granitzer Optional: Modeling the Internet and the Web: Probabilistic Methods and Algorithms, Pierre Baldi, Paolo Frasconi, Padhraic Smyth, Wiley, 2003 (Chapter 4, Text Analysis)

Històries d´aula. Un company d´aprenentatge particular. 'Historias de aula. Un compañero de aprendizaje particular'.

Resumen tomado de la publicación

Thanatos Empresarial : muerte empresarial en el sector minero causas y consecuencias

Este trabajo hace parte del proyecto de investigación de Thanatos Empresarial, el propósito del tema fue seleccionado con el fin de encontrar un factor o patrón común existente entre las empresas del sector minero colombiano, teniendo en cuenta aquellas que hayan sido liquidadas, estén cursando un proceso de liquidación obligatoria o aun estén desarrollando actividades. El trabajo fue dividido en tres partes principales. En la primera expresamos la problemática que cursa el país por la mortalidad prematura de empresas en el país, problemática que en lugar de disminuir sigue aumentando, pese a que desde hace más de cuatro décadas se han venido creando y modernizando leyes que buscan fomentar la creación de empresas sostenibles y de la misma manera ayudar a aquellas que se vean en la necesidad de entrar en un proceso de liquidación. La segunda parte de la investigación esta nutrida de datos recogidos por entidades, principalmente del estado, durante los últimos 15 años, por medio de los cuales se puede ver detalladamente las cifras de empresas que han venido entrando a procesos de liquidación, concordato, reorganización etc. y como pese a las leyes, muy pocas son las que logran sobrevivir a este proceso. Los resultados obtenidos mediante el análisis de estos datos corroboran de manera precisa esta premisa, las leyes existentes no están siendo suficientes para frenar la mortalidad de empresas en lo que respecta al sector minero nacional. Las empresas no toman decisiones por si solas, al mando de ellas están diferentes personas que como capitanes de un barco dirigen el rumbo de la misma, dependiendo de qué decisiones se tomen desde la dirección y la gerencia la empresa lograra recorrer el camino del éxito o del fracaso. Lamentablemente muchos de los emprendedores colombianos deciden dirigir su compañía sin buscar ayuda de algunos estamentos que fueron creados para ayudarlos y evitar la crisis de las empresas, tales como las cámaras de comercio, y por lo mismo debido a su inexperiencia o al abuso de toma de decisiones arriesgadas terminan por echar por la borda la empresa y poniendo en dificultades a todos los que de una u otra forma interactuaban con esta. Esta investigación cobra importancia cuando aquellas personas que desean crear empresa, buscan informarse con anterioridad sobre los problemas pueden cursar cuando entren en el mercado, encontrando en este trabajo una herramienta valiosísima en la gestión de la crisis la cual hace las veces de guía para evitar repetir el patrón que causa la muerte prematura de muchas empresas en el sector minero y en general en la economía Colombiana.

Useful academic references for data mining and usage statistics

Relates to the following software for analysing Blackboard stats http://www.edshare.soton.ac.uk/11134/ Is supporting material for the following podcast: http://youtu.be/yHxCzjiYBoU

Análisis de la situación actual y propuesta de mejoramiento en el plan de negocio de la empresa CIRO ROBERTO MORENO S. EN C.S – “Minas Peñitas“

CIRO ROBERTO MORENO S. EN C.S – “Minas Peñitas”. Es una empresa en el sector minero energético. Este sector se ha caracterizado en Colombia como uno de los más importantes de inigualable crecimiento y con un gran potencial, ya que no solo le trae grandes beneficios a la economía del país, sino que es un sector distinguido por generar grandes niveles de empleo. De este modo CIRO ROBERTO MORENO S. EN C.S – “Minas Peñitas” tiene grandes oportunidades de crecimiento y perdurabilidad, pero debe tener en cuenta que tiene que estar preparada y en las mejores condiciones en todos los aspectos posibles. El propósito del presente trabajo de análisis de la empresa CIRO ROBERTO MORENO S. EN C.S – “Minas Peñitas” es de identificar la forma cómo se desarrollan todas las actividades de la empresa y así determinar el desempeño de estas, para identificar las fortalezas y debilidades presentes, para establecer un plan de mejoramiento en todas las actividades de la cadena de valor y por lo tanto en el plan de negocio de la compañía. La meta de este trabajo no solo fue analizar la situación de la empresa, sino también mostrar las condiciones de la minería de carbón y su comportamiento a nivel mundial y nacional, datos que no se tienen muy claros por parte de empresa y por lo tanto no se le ha dado la suficiente importancia a esta clase de información para beneficio de la misma; sin embargo de acuerdo a las mejoras propuestas en las falencias encontradas en los temas de comunicación y manejo de información en la empresa se espera que si CIRO ROBERTO MORENO S. EN C.S – “Minas Peñitas” considere aplicarlas de la mejor forma, lo cual le traerá grandes beneficios y cumplir con la visión establecida por la empresa.

Mining Events from Multimedia streams, Jon Hare

peaker(s): Jon Hare Organiser: Time: 25/06/2014 11:00-11:50 Location: B32/3077 Abstract The aggregation of items from social media streams, such as Flickr photos and Twitter tweets, into meaningful groups can help users contextualise and effectively consume the torrents of information on the social web. This task is challenging due to the scale of the streams and the inherently multimodal nature of the information being contextualised. In this talk I'll describe some of our recent work on trend and event detection in multimedia data streams. We focus on scalable streaming algorithms that can be applied to multimedia data streams from the web and the social web. The talk will cover two particular aspects of our work: mining Twitter for trending images by detecting near duplicates; and detecting social events in multimedia data with streaming clustering algorithms. I'll will describe in detail our techniques, and explore open questions and areas of potential future work, in both these tasks.

Los conceptos de salud financiera, riesgo y epidemiología en los estados financieros de las compañías del sector de extracción de petróleo crudo y gas natural en Colombia

El presente proyecto tiene como objeto identificar cuáles son los conceptos de salud, enfermedad, epidemiología y riesgo aplicables a las empresas del sector de extracción de petróleo y gas natural en Colombia. Dado, el bajo nivel de predicción de los análisis financieros tradicionales y su insuficiencia, en términos de inversión y toma de decisiones a largo plazo, además de no considerar variables como el riesgo y las expectativas de futuro, surge la necesidad de abordar diferentes perspectivas y modelos integradores. Esta apreciación es pertinente dentro del sector de extracción de petróleo y gas natural, debido a la creciente inversión extranjera que ha reportado, US$2.862 millones en el 2010, cifra mayor a diez veces su valor en el año 2003. Así pues, se podrían desarrollar modelos multi-dimensional, con base en los conceptos de salud financiera, epidemiológicos y estadísticos. El termino de salud y su adopción en el sector empresarial, resulta útil y mantiene una coherencia conceptual, evidenciando una presencia de diferentes subsistemas o factores interactuantes e interconectados. Es necesario mencionar también, que un modelo multidimensional (multi-stage) debe tener en cuenta el riesgo y el análisis epidemiológico ha demostrado ser útil al momento de determinarlo e integrarlo en el sistema junto a otros conceptos, como la razón de riesgo y riesgo relativo. Esto se analizará mediante un estudio teórico-conceptual, que complementa un estudio previo, para contribuir al proyecto de finanzas corporativas de la línea de investigación en Gerencia.