viernes, 21 de febrero de 2020
jueves, 13 de febrero de 2020
Normalización de datos geográficos: Provincias y Localidades
Geo PostCodes
https://es.geopostcodes.com/Argentina
Base de Datos MySQL de Código Postal Argentino (CPA) por Provincia y Localidad
https://www.phpcentral.com/pregunta/660/base-de-datos-mysql-de-codigo-postal-argentino-cpa-por-provincia-y-localidad
Solo provincias y código postal
Servicio de normalización de datos geográficos
https://datos.gob.ar/dataset/jgm-servicio-normalizacion-datos-geograficos
Contiene información para normalizar datos mediante API y base de localidades y provincias.
BAHRA
http://www.bahra.gob.ar/#descargas
La Base de Asentamientos Humanos de la República Argentina es la primera base de datos oficial y normalizada de localidades, parajes, entidades y bases antárticas del territorio nacional; donde se identifica unívocamente a todos los asentamientos humanos, registrando el nombre, coordenadas y código único, entre otros atributos.
Google
Maps Platform - Geocoding Service
https://developers.google.com/maps
API de Google paga para
obtener datos de localidades
|
Sitio |
GeoPos |
Cod
Pos |
Localidades |
Precio |
|
MapaNet |
✔ |
✕ |
21.677 |
5.100 - 37 U$D |
|
Geo PostCodes |
✔ |
✕ |
21.247 |
39.530 - 295 U$D |
|
Base de Datos MySQL |
✕ |
✔ |
22.963 |
GRATIS |
|
Datos Gob Ar |
✔ |
✕ |
17.699 |
GRATIS |
|
BAHRA |
✔ |
✕ |
14.770 |
GRATIS |
Actualmente tenemos 9.157 localidades cargadas en nuestra base.
miércoles, 12 de febrero de 2020
Record Linkage and String Marching
Técnicas y herramientas para poder realizar matching de registros, limpieza y normalización de información, muchas de ellas utilizando Levenshtein Distance.
SQL Server:
Beyond SoundEx - Functions for Fuzzy Searching in MS SQL Server
Librería escrita en C# para ser definir funciones de comparación de textos en SQL Server.
Roll Your Own Fuzzy Match / Grouping (Jaro Winkler) - T-SQL -->
JaroWinklerStringSimilarity.sql (GitHub)
Cleaning Messy Data in SQL, Part 1: Fuzzy Matching Names
Master Data Services
Qué es?
Master Data Services Overview (MDS)
Data Quality Services
Data Quality Services Overview (DQS)
.Net:
SimMetrics (Java)
Similarity Metric Library, from edit distance's (Levenshtein, Gotoh, Jaro etc) to other metrics, (Soundex, Chapman). Work provided by UK Sheffield University funded by (AKT) an IRC sponsored by EPSRC, grant number GR/N15764/01.
StringSimilarity.NET
A library implementing different string similarity and distance measures. A dozen of algorithms (including Levenshtein edit distance and sibblings, Jaro-Winkler, Longest Common Subsequence, cosine similarity etc.) are currently implemented. Based upon F23.StringSimilarity.
Ver en StringSimilarity.NET en GitHub
fuzzystring: Approximate String Comparision in C#
fuzzystring-standard: Approximate String Comparision in C#
TFIDF: term frequency–inverse document frequency, is a numerical statistic that is intended to reflect how important a word is to a document in a collection or corpus. Ver TFIDF en wikipedia.
Data Matching software: a list of (Fuzzy) Data Matching software. The software in this list is open source and/or freely available.
OpenRefine: (previously Google Refine) is a powerful tool for working with messy data: cleaning it; transforming it from one format into another; and extending it with web services and external data.
Python Record Linkage Toolkit
Library to link records in or between data sources
Overview of Record Linkage Methods
SQL Server:
Beyond SoundEx - Functions for Fuzzy Searching in MS SQL Server
Librería escrita en C# para ser definir funciones de comparación de textos en SQL Server.
Roll Your Own Fuzzy Match / Grouping (Jaro Winkler) - T-SQL -->
JaroWinklerStringSimilarity.sql (GitHub)
Cleaning Messy Data in SQL, Part 1: Fuzzy Matching Names
Master Data Services
Qué es?
Master Data Services Overview (MDS)
Data Quality Services
Data Quality Services Overview (DQS)
.Net:
SimMetrics (Java)
Similarity Metric Library, from edit distance's (Levenshtein, Gotoh, Jaro etc) to other metrics, (Soundex, Chapman). Work provided by UK Sheffield University funded by (AKT) an IRC sponsored by EPSRC, grant number GR/N15764/01.
StringSimilarity.NET
A library implementing different string similarity and distance measures. A dozen of algorithms (including Levenshtein edit distance and sibblings, Jaro-Winkler, Longest Common Subsequence, cosine similarity etc.) are currently implemented. Based upon F23.StringSimilarity.
Ver en StringSimilarity.NET en GitHub
fuzzystring: Approximate String Comparision in C#
fuzzystring-standard: Approximate String Comparision in C#
TFIDF: term frequency–inverse document frequency, is a numerical statistic that is intended to reflect how important a word is to a document in a collection or corpus. Ver TFIDF en wikipedia.
Data Matching software: a list of (Fuzzy) Data Matching software. The software in this list is open source and/or freely available.
OpenRefine: (previously Google Refine) is a powerful tool for working with messy data: cleaning it; transforming it from one format into another; and extending it with web services and external data.
Python Record Linkage Toolkit
Library to link records in or between data sources
Overview of Record Linkage Methods
viernes, 10 de enero de 2020
Machine Vision / Video Surveillance / Video Analytics
Firebase: plataforma para el desarrollo de aplicaciones web y aplicaciones móviles desarrollada por James Tamplin y Andrew Lee en 2012 y adquirida por Google en 2014
Firebase products
ML Kit for Firebase
Machine Vision (MV) is the technology and methods used to provide imaging-based automatic inspection and analysis for such applications as automatic inspection, process control, and robot guidance, usually in industry.
CCTV
ML
CVR
Behavioral analytics is a recent advancement in business analytics that reveals new insights into the behavior of consumers on eCommerce platforms, online games, web and mobile applications, and IoT.
Video Analytics
- VideoIQ
- Avigilon - Video Security Solutions (LO MEJOR?)
Video Surveillance
- iCetana
-
ARTIFICIAL INTELLIGENCE IS GOING TO SUPERCHARGE SURVEILLANCE (Interesante)
Analytics, Security, Video
Artificial Intelligence for Industrial Applications
Artificial intelligence for video surveillance
Firebase products
ML Kit for Firebase
Machine Vision (MV) is the technology and methods used to provide imaging-based automatic inspection and analysis for such applications as automatic inspection, process control, and robot guidance, usually in industry.
CCTV
ML
CVR
Behavioral analytics is a recent advancement in business analytics that reveals new insights into the behavior of consumers on eCommerce platforms, online games, web and mobile applications, and IoT.
Video Analytics
- VideoIQ
- Avigilon - Video Security Solutions (LO MEJOR?)
Video Surveillance
- iCetana
-
ARTIFICIAL INTELLIGENCE IS GOING TO SUPERCHARGE SURVEILLANCE (Interesante)
Analytics, Security, Video
Artificial Intelligence for Industrial Applications
Artificial intelligence for video surveillance
miércoles, 20 de noviembre de 2019
lunes, 28 de octubre de 2019
Analytics - Herramientas y otros
Recopilación y tratamiento de la información
- Framework de carga y transformación de datos (DTS) existente (ASP.NET MVC)
- SQL Server Data Quality Services
Modelo Predictivo
- Scikit Learn
scikit-learn - Machine Learning in Python
Scikit-Learn Cheat Sheet
Choosing the right estimator
- Keras
- TensorFlow
Text Mining
Top 63 software for text analysis, text mining, text analytics
Top 27 FREE software for text analysis, text mining, text analytics
Elastic Search, Machine Learning, AI
Python
Integrar Python en una aplicación C#: IronPython
Using C# to run Python Scripts with Machine Learning Models
Algunos indicadores de riesgo
Auto Insurance - How insurance companies spot bogus claims
- Antecedentes criminales/policiales?
- Daños exagerados. Taller mecánico involucrado / inspector involucrado
- Daño físico exagerado. Actividades deportivas que no condicen con la lesión declarada
- Situación económico/financiera del cliente
- Comentarios redes: “cómo crear abolladuras de granizo falsas en el capó de su automóvil”
- Analizar fotos en Facebook puede decirnos si la persona es realmente “discapacitada”
- Hay vehículos más robados que otros.
- Sexo, edad y estado civil de la persona
- Multas de tránsito
- Lugar de residencia (urbano o rural)
- Cantidad de kilómetros recorridos por día/mes/año
- Tener hijos adolescentes o menores de 21, que puedan estar o no habilitados para manejar
- Framework de carga y transformación de datos (DTS) existente (ASP.NET MVC)
- SQL Server Data Quality Services
Modelo Predictivo
- Scikit Learn
scikit-learn - Machine Learning in Python
Scikit-Learn Cheat Sheet
Choosing the right estimator
- Keras
- TensorFlow
Text Mining
Top 63 software for text analysis, text mining, text analytics
Top 27 FREE software for text analysis, text mining, text analytics
Elastic Search, Machine Learning, AI
Python
Integrar Python en una aplicación C#: IronPython
Using C# to run Python Scripts with Machine Learning Models
Algunos indicadores de riesgo
Auto Insurance - How insurance companies spot bogus claims
- Antecedentes criminales/policiales?
- Daños exagerados. Taller mecánico involucrado / inspector involucrado
- Daño físico exagerado. Actividades deportivas que no condicen con la lesión declarada
- Situación económico/financiera del cliente
- Comentarios redes: “cómo crear abolladuras de granizo falsas en el capó de su automóvil”
- Analizar fotos en Facebook puede decirnos si la persona es realmente “discapacitada”
- Hay vehículos más robados que otros.
- Sexo, edad y estado civil de la persona
- Multas de tránsito
- Lugar de residencia (urbano o rural)
- Cantidad de kilómetros recorridos por día/mes/año
- Tener hijos adolescentes o menores de 21, que puedan estar o no habilitados para manejar
martes, 8 de octubre de 2019
Windows 10 Update KB4524147 VM Ware
Al actualizar Windows 10 (KB4524147) por razones de compatibilidad no permite ejecutar VM Ware
https://www.windowslatest.com/2019/10/05/windows-10-update-breaks-search-and-vmware-workstation/
Temporalmente no hay solucion por parte de Microsoft.
La solución es
https://www.windowslatest.com/2019/10/05/windows-10-update-breaks-search-and-vmware-workstation/
Temporalmente no hay solucion por parte de Microsoft.
La solución es
- Eliminar la actualización KB4524147.
- Reiniciar
- Luego, descargar "Show or hide updates" (https://support.microsoft.com/en-us/help/4026726/windows-10-hide-updates-or-driver-updates) y ocultar la actualización des instalada.
Suscribirse a:
Entradas (Atom)