Hieu Nguyen Van behitek

Chương 1. Giới thiệu khoa học dữ liệu và tính toán dữ liệu lớn

Li M. Chen

Tóm lược Khoa học dữ liệu là gì? Dữ liệu có yếu tố khoa học trong đó. Nó khác với toán học cổ điển, nó sử dụng các mô hình toán học tương ứng với dữ liệu. Nhưng ngày này, chúng ta mong muốn tìm kiếm các luật và thuộc ính có trong tập dữ liệu, thậm chí là trong các tập dữ liệu khác nhau. Trong chương này, chúng tôi sẽ trình bày về khoa học dữ liệu và mối quan hệ của nó với dữ liệu lớn, điện toán đám mây và khai phá dữ liệu. Chúng tôi cũng sẽ bàn về các bài toán đang được nghiên cứu trong lĩnh vực khoa học máy tính và cung cấp các khái niệm liên quan cơ bản về ngành công nghiệp khoa học dữ liệu.

1.1 Khai phá dữ liệu và điện toán đám mây: Mở đầu của dữ liệu lớn và khoa học dữ liệu

Remove duplicate line in text file

awk '!seen[$0]++' filename > output.txt

Merge file

cat file1 fil2 > merge.txt

Show file to read

less filename

Show head

head -n 1000 filename

Show tail

tail -n 1000 filename

Regular Expressions

Basic Syntax

/.../: Start and end regex delimiters
|: Alternation
(): Grouping

	a
	á
	à
	ã
	ả
	ạ
	ác
	ắc
	ách
	ạch

	Hoàn Kiếm
	Đền Ngọc Sơn
	Chùa Một Cột
	Quảng Trường Ba Đình
	phố cổ Hà Nội
	Hồ Tây
	Chùa Trầm
	Hàm Lợn
	Khu du lịch sinh thái Ba Vì
	Làng cổ Đường Lâm

	Phở
	Chả cá
	Bánh xèo
	Cao lâù
	Rau muống
	Nem rán
	Chả giò
	Gỏi cuốn
	Bún bò Huế
	Bánh khọt

	Anh đào
	Bình bát
	Bòn bon
	Bơ
	Bưởi
	Cam
	Cam sành
	Chanh ta
	Chanh leo
	Chà là

	#include <stdio.h>
	#include <stdlib.h>


	struct SinhVien{
	char ten[30];
	char gt[5];
	int age;
	float dT, dL, dH;
	float dtb = 0;

	# -- coding: utf-8 --

	import regex as re

	uniChars = "àáảãạâầấẩẫậăằắẳẵặèéẻẽẹêềếểễệđìíỉĩịòóỏõọôồốổỗộơờớởỡợùúủũụưừứửữựỳýỷỹỵÀÁẢÃẠÂẦẤẨẪẬĂẰẮẲẴẶÈÉẺẼẸÊỀẾỂỄỆĐÌÍỈĨỊÒÓỎÕỌÔỒỐỔỖỘƠỜỚỞỠỢÙÚỦŨỤƯỪỨỬỮỰỲÝỶỸỴÂĂĐÔƠƯ"
	unsignChars = "aaaaaaaaaaaaaaaaaeeeeeeeeeeediiiiiooooooooooooooooouuuuuuuuuuuyyyyyAAAAAAAAAAAAAAAAAEEEEEEEEEEEDIIIOOOOOOOOOOOOOOOOOOOUUUUUUUUUUUYYYYYAADOOU"


	def loaddicchar():
	dic = {}

	// https://daynhauhoc.com/t/share-code-doc-so-thanh-chu-so-lon-bao-nhieu-cung-can-tat/62701/
	#include <iostream>
	#include <string>
	#include <algorithm>
	#include <exception>
	#include <cassert>
	#ifdef __unix__
	#include <clocale>
	#elif defined _WIN32 \|\| defined _WIN64
	#include <fcntl.h> //_O_WTEXT