Practical MySQL & MariaDB

কিভাবে CSV ফাইল MySQL-এ ইম্পোর্ট করবেন: LOAD DATA INFILE সহ সম্পূর্ণ গাইড ও ট্রাবলশুটিং

SQL মৌলিক বিষয়সমূহ
目次

১. MySQL-এ CSV ফাইল ইম্পোর্টের পরিচিতি

MySQL-এ CSV ফাইল ইম্পোর্ট করা ডেটা ম্যানেজমেন্টকে সহজ করার এবং ম্যানুয়াল ডেটা এন্ট্রির প্রয়োজন দূর করার একটি শক্তিশালী পদ্ধতি। উদাহরণস্বরূপ, যখন আপনাকে একাধিক ডেটা সোর্স থেকে সংগ্রহ করা তথ্য একসাথে ডাটাবেসে ইম্পোর্ট করতে হয়, অথবা বাহ্যিক সিস্টেম থেকে স্বয়ংক্রিয়ভাবে ডেটা প্রক্রিয়া করতে হয়, তখন CSV ইম্পোর্ট অত্যন্ত উপকারী হয়ে ওঠে।

CSV ইম্পোর্টের সাধারণ ব্যবহার ক্ষেত্রসমূহ

  • বৃহৎ পরিমাণের ডেটা প্রক্রিয়াকরণ : হাজার হাজার রেকর্ড ম্যানুয়ালি এন্ট্রি করার পরিবর্তে, আপনি CSV ইম্পোর্ট ব্যবহার করে দ্রুত প্রক্রিয়া করতে পারেন।
  • ডেটা মাইগ্রেশন : অন্য সিস্টেম থেকে এক্সপোর্ট করা ডেটা MySQL-এ ইম্পোর্ট করার সময় এটি সুবিধাজনক।
  • নিয়মিত ডেটা আপডেট : যেসব সিস্টেমকে পর্যায়ক্রমে ডেটা আপডেটের প্রয়োজন, তারা CSV ফাইল ব্যবহার করে প্রক্রিয়াটি স্বয়ংক্রিয় করতে পারে।

২. পূর্বশর্তসমূহ

MySQL-এ CSV ফাইল ইম্পোর্ট করার আগে, কিছু সেটিংস এবং প্রস্তুতি প্রয়োজন। এগুলো মসৃণ এবং ত্রুটিমুক্ত ডেটা ইম্পোর্ট প্রক্রিয়া নিশ্চিত করে।

২.১ প্রয়োজনীয় পরিবেশ

  • MySQL সার্ভার ইনস্টলেশন ধরে নেওয়া হয় যে MySQL সঠিকভাবে ইনস্টল করা আছে। আপনার পরিবেশে (Windows, macOS, বা Linux) MySQL সঠিকভাবে চলমান আছে কিনা নিশ্চিত করুন।
  • প্রয়োজনীয় অনুমতিগুলি যাচাই করুন CSV ফাইল ইম্পোর্ট করতে MySQL ইউজারের উপযুক্ত অধিকার থাকতে হবে। বিশেষ করে, LOAD DATA INFILE চালানোর অনুমতি প্রয়োজন। এই অনুমতি না থাকলে ইম্পোর্ট প্রত্যাখ্যান হতে পারে।

২.২ CSV ফাইল ফরম্যাট

  • ডিলিমিটার CSV ফাইল সাধারণত কমা-সেপারেটেড হয়, তবে কিছু ক্ষেত্রে ট্যাব বা সেমিকোলন ব্যবহার হতে পারে। আগে থেকেই কোন ডিলিমিটার ব্যবহার হচ্ছে তা যাচাই করুন।
  • এনকোডিং যাচাই করুন যদি CSV ফাইল ভিন্ন ক্যারেক্টার এনকোডিং (যেমন UTF-8 বা Shift-JIS) দিয়ে সংরক্ষিত হয়, ইম্পোর্টের সময় ক্যারেক্টার ক্ষতি হতে পারে। ফাইলের এনকোডিং আগে থেকেই যাচাই করুন এবং প্রয়োজন হলে রূপান্তর করুন।

৩. LOAD DATA INFILE কমান্ড ব্যবহার করে CSV ইম্পোর্ট

MySQL-এ CSV ফাইল ইম্পোর্ট করার সবচেয়ে সাধারণ পদ্ধতি হল LOAD DATA INFILE কমান্ড ব্যবহার করা। এই কমান্ডের মাধ্যমে আপনি সহজে বড় পরিমাণের ডেটা ডাটাবেসে লোড করতে পারেন।

৩.১ মৌলিক সিনট্যাক্স

নিম্নে MySQL-এ CSV ফাইল ইম্পোর্ট করার জন্য ব্যবহৃত মৌলিক সিনট্যাক্স দেওয়া হয়েছে।

LOAD DATA INFILE '/path/to/file.csv' INTO TABLE table_name
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n';
  • FIELDS TERMINATED BY : ফিল্ড ডিলিমিটার নির্ধারণ করে। সাধারণত কমা ব্যবহার করা হয়।
  • LINES TERMINATED BY : লাইন ডিলিমিটার নির্ধারণ করে। সাধারণত \n (নিউলাইন) ব্যবহার করা হয়।

৩.২ উদাহরণ এক্সিকিউশন

নিম্নের উদাহরণে user_data.csv নামের ফাইলটি users টেবিলে ইম্পোর্ট করা হয়েছে।

LOAD DATA INFILE '/path/to/user_data.csv' INTO TABLE users
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
IGNORE 1 LINES;
  • IGNORE 1 LINES : CSV ফাইলের প্রথম সারি (হেডার) এড়িয়ে যায়। কলাম নামগুলো যদি প্রথম লাইনে থাকে, তখন এই অপশনটি উপকারী।

৩.৩ গুরুত্বপূর্ণ নোট: ফাইল পাথ এবং অনুমতিসমূহ

ফাইল পাথ নির্ধারণ করার সময়, ফাইলটি MySQL সার্ভার যে ডিরেক্টরিতে অ্যাক্সেস করতে পারে সেখানে থাকতে হবে। যদি সার্ভার ফাইলটি অ্যাক্সেস করতে না পারে, তবে ক্লায়েন্ট সাইড থেকে ডেটা লোড করার জন্য LOAD DATA LOCAL INFILE ব্যবহার করুন।

৪. সাধারণ সমস্যার সমাধান

নিম্নে CSV ফাইল ইম্পোর্টের সময় ঘটতে পারে এমন সাধারণ সমস্যাগুলোর সমাধান দেওয়া হয়েছে।

৪.১ ফাইল পাথ সংক্রান্ত সমস্যা

যদি ফাইল পাথ সঠিকভাবে নির্ধারিত না হয়, আপনি The MySQL server is not permitted to read from the file এর মতো ত্রুটি বার্তা দেখতে পারেন। এই ক্ষেত্রে, সার্ভার-সাইড ফাইল পাথ সঠিক কিনা যাচাই করুন। এছাড়াও LOAD DATA LOCAL INFILE অপশন ব্যবহার করে লোকাল ফাইল লোড করা যেতে পারে।

LOAD DATA LOCAL INFILE '/path/to/file.csv' INTO TABLE table_name
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n';

৪.২ ক্যারেক্টার এনকোডিং সংক্রান্ত সমস্যা

যদি ফাইলটি ভিন্ন ক্যারেক্টার এনকোডিং দিয়ে সংরক্ষিত হয়, ইম্পোর্টের সময় ক্যারেক্টার ক্ষতি হতে পারে। এই সমস্যার থেকে বাঁচতে, ফাইলের এনকোডিং আগে থেকেই যাচাই করুন এবং MySQL-এ উপযুক্ত ক্যারেক্টার সেট নির্ধারণ করুন।

SET NAMES 'utf8mb4';

৫. ব্যবহারিক উদাহরণ: CSV ইম্পোর্ট প্রক্রিয়া

এখানে, আমরা MySQL-এ একটি প্রকৃত CSV ফাইল ইম্পোর্ট করার ধাপে ধাপে পদ্ধতি ব্যাখ্যা করছি।

5.1 CSV ফাইল প্রস্তুত করা

নিম্নলিখিত বিষয়বস্তু সহ একটি CSV ফাইল (data.csv) তৈরি করুন।

id,name,age
1,Taro Yamada,28
2,Hanako Sato,34
3,Ichiro Tanaka,45

5.2 কমান্ড চালানো

নির্মিত CSV ফাইলটি users টেবিলে ইম্পোর্ট করার জন্য নিম্নলিখিত কমান্ড চালান।

LOAD DATA INFILE '/path/to/data.csv' INTO TABLE users
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
IGNORE 1 LINES;

এই কমান্ডটি CSV ফাইলের দ্বিতীয় সারি থেকে ডেটা users টেবিলে ইম্পোর্ট করে।

6. উন্নত: ত্রুটি পরিচালনা এবং ডুপ্লিকেট ডেটা প্রতিরোধ

এই বিভাগে CSV ইম্পোর্টের সময় ত্রুটি কীভাবে পরিচালনা করবেন এবং ডুপ্লিকেট ডেটা কীভাবে সামলাবেন তা ব্যাখ্যা করা হয়েছে।

6.1 ডুপ্লিকেট ডেটা পরিচালনা

যদি একই কী সহ ডেটা ইতিমধ্যে থাকে, তবে আপনি REPLACE অপশন ব্যবহার করে ডুপ্লিকেট সারিগুলি নতুন ডেটা দিয়ে ওভাররাইট করতে পারেন।

LOAD DATA INFILE '/path/to/data.csv' INTO TABLE users
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
IGNORE 1 LINES
REPLACE;

6.2 ত্রুটি পরিচালনা

ইম্পোর্টের সময় ত্রুটি ঘটলে এবং আপনি প্রক্রিয়াটি চালিয়ে যেতে চাইলে, IGNORE অপশন ব্যবহার করুন। এটি সমস্যাযুক্ত সারিগুলি বাদ দেয় এবং অবশিষ্ট বৈধ ডেটা ইম্পোর্ট করে।

LOAD DATA INFILE '/path/to/data.csv' INTO TABLE users
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
IGNORE 1 LINES
IGNORE;

7. উপসংহার

MySQL-এ CSV ফাইল ইম্পোর্ট করা বড় ডেটাসেটগুলি দক্ষতার সাথে পরিচালনা এবং সিস্টেমের মধ্যে ডেটা স্থানান্তরের জন্য একটি শক্তিশালী টুল। মৌলিক পদ্ধতিগুলি বোঝা এবং সঠিক ত্রুটি পরিচালনা ও ডুপ্লিকেট প্রতিরোধ কৌশলগুলি প্রয়োগের মাধ্যমে আপনি স্থিতিশীল এবং নির্ভরযোগ্য ডেটা ইম্পোর্ট অর্জন করতে পারেন।

ভবিষ্যৎ প্রবন্ধে, আমরা MySQL ডাটাবেস থেকে ডেটা কীভাবে রপ্তানি করা যায় তা বিশদভাবে ব্যাখ্যা করব। আপনার ডেটা ব্যবস্থাপনা দক্ষতা উন্নত করতে থাকুন।