Category: AI

A Step-by-Step Guide to Integrating and Using Claude Code Action on GitHub

Posted on by hello@scuti

Investigate how Claude Code Action is great. Just create an issue and put  a mention to Claude  like @claude, Claude can write the code automatically

Introduction

In the current era of rapidly evolving technology, artificial intelligence (AI) 

stands out as one of the most significant and transformative breakthroughs on a global scale. Among the various AI-driven tools, Claude — particularly the Claude Action Code — represents a powerful integration that can be embedded into user’s GitHub repositories to address raised issues with remarkable accuracy and efficiency. This paper aims to explore the capabilities and applications of Claude Action Code in modern software development workflows.

Body content

Claude Code Action is a extension categorized as a “Action” and made available on the GitHub Marketplace by Anthropic. Users can search for and utilize it by following the provided setup instructions outlined in the README documentation. Below is a summary of the basic setup steps for integrating Claude Code Action into user’s GitHub repository: 

1.Create a workflow folder:

On GitHub: In user’s GitHub repository, click “Add file”:

insert the configuration into the path:“.git/workflows/[file_name].yml”. For instance: 

Next, insert the appropriate workflow configuration for this extension, depending on your intended use:

For example: 

name: Claude PR Assistant

on:

  issue_comment:

    types: [created]

  pull_request_review_comment:

    types: [created]

  issues:

    types: [opened, assigned]

  pull_request_review:

    types: [submitted]

 

jobs:

  claude-code-action:

    if: |

      (github.event_name == ‘issue_comment’ && 

contains(github.event.comment.body, ‘@claude’)) ||

      (github.event_name == ‘pull_request_review_comment’ && contains(github.event.comment.body, ‘@claude’)) ||

      (github.event_name == ‘pull_request_review’ && 

contains(github.event.review.body, ‘@claude’)) ||

      (github.event_name == ‘issues’ && contains(github.event.issue.body, ‘@claude’))

    runs-on: ubuntu-latest

    permissions:

      contents: write

      pull-requests: read

      issues: read

      id-token: write

    steps:

      – name: Checkout repository

        uses: actions/checkout@v4

        with:

          fetch-depth: 1

 

      – name: Run Claude PR Action

        uses: anthropics/claude-code-action@beta

        with:

          anthropic_api_key: ${{ secrets.ANTHROPIC_API_KEY }}

          timeout_minutes: “60”

Then, click “Commit changes” to successfully add the configuration to your repository.

On the user’s local machine: If a folder in VScode has already  been connected to the GitHub repository, the user can manually create a workflow directory and a .yml file to store the Claude configuration. Then, file can be pushed to the GitHub repository

2.API key:

  • After that, the API key should be added to the repository’s Secrets under the Setting tab, rather than being hard-coded directly into workflow file to prevent unauthorized access

 

Find Action in Secret and variables

Create a new repository secret

Add your API key to Secret’s description

Name secret as key’s name in the workflow file

✅Correct

❌Never do it

3. Using Claude Code Action: 

User creates a new issue within repository where Claude is intended to be used: 

The user describes the issue to be resolved – such as feature creation, bug fixing, code review, …  – in the issue’s description. You can tag “@claude” directly in the description or in a comment after the issue is created, in order trigger Claude to process the request

Ex: Ask Claude to generate complete login and registration pages based on the initial files in the repo

Claude is invoked via API to address the issue described, with the response time depending on the complexity of the request. It uses the token associated with your API key to read the issue content as well as to create or modify code within the repository

Claude’s response will appear in the comments section of the issue.

Here, Claude generates additional files, for example register.html and dashboard.html, as part of the requested implementation and show what changes are made to each file — including which parts are added, modified, or deleted.

At this point, Claude has created a separate branch in the repository containing the proposed changes. The user can then review and consider merging these updates into the main branch via a pull request.

After successfully merging into the main branch

 

Following a successful merge, the issue may be closed. At this point, Claude has been effectively utilized to generate complete, functional demo pages for user login and registration.

 

4.Result:

Registration page

Login screen

Dashboard screen

In summary, Claude Code Action proves to be a highly effective tool for streamlining development tasks, making it easier for both individuals and teams to enhance productivity.

Buổi học nội bộ! Tìm hiểu “MCP” – giao thức không thể thiếu trong ứng dụng AI tạo sinh

Posted on by hello@scuti

Internal seminar about MCP

 

Xin chào, tôi là Kakeya, Giám đốc điều hành của Scuti.

Công ty chúng tôi chuyên phát triển offshore tại Việt Nam với thế mạnh về AI tạo sinh. Chúng tôi cung cấp các dịch vụ như Tư vấn AI tạo sinh và AI-OCR, và gần đây rất vui mừng khi nhận được nhiều yêu cầu phát triển hệ thống tích hợp cùng AI tạo sinh.

Gần đây, Scuti đã tổ chức một buổi học nội bộ để nâng cao hiểu biết về “MCP (Model Connection Protocol)”.

MCP là một giao thức dùng để kết nối AI – đặc biệt là LLM (Mô hình ngôn ngữ lớn) – với các dịch vụ bên ngoài. Mặc dù nghe có vẻ kỹ thuật, nhưng thực tế lại rất hữu ích ngay cả đối với những người không phải kỹ sư. Ví dụ, khi sử dụng các công cụ như Claude, MCP giúp tích hợp hiệu quả với các dịch vụ khác, nâng cao năng suất đáng kể.

Buổi học này hướng đến cả kỹ sư và những người không chuyên kỹ thuật. Nội dung bao gồm khái niệm cơ bản về MCP, các ví dụ ứng dụng thực tế, cũng như cách triển khai vào công việc hàng ngày. Một điểm nổi bật là việc sử dụng MCP kết hợp với các công cụ phát triển như Cursor để kết nối với các dịch vụ bên ngoài, từ đó tăng tốc độ phát triển và nâng cao chất lượng sản phẩm. Đây là kỹ năng gần như bắt buộc đối với kỹ sư.

Tại Scuti, chúng tôi luôn nỗ lực tạo ra môi trường giúp mọi thành viên cập nhật các công nghệ mới nhất. Ngoài các buổi hội thảo nội bộ thường xuyên, chúng tôi còn có chính sách thưởng cho việc nghiên cứu và chia sẻ kết quả, cũng như hỗ trợ nhân viên lấy các chứng chỉ kỹ thuật.

Trong thời đại AI tạo sinh ngày càng gắn liền với sự phát triển kinh doanh, việc toàn bộ nhân viên có cùng nền tảng kiến thức và khả năng áp dụng thực tiễn là điều vô cùng quan trọng. Thông qua các buổi học như thế này, Scuti tiếp tục củng cố năng lực công nghệ và khả năng phối hợp nội bộ một cách vững chắc.

Cursor 0.50 Just Dropped – Your AI-Powered Coding Assistant Just Got Smarter

Posted on by Cuong Dinh

💡 Cursor 0.50 Just Dropped – Your AI-Powered Coding Assistant Just Got Smarter

TL;DR: With the release of Cursor 0.50, developers get access to request-based billing, background AI agents, smarter multi-file edits, and deeper workspace integration. Cursor is fast becoming the most capable AI coding tool for serious developers.

🚀 What Is Cursor?

Cursor is an AI-native code editor built on top of VS Code, designed to let AI work with your code rather than next to it. With GPT-4 and Claude integrated deeply into its architecture, Cursor doesn’t just autocomplete — it edits, debugs, understands your full project, and runs background agents to help you move faster.

🔥 What’s New in Cursor 0.50?

💰 Request-Based Billing + Max Mode for All Models

Cursor now offers:

  • Transparent usage-based pricing — You only pay for requests you make.

  • Max Mode for all LLMs (GPT-4, Claude, etc.) — Access higher-quality reasoning per token.

This change empowers all users — from solo hackers to enterprise teams — to choose the right balance between cost and quality.

🤖 Background AI Agents (Yes, Parallel AI!)

One of the most powerful new features is background AI agents:

  • Agents run asynchronously and can take over tasks like bug fixing, PR writing, and large-scale refactoring.

  • You can now “send a task” to an agent, switch context, and return later — a huge leap in multitasking with AI.

Powered by the Multi-Context Project (MCP) framework, these agents can reference more of your codebase than ever before.

🧠 Tab Model v2: Smarter, Cross-File Edits

Cursor’s AI can now:

  • Suggest changes across multiple files — critical for large refactors.

  • Understand relationships between files (like components, hooks, or service layers).

  • Provide syntax-highlighted AI completions for better visual clarity.

🛠️ Redesigned Inline Edit Flow

Inline editing (Cmd/Ctrl+K) is now:

  • More intuitive, with options to edit the whole file (⌘⇧⏎) or delegate to an agent (⌘L).

  • Faster and scalable for large files (yes, even thousands of lines).

This bridges the gap between simple fixes and deep code transformations.

🗂️ Full-Project Context + Multi-Root Workspaces

Cursor now handles large, complex projects better than ever:

  • You can use @folders to add whole directories into the AI’s context.

  • Multi-root workspace support means Cursor can understand and work across multiple codebases — essential for microservices and monorepos.

🧪 Real Use Cases (from the Community)

According to GenerativeAI.pub’s deep dive, developers are already using Cursor 0.50 to:

  • Let background agents auto-refactor legacy modules.

  • Draft PRs from diffs in seconds.

  • Inject whole folders into the AI context for more accurate suggestions.

It’s not just about faster code — it’s about working smarter with an AI assistant that gets the big picture.

📌 Final Thoughts

With Cursor 0.50, the future of pair programming isn’t just someone typing next to you — it’s an agent that can read, think, and refactor your code while you focus on building features. Whether you’re a solo developer or a CTO managing a team, this update is a must-try.

👉 Try it now at cursor.sh or read the full changelog here.

🏷 Suggested Tags for SEO:

#AIProgramming, #CursorEditor, #GPT4Dev, #AIAgents, #CodeRefactoring, #DeveloperTools, #VSCodeAI, #Productivity, #GenerativeAI

Ask Questions about Your PDFs with Cohere Embeddings + Gemini LLM

Posted on by hello@scuti

🔍 Experimenting with Image Embedding Using Large AI Models

Recently, I experimented with embedding images using major AI models to build a multimodal semantic search system, where users can search images with text (and vice versa).

🧐 A Surprising Discovery

I was surprised to find that as of 2025, Cohere is the only provider that supports direct image embedding via API.
Other major models like OpenAI and Gemini (by Google) do support image input in general, but do not clearly provide a direct embedding API for images.

Reason for Choosing Cohere

I chose to try Cohere’s embed-v4.0 because:

  • It supports embedding text, images, and even PDF documents (converted to images) into the same vector space.

  • You can choose the embedding size (I used the default, 1536).

  • It returns normalized embeddings that are ready to use for search and classification tasks.

⚙️ How I Built the System

I used Python for implementation. The system has two main flows:

1️⃣ Document Preparation Flow

  • Load documents, images, or text data that I want to store.

  • Use the Cohere API to embed them into vector representations.

  • Save these vectors in a database or vector store for future search queries.

2️⃣ User Query Flow

  • When a user asks a question or types a query:

    • Use Cohere to embed the query into a vector.

    • Search for the most similar documents in the vector space.

    • Return results to the user using a LLM (Large Language Model) like Gemini by Google.

🔑 How to Get API Keys

🔧 Flow 1: Setting Up Cohere and Gemini in Python

✅ Step 1: Install and Set Up Cohere

Run the following command in your terminal to install the Cohere Python SDK:

pip install -q cohere

Then, initialize the Cohere client in your Python script:

import cohere

# Replace <<YOUR_COHERE_KEY>> with your actual Cohere API key
cohere_api_key = “<<YOUR_COHERE_KEY>>”
co = cohere.ClientV2(api_key=cohere_api_key)

✅ Step 2: Install and Set Up Gemini (Google Generative AI)

Install the Gemini client library with:

pip install -q google-genai

Then, initialize the Gemini client in your Python script:

from google import genai

# Replace <<YOUR_GEMINI_KEY>> with your actual Gemini API key
gemini_api_key = “<<YOUR_GEMINI_KEY>>”
client = genai.Client(api_key=gemini_api_key)

📌 Flow 1: Document Preparation and Embedding

Chúng ta sẽ thực hiện các bước để chuyển PDF thành dữ liệu embedding bằng Cohere.

📥 Step 1: Download the PDF

We start by downloading the PDF from a given URL.

python

def download_pdf_from_url(url, save_path=”downloaded.pdf”):
response = requests.get(url)
if response.status_code == 200:
with open(save_path, “wb”) as f:
f.write(response.content)
print(“PDF downloaded successfully.”)
return save_path
else:
raise Exception(f”PDF download failed. Error code: {response.status_code}”)

# Example usage
pdf_url = “https://sgp.fas.org/crs/misc/IF10244.pdf”
local_pdf_path = download_pdf_from_url(pdf_url)

🖼️ Step 2: Convert PDF Pages to Text + Image

We extract both text and image for each page using PyMuPDF.

python

import fitz # PyMuPDF
import base64
from PIL import Image
import io

def extract_page_data(pdf_path):
doc = fitz.open(pdf_path)
pages_data = []
img_paths = []

for i, page in enumerate(doc):
text = page.get_text()

pix = page.get_pixmap()
image = Image.open(io.BytesIO(pix.tobytes(“png”)))

buffered = io.BytesIO()
image.save(buffered, format=”PNG”)
encoded_img = base64.b64encode(buffered.getvalue()).decode(“utf-8″)
data_url = f”data:image/png;base64,{encoded_img}”

content = [
{“type”: “text”, “text”: text},
{“type”: “image_url”, “image_url”: {“url”: data_url}},
]

pages_data.append({“content”: content})
img_paths.append({“data_url”: data_url})

return pages_data, img_paths

# Example usage
pages, img_paths = extract_page_data(local_pdf_path)

📤 Step 3: Embed Using Cohere

Now, send the fused text + image inputs to Cohere’s embed-v4.0 model.

python

res = co.embed(
model=”embed-v4.0″,
inputs=pages, # fused inputs
input_type=”search_document”,
embedding_types=[“float”],
output_dimension=1024,
)

embeddings = res.embeddings.float_
print(f”Number of embedded pages: {len(embeddings)}”)

✅ Flow 1 complete: You now have the embedded vector representations of your PDF pages.

👉 Proceed to Flow 2 (e.g., storing, indexing, or querying the embeddings).

🔍 Flow 2: Ask a Question and Retrieve the Answer Using Image + LLM

This flow allows the user to ask a natural language question, find the most relevant image using Cohere Embed v4, and then answer the question using Gemini 2.5 Vision LLM.

💬 Step 1: Ask the Question

We define the user query in plain English.

python
question = “What was the total number of wildfires in the United States from 2007 to 2015?”

🧠 Step 2: Convert the Question to Embedding & Find Relevant Image

We use embed-v4.0 with input type search_query, then calculate cosine similarity between the question embedding and previously embedded document images.

python

def search(question, max_img_size=800):
# Get embedding for the query
api_response = co.embed(
model=”embed-v4.0″,
input_type=”search_query”,
embedding_types=[“float”],
texts=[question],
output_dimension=1024,
)

query_emb = np.asarray(api_response.embeddings.float[0])

# Compute cosine similarity with all document embeddings
cos_sim_scores = np.dot(embeddings, query_emb)
top_idx = np.argmax(cos_sim_scores) # Most relevant image

hit_img_path = img_paths[top_idx]
base64url = hit_img_path[“data_url”]

print(“Question:”, question)
print(“Most relevant image:”, hit_img_path)

# Display the matched image
if base64url.startswith(“data:image”):
base64_str = base64url.split(“,”)[1]
else:
base64_str = base64url

image_data = base64.b64decode(base64_str)
image = Image.open(io.BytesIO(image_data))

image.thumbnail((max_img_size, max_img_size))
display(image)

return base64url

🤖 Step 3: Use Vision-LLM (Gemini 2.5) to Answer

We use Gemini 2.5 Flash to answer the question based on the most relevant image.

python

def answer(question, base64_img_str):
if base64_img_str.startswith(“data:image”):
base64_img_str = base64_img_str.split(“,”)[1]

image_bytes = base64.b64decode(base64_img_str)
image = Image.open(io.BytesIO(image_bytes))

prompt = [
f”””Answer the question based on the following image.
Don’t use markdown.
Please provide enough context for your answer.

Question: {question}”””,
image
]

response = client.models.generate_content(
model=”gemini-2.5-flash-preview-04-17″,
contents=prompt
)

answer = response.text
print(“LLM Answer:”, answer)

▶️ Step 4: Run the Full Flow

python
top_image_path = search(question)
answer(question, top_image_path)

🧪 Example Usage:

question = “What was the total number of wildfires in the United States from 2007 to 2015?”

# Step 1: Find the best-matching image
top_image_path = search(question)

# Step 2: Use the image to answer the question
answer(question, top_image_path)

🧾 Output:

Question: What was the total number of wildfires in the United States from 2007 to 2015?

Most relevant image:

 

LLM Answer: Based on the provided image, to find the total number of wildfires in the United States from 2007 to 2015, we need to sum the number of wildfires for each year in this period. Figure 1 shows the annual number of fires in thousands from 1993 to 2022, which covers the requested period. Figure 2 provides the specific number of fires for 2007 and 2015 among other years. Using the specific values from Figure 2 for 2007 and 2015, and estimating the number of fires for the years from 2008 to 2014 from Figure 1, we can calculate the total.

 

The number of wildfires in 2007 was 67.8 thousand (from Figure 2).

Estimating from Figure 1:

2008 was approximately 75 thousand fires.

2009 was approximately 75 thousand fires.

2010 was approximately 67 thousand fires.

2011 was approximately 74 thousand fires.

2012 was approximately 68 thousand fires.

2013 was approximately 47 thousand fires.

2014 was approximately 64 thousand fires.

The number of wildfires in 2015 was 68.2 thousand (from Figure 2).

 

Summing these values:

Total = 67.8 + 75 + 75 + 67 + 74 + 68 + 47 + 64 + 68.2 = 606 thousand fires.

 

Therefore, the total number of wildfires in the United States from 2007 to 2015 was approximately 606,000. This number is based on the sum of the annual number of fires obtained from Figure 2 for 2007 and 2015, and estimates from Figure 1 for the years 2008 through 2014.

Try this full pipeline on Google Colab: https://colab.research.google.com/drive/1kdIO-Xi0MnB1c8JrtF26Do3T54dij8Sf

🧩 Final Thoughts

This simple yet powerful two-step pipeline demonstrates how you can combine Cohere’s Embed v4 with Gemini’s Vision-Language capabilities to build a system that understands both text and images. By embedding documents (including large images) and using semantic similarity to retrieve relevant content, we can create a more intuitive, multimodal question-answering experience.

This approach is especially useful in scenarios where information is stored in visual formats like financial reports, dashboards, or charts — allowing LLMs to not just “see” the image but reason over it in context.

Multimodal retrieval-augmented generation (RAG) is no longer just theoretical — it’s practical, fast, and deployable today.

7 Bí Quyết Giúp Nâng Cao Độ Chính Xác Của OCR Biểu Mẫu Phi Tiêu Chuẩn

Posted on by hello@scuti

7 Bí Quyết Giúp Nâng Cao Độ Chính Xác Của OCR Biểu Mẫu Phi Tiêu Chuẩn

Xin chào, tôi là Kakeya, đại diện của công ty Scuti.

Công ty chúng tôi chuyên cung cấp các dịch vụ như Phát triển phần mềm offshore và phát triển theo hình thức Labo tại Việt Nam, cũng như Cung cấp giải pháp AI tạo sinh. Gần đây, chúng tôi rất vinh dự khi nhận được nhiều yêu cầu phát triển hệ thống kết hợp với AI tạo sinh.

Nhiều người có thể đang cân nhắc triển khai OCR biểu mẫu phi tiêu chuẩn nhưng vẫn do dự do lo ngại về độ chính xác. OCR (Nhận dạng ký tự quang học) là một công nghệ cực kỳ hữu ích giúp chuyển đổi tài liệu giấy thành dữ liệu số. Tuy nhiên, đối với các biểu mẫu phi tiêu chuẩn có bố cục linh hoạt và định dạng không cố định, vấn đề độ chính xác thường trở nên nghiêm trọng hơn.

Ngay cả khi đã áp dụng OCR, nếu độ chính xác nhận dạng thấp, khối lượng công việc chỉnh sửa thủ công sẽ tăng lên. Kết quả là, lợi ích kỳ vọng về nâng cao hiệu suất làm việc và cắt giảm chi phí có thể không đạt được như mong đợi. Do đó, trong bài viết này, chúng tôi sẽ giới thiệu 7 phương pháp cụ thể để cải thiện đáng kể độ chính xác của OCR biểu mẫu phi tiêu chuẩn.

Bằng cách áp dụng những bí quyết này, bạn có thể nâng cao đáng kể độ chính xác của OCR, tối ưu hóa quy trình làm việc và giảm chi phí. Hãy đọc đến cuối bài viết và áp dụng những kiến thức này vào doanh nghiệp của bạn.

Bài viết này sẽ cung cấp cái nhìn toàn diện, bắt đầu từ những kiến thức cơ bản về OCR biểu mẫu phi tiêu chuẩn, tiếp đến là các kỹ thuật cải thiện độ chính xác và cuối cùng là khám phá tương lai của OCR với sự hỗ trợ của các công nghệ tiên tiến nhất.

OCR Biểu Mẫu Phi Tiêu Chuẩn Là ì?

What Is Non-Standard Form OCR?​

Nếu bạn muốn tìm hiểu thêm về AI OCR, hãy xem trước bài viết này.
Bài viết liên quan: Các Ứng Dụng Đột Phá Của AI OCR Tạo Sinh Và 5 Phương Pháp Chính

Kiến thức cơ bản về OCR: Cơ chế và các loại hình

OCR (Nhận dạng ký tự quang học) là công nghệ giúp trích xuất thông tin văn bản từ dữ liệu hình ảnh. Cụ thể, nó cho phép máy tính đọc chữ từ các tài liệu giấy đã được quét hoặc chụp ảnh. OCR được ứng dụng rộng rãi trong việc số hóa tài liệu, giúp nâng cao hiệu suất làm việc và cắt giảm chi phí đáng kể. Có bốn loại OCR chính:

  • OCR truyền thống (Nhận dạng mẫu truyền thống): Phương pháp này nhận dạng chữ bằng cách so khớp dữ liệu hình ảnh với các mẫu ký tự đã được định nghĩa trước. Nó mang lại độ chính xác cao đối với các phông chữ và bố cục tiêu chuẩn nhưng thiếu tính linh hoạt.
  • Nhận dạng dấu quang học (OMR): Phương pháp này nhận diện các mẫu cụ thể, chẳng hạn như ô kiểm tra và phiếu trắc nghiệm. Nó được sử dụng phổ biến trong khảo sát và chấm điểm bài thi.
  • Nhận dạng ký tự thông minh (ICR): Phương pháp này nhận diện chữ viết tay, vốn không tuân theo một mẫu cố định. Nó phù hợp để nhận diện biểu mẫu viết tay và chữ ký.
  • Nhận dạng mã vạch: Phương pháp này đọc các ký hiệu như mã vạch và mã QR. Nó được ứng dụng nhiều trong quản lý sản phẩm và kho hàng.

Thách thức và giải pháp của OCR biểu mẫu phi tiêu chuẩn

Biểu mẫu phi tiêu chuẩn là các tài liệu không tuân theo một định dạng cố định. Ví dụ, hóa đơn và đơn đặt hàng có bố cục khác nhau tùy theo từng doanh nghiệp. OCR biểu mẫu phi tiêu chuẩn là công nghệ giúp trích xuất thông tin văn bản từ các bố cục linh hoạt như vậy, nhưng OCR truyền thống thường gặp vấn đề về độ chính xác. Các công nghệ OCR truyền thống thường không đủ khả năng xử lý sự đa dạng của các định dạng và bố cục này.

Để giải quyết vấn đề này, công nghệ OCR tiên tiến ứng dụng AI và máy học đã ra đời. AI OCR học hỏi đặc điểm của văn bản từ một lượng lớn dữ liệu, giúp nhận diện ký tự với độ chính xác cao ngay cả đối với các biểu mẫu phi tiêu chuẩn. Các thuật toán máy học có khả năng tự động nhận diện và học tập các mẫu, từ đó tăng tính linh hoạt trong xử lý nhiều loại bố cục và định dạng khác nhau.

7 Bí quyết giúp nâng cao độ chính xác của OCR biểu mẫu phi tiêu chuẩn

7 Secrets to Improving the Accuracy of Non-Standard Form OCR

1. Sử dụng hình ảnh chất lượng cao: Tầm quan trọng của máy quét và độ phân giải

Độ chính xác của OCR bị ảnh hưởng đáng kể bởi chất lượng hình ảnh đầu vào. Việc sử dụng hình ảnh chất lượng cao giúp nâng cao độ chính xác của OCR. Cụ thể, cần sử dụng máy quét hiệu suất cao và quét với độ phân giải phù hợp.

  • Lựa chọn máy quét: Hãy chọn máy quét dựa trên các yếu tố như độ phân giải, tốc độ quét và định dạng tệp hỗ trợ. Máy quét hiệu suất cao giúp tạo ra hình ảnh rõ nét hơn, góp phần nâng cao độ chính xác của OCR.
  • Cài đặt độ phân giải: Thông thường, độ phân giải tối thiểu 300 dpi được khuyến nghị. Độ phân giải càng cao, ký tự càng rõ nét, giúp giảm nguy cơ nhận dạng sai. Tuy nhiên, nếu độ phân giải quá cao, kích thước tệp sẽ tăng và có thể làm chậm tốc độ xử lý, do đó cần cân nhắc sự cân bằng hợp lý.

Sử dụng hình ảnh chất lượng cao: Tầm quan trọng của máy quét và độ phân giải

2. Tiền xử lý hình ảnh: Loại bỏ nhiễu và điều chỉnh độ tương phản

Hình ảnh quét có thể chứa nhiễu và bụi bẩn. Những yếu tố này có thể làm giảm độ chính xác của OCR, vì vậy việc loại bỏ chúng thông qua tiền xử lý là rất quan trọng.

  • Loại bỏ nhiễu: Sử dụng phần mềm chỉnh sửa hình ảnh hoặc công cụ tiền xử lý chuyên dụng để loại bỏ nhiễu và bụi bẩn trong hình ảnh. Điều này giúp OCR nhận diện ký tự chính xác hơn.
  • Điều chỉnh độ tương phản: Bằng cách điều chỉnh độ tương phản giữa ký tự và nền, các ký tự sẽ nổi bật rõ ràng hơn, giúp cải thiện độ chính xác khi nhận diện. Đặc biệt, nếu nền có vết bẩn hoặc bóng đổ, việc tăng độ tương phản sẽ làm tăng khả năng nhìn thấy ký tự.

3. Lựa chọn phần mềm OCR phù hợp: Tận dụng AI OCR

Có nhiều loại phần mềm OCR khác nhau. Đối với các biểu mẫu không chuẩn, việc chọn phần mềm phù hợp, như AI OCR, phù hợp với loại hình và mục đích của biểu mẫu là rất quan trọng, thay vì sử dụng phần mềm OCR đơn giản.

  • AI OCR: AI OCR có thể nhận diện ký tự với độ chính xác cao ngay cả đối với các biểu mẫu không chuẩn, vì nó học các đặc điểm của ký tự từ lượng dữ liệu lớn. Bằng cách tận dụng các thuật toán học máy, nó có thể linh hoạt xử lý các bố cục phức tạp và các định dạng đa dạng.
  • OCR dựa trên đám mây: Các dịch vụ OCR dựa trên đám mây cũng là một lựa chọn. Vì có thể truy cập qua internet, chúng giúp giảm chi phí triển khai và cung cấp khả năng mở rộng tốt. Tuy nhiên, việc kiểm tra độ tin cậy của dịch vụ từ góc độ bảo mật và quyền riêng tư dữ liệu là rất quan trọng trước khi sử dụng.

LỰA CHỌN LOẠI CÔNG NGHỆ OCR NÀO?

4. Sử dụng chức năng nhận diện bố cục: Cấu trúc hóa văn bản
Phần mềm OCR hiện đại có tích hợp chức năng nhận diện bố cục. Việc sử dụng chức năng này giúp nhận diện cấu trúc của văn bản, từ đó cải thiện độ chính xác khi trích xuất dữ liệu.

  • Trích xuất dữ liệu bảng biểu:
    Bằng cách sử dụng chức năng nhận diện bố cục, dữ liệu dạng bảng có thể được trích xuất chính xác. Điều này cho phép sử dụng dữ liệu bảng dưới dạng dữ liệu số mà vẫn giữ nguyên mối quan hệ và cấu trúc vị trí của các dữ liệu trong bảng.
  • Liên kết tên mục và giá trị:
    Việc tự động liên kết tên mục và giá trị của chúng giúp giảm đáng kể công sức nhập liệu. Điều này giúp duy trì tính toàn vẹn của dữ liệu và đảm bảo quá trình xử lý dữ liệu sau này được suôn sẻ.

5. Đăng ký từ điển: Hỗ trợ các thuật ngữ chuyên ngành
Một số phần mềm OCR có tính năng đăng ký từ điển. Bằng cách đăng ký các thuật ngữ chuyên ngành hoặc thuật ngữ đặc thù của ngành vào từ điển, có thể cải thiện độ chính xác trong việc nhận diện.

  • Ngăn ngừa nhận diện sai:
    Việc đăng ký từ điển giúp phần mềm OCR nhận diện chính xác các thuật ngữ chuyên ngành. Điều này giúp giảm thiểu sự nhận diện sai và cải thiện độ chính xác của dữ liệu.
  • Cải thiện tỷ lệ nhận diện:
    Việc đăng ký thuật ngữ chuyên ngành vào từ điển giúp cải thiện tỷ lệ nhận diện tổng thể của phần mềm OCR. Điều này đặc biệt hiệu quả đối với các mẫu biểu có nhiều thuật ngữ chuyên ngành.

6. Tạo mẫu: Tối ưu hóa theo loại biểu mẫu
Khi xử lý nhiều lần các biểu mẫu cùng loại bằng OCR, việc tạo mẫu sẽ giúp cải thiện độ chính xác và giảm thời gian xử lý.

  • Cố định vị trí mục:
    Bằng cách sử dụng mẫu, các vị trí của từng mục có thể được cố định. Điều này giúp phần mềm OCR nhận diện văn bản dễ dàng hơn và giảm thiểu việc nhận diện sai.
  • Giảm thời gian xử lý:
    Việc sử dụng mẫu giúp giảm đáng kể thời gian xử lý OCR. Với một bố cục cố định, phần mềm có thể trích xuất dữ liệu một cách hiệu quả, từ đó nâng cao tốc độ xử lý tổng thể.

TỐI ƯU HÓA OCR THÔNG QUA MẪU

7. Kiểm tra bởi con người: Tầm quan trọng của việc xác nhận cuối cùng

Sau khi xử lý OCR, việc thực hiện kiểm tra bởi con người là rất quan trọng. Phần mềm OCR có độ chính xác cao, nhưng không phải lúc nào cũng hoàn hảo, và có thể xảy ra nhận diện sai.

  • Sửa chữa nhận diện sai:
    Bằng cách thực hiện kiểm tra bởi con người, những sai sót trong nhận diện của phần mềm OCR có thể được sửa chữa. Điều này giúp cải thiện độ chính xác của dữ liệu.
  • Cải thiện độ chính xác của dữ liệu:
    Thông qua việc xác nhận cuối cùng, độ chính xác của dữ liệu được nâng cao hơn nữa. Đối với các dữ liệu kinh doanh quan trọng, quá trình kiểm tra này là không thể thiếu để đảm bảo độ tin cậy.

Tương lai của OCR trên mẫu không chuẩn: Sự tiến hóa qua công nghệ AI

The Future of Unconventional Form OCR: Evolution Through AI Technology

Với sự tiến hóa của công nghệ AI, độ chính xác của OCR dự kiến sẽ tiếp tục được cải thiện trong tương lai. Đặc biệt, công nghệ học sâu (deep learning) đã đóng góp lớn trong việc nâng cao độ chính xác của OCR.

  • Sự tiến bộ trong nhận diện chữ viết tay:
    Học sâu đã cải thiện đáng kể độ chính xác trong nhận diện chữ viết tay. Nhờ đó, việc số hóa các biểu mẫu viết tay và chữ ký giờ đây có thể được thực hiện chính xác và hiệu quả hơn.
  • Tăng cường hỗ trợ đa ngôn ngữ:
    Phần mềm OCR sử dụng học sâu đã được cải thiện khả năng hỗ trợ đa ngôn ngữ. Điều này giúp các doanh nghiệp mở rộng toàn cầu xử lý tài liệu đa ngôn ngữ dễ dàng hơn, dự kiến sẽ nâng cao hiệu quả công việc quốc tế.

Kết Luận: Tối đa hóa việc sử dụng OCR trên mẫu không chuẩn

Conclusion

OCR trên mẫu không chuẩn là một công cụ mạnh mẽ giúp đạt được hiệu quả công việc và giảm chi phí. Bằng cách thực hiện 7 mẹo để cải thiện độ chính xác, bạn có thể tối đa hóa hiệu quả của OCR. Với sự tiến hóa của công nghệ AI, OCR sẽ tiếp tục phát triển và được kỳ vọng sẽ mang lại độ chính xác và tính linh hoạt cao hơn trong tương lai. Hãy áp dụng những chiến lược này để thúc đẩy quá trình số hóa trong doanh nghiệp của bạn.

7 Secrets To Improving The Accuracy Of Non-Standard Form OCR

Posted on by hello@scuti

7 Secrets To Improving The Accuracy Of Non-Standard Form OCR

Hello, I am Kakeya, the representative of Scuti.

Our company specializes in services such as Offshore Development And Lab-type Development in Vietnam, as well as Generative AI Consulting. Recently, we have been fortunate to receive numerous requests for system development in collaboration with generative AI.

Many people may be considering implementing non-standard form OCR but hesitate due to concerns about accuracy. OCR (Optical Character Recognition) is a highly useful technology that converts paper documents into digital data. However, when dealing with non-standard forms that have flexible layouts and inconsistent formats, accuracy issues tend to become more pronounced.

Even if OCR is introduced, low recognition accuracy may lead to an increased need for manual corrections. As a result, the expected improvements in operational efficiency and cost reduction may not be fully realized. Therefore, in this article, we introduce seven specific methods to dramatically enhance the accuracy of non-standard form OCR.

By applying these techniques, you can significantly improve OCR accuracy, streamline operations, and reduce costs. We encourage you to read through to the end and apply these insights to your business.

This article provides a comprehensive explanation, starting with the fundamentals of non-standard form OCR, followed by specific techniques for improving accuracy, and finally exploring the future of OCR through the utilization of the latest technologies.

What Is Non-Standard Form OCR?

What Is Non-Standard Form OCR?​

If you want to learn more about AI OCR, be sure to check out this article first.
Related article: Innovative Applications Of Generative AI OCR And Five Key Methods

Basic Knowledge of OCR: Mechanism and Types

OCR (Optical Character Recognition) is a technology that extracts text information from image data. Specifically, it enables computers to read text from scanned or photographed paper documents. OCR is widely used for digitizing various types of documents, significantly contributing to operational efficiency and cost reduction. There are four main types of OCR:

  • Traditional OCR (Traditional Pattern Recognition): This method recognizes text by matching image data with predefined character templates. It delivers high accuracy for standardized fonts and layouts but lacks flexibility.
  • Optical Mark Recognition (OMR): This method identifies specific patterns, such as checkboxes and mark sheets. It is widely used for surveys and test scoring.
  • Intelligent Character Recognition (ICR): This method recognizes handwritten characters, which do not follow a fixed pattern. It is suitable for recognizing handwritten forms and signatures.
  • Barcode Recognition: This method reads symbols such as barcodes and QR codes. It is commonly used for product and inventory management.

Challenges and Solutions of Non-Standard Form OCR

Non-standard forms refer to documents that do not follow a fixed format. Examples include invoices and purchase orders, which vary in layout depending on the company. Non-standard form OCR is a technology that extracts text information from such flexible layouts, but traditional OCR often struggles with accuracy. Conventional OCR technologies alone are often insufficient to handle the wide variety of formats and layouts.

To address this challenge, advanced OCR technologies utilizing AI and machine learning have emerged. AI OCR learns text characteristics from large datasets, enabling high-accuracy recognition even for non-standard forms. Machine learning algorithms automatically identify and learn patterns, allowing for greater adaptability to diverse layouts and formats.

7 Secrets to Improving the Accuracy of Non-Standard Form OCR

7 Secrets to Improving the Accuracy of Non-Standard Form OCR

1. Use High-Quality Images: The Importance of Scanners and Resolution

The accuracy of OCR is greatly influenced by the quality of the input images. Using high-quality images improves OCR recognition accuracy. Specifically, it is important to use a high-performance scanner and scan at an appropriate resolution.

  • Choosing a Scanner: Select a scanner by considering factors such as resolution, scanning speed, and supported file formats. A high-performance scanner provides clearer images, contributing to improved OCR accuracy.
  • Setting the Resolution: A resolution of at least 300 dpi is generally recommended. Higher resolution results in clearer character recognition and reduces the risk of misinterpretation. However, excessively high resolution increases file size and may slow down processing speed, so it is necessary to find a balance.

1. Use High-Quality Images: The Importance of Scanners and Resolution 1. Use High-Quality Images: The Importance of Scanners and Resolution

2. Image Preprocessing: Noise Removal and Contrast Adjustment

Scanned images may contain noise and dirt. These noise factors can reduce the accuracy of OCR, so it is important to remove them through preprocessing.

  • Noise Removal: Using image editing software or dedicated preprocessing tools, noise and dirt within the image are removed. This makes it easier for OCR to recognize characters accurately.
  • Contrast Adjustment: By adjusting the contrast between the characters and the background, the characters stand out more clearly, improving recognition accuracy. In particular, if there are spots or shadows on the background, increasing the contrast can improve the visibility of the characters.Choosing the Right OCR Software: Leveraging AI OCR

3. There Are Various Types of OCR Software

For non-standard forms, it is important to select the appropriate software, such as AI OCR, tailored to the type and purpose of the form, rather than using a simple OCR software.

  • AI OCR: AI OCR can achieve high-accuracy character recognition even for non-standard forms, as it learns the characteristics of characters from large volumes of data. By leveraging machine learning algorithms, it can flexibly handle complex layouts and various formats.
  • Cloud-based OCR: Cloud-based OCR services are also an option. Since they can be accessed via the internet, they help reduce implementation costs and offer good scalability. However, it is important to check the reliability of the service from the perspective of security and data privacy before using it.

WHICH OCR TECHNOLOGY SHOULD BE USED FOR NON-STANDARD FORMS?

4. Utilizing Layout Recognition Features: Structuring Text

Modern OCR software includes layout recognition features. By utilizing this feature, the structure of the text can be recognized, enabling more accurate data extraction.

  • Extracting Tabular Data:
    By using the layout recognition feature, tabular data can be extracted accurately. This allows the data in the table to be utilized as digital data while maintaining its positional relationships and structure.
  • Linking Item Names and Values:
    By automatically linking item names and their values, the effort required for data entry is significantly reduced. This maintains data integrity and ensures smooth processing of subsequent data.

5. Dictionary Registration: Supporting Technical Terms

Some OCR software includes a dictionary registration feature. By registering technical terms or industry-specific terminology in the dictionary, the recognition accuracy can be improved.

  • Preventing Misrecognition:
    With dictionary registration, OCR software can accurately recognize technical terms. This reduces misrecognition and improves data accuracy.
  • Improving Recognition Rate:
    Registering technical terms in the dictionary improves the overall recognition rate of the OCR software. This is particularly effective for forms that use many industry-specific terms.

6. Creating Templates: Optimization for Form Types

When repeatedly processing the same type of form with OCR, creating templates leads to improved accuracy and reduced processing time.

  • Fixing Item Positions:
    By using templates, the positions of each item can be fixed. This makes it easier for OCR software to recognize the text and reduces misrecognition.
  • Reducing Processing Time:
    Using templates significantly reduces OCR processing time. With a fixed layout, the software can efficiently extract data, improving overall processing speed.

BENEFITS OF OCR TEMPLATES

7. Human Review: The Importance of Final Confirmation

After OCR processing, it is crucial to perform a human check. While OCR software is highly accurate, it is not perfect, and there is always a possibility of misrecognition.

  • Correcting Misrecognition:
    By performing a human check, any misrecognition made by the OCR software can be corrected. This improves the accuracy of the data.
  • Improving Data Accuracy:
    Through final confirmation, the accuracy of the data is further enhanced. For important business data, this review process is essential to ensure reliability.

The Future of Unconventional Form OCR: Evolution Through AI Technology

The Future of Unconventional Form OCR: Evolution Through AI Technology

With the evolution of AI technology, the accuracy of OCR is expected to continue improving in the future. In particular, deep learning technology has made a significant contribution to improving the accuracy of OCR.

  • Advancements in Handwritten Character Recognition:
    Deep learning has dramatically improved the accuracy of handwritten character recognition. As a result, the digitization of handwritten forms and signatures can now be done more accurately and efficiently.
  • Enhanced Multilingual Support:
    OCR software using deep learning has strengthened multilingual support. This makes it easier for globally expanding businesses to process multilingual documents, which is expected to improve the efficiency of international operations.

Conclusion: Maximizing the Use of Unconventional Form OCR

Conclusion

Unconventional form OCR is a powerful tool for achieving business efficiency and cost reduction. By implementing the 7 tips for improving accuracy, you can maximize the effectiveness of OCR. With the evolution of AI technology, OCR will continue to evolve, and it is expected to offer even higher accuracy and flexibility in the future. By adopting these strategies, accelerate the digitalization of your business.

AI OCR: Tăng Hiệu Quả Công Việc Một Cách Đáng Kể Trong Việc Trích Xuất Dữ Liệu Từ Các Tài Liệu Không Chuẩn! Hướng Dẫn Chi Tiết Các Phương Pháp Cụ Thể

Posted on by hello@scuti

AI OCR: Tăng Hiệu Quả Công Việc Một Cách Đáng Kể Trong Việc Trích Xuất Dữ Liệu Từ Các Tài Liệu Không Chuẩn! Hướng Dẫn Chi Tiết Các Phương Pháp Cụ Thể

Xin chào, tôi là Kakeya, đại diện của công ty Scuti.

Công ty chúng tôi chuyên cung cấp các dịch vụ như Phát triển phần mềm offshore và phát triển theo hình thức Labo tại Việt Nam, cũng như Cung cấp giải pháp AI tạo sinh. Gần đây, chúng tôi rất vinh dự khi nhận được nhiều yêu cầu phát triển hệ thống kết hợp với AI tạo sinh.

Dành cho những ai gặp khó khăn trong việc trích xuất dữ liệu từ các tài liệu không chuẩn, sự tiến bộ của công nghệ AI OCR đã giúp việc trích xuất dữ liệu một cách chính xác và hiệu quả từ các bố cục phức tạp và chữ viết tay trở nên khả thi. Việc tự động hóa các công việc nhập liệu và kiểm tra dữ liệu, vốn trước đây được thực hiện thủ công, giúp giảm đáng kể thời gian và chi phí, đồng thời ngăn ngừa sai sót do con người gây ra.

Bài viết này sẽ giải thích chi tiết cách AI OCR đơn giản hóa việc trích xuất dữ liệu từ các tài liệu không chuẩn và đóng góp vào việc nâng cao hiệu quả công việc. Nó sẽ trình bày các bước cụ thể, các ví dụ ứng dụng và những điểm cần lưu ý khi triển khai công nghệ này. Việc áp dụng AI OCR có thể giúp công việc của bạn tiến triển một cách mạnh mẽ

Kiến Thức Cơ Bản Về AI OCR Và Ứng Dụng Của Nó Đối Với Các Tài Liệu Không Chuẩn

Basic Knowledge Of AI OCR And Its Application To Non-Standard Documents

Nếu bạn muốn tìm hiểu thêm về AI OCR, hãy xem trước bài viết này.
Bài viết liên quan: AI OCR là gì? Giải thích chi tiết về công nghệ mới nhất và các trường hợp ứng dụng trong ngành.

AI OCR Là Gì? Hiểu Về Công Nghệ Và Cơ Chế Của Nó​

AI OCR (Nhận dạng ký tự quang học) là một công nghệ tự động nhận dạng thông tin văn bản từ các tài liệu kỹ thuật số như hình ảnh quét và PDF, sau đó chuyển đổi chúng thành dữ liệu văn bản. OCR truyền thống chỉ giới hạn đối với các tài liệu có phông chữ và bố cục chuẩn, nhưng nhờ sự tiến bộ của công nghệ AI, việc nhận dạng ký tự chính xác cao giờ đây có thể thực hiện được ngay cả với các tài liệu không chuẩn, bao gồm chữ viết tay hoặc bố cục phức tạp.

Bằng cách kết hợp công nghệ xử lý hình ảnh, xử lý ngôn ngữ tự nhiên và học máy, AI OCR hiểu nội dung của tài liệu và trích xuất thông tin cần thiết. Đặc biệt, AI OCR sử dụng học sâu (deep learning) đã cải thiện đáng kể khả năng xử lý các tài liệu không chuẩn nhờ việc học từ một lượng lớn dữ liệu.

Lợi Ích Của AI OCR Trong Việc Xử Lý Tài Liệu Không Chuẩn

AI OCR mang lại nhiều lợi ích trong việc xử lý các tài liệu không chuẩn.

  1. Tăng hiệu quả công việc: Tự động hóa việc nhập liệu dữ liệu vốn trước đây được thực hiện thủ công giúp tiết kiệm thời gian và giảm chi phí đáng kể.
  2. Cải thiện độ chính xác: Ngăn ngừa sai sót do con người giúp cải thiện độ chính xác của việc nhập liệu dữ liệu.
  3. Thúc đẩy việc sử dụng dữ liệu: Dữ liệu đã được trích xuất có thể được phân tích để góp phần vào việc cải tiến công việc và ra quyết định.

Benefits Of AI OCR For Non-Standard Document Processing

Những Ví Dụ Cụ Thể Về Việc Ứng Dụng AI OCR

Specific Use Cases Of AI OCR

Cải Thiện Hiệu Quả Công Việc Thông Qua Tự Động Hóa Việc Xử Lý Hóa Đơn

AI OCR rất hiệu quả trong việc tự động hóa xử lý hóa đơn. Các công ty nhận được rất nhiều hóa đơn hàng ngày, nhưng việc xử lý chúng thủ công tốn rất nhiều thời gian và công sức. Bằng cách triển khai AI OCR, có thể tự động trích xuất các thông tin cần thiết từ hóa đơn (chẳng hạn như số hóa đơn, ngày hóa đơn, tên nhà cung cấp, số tiền hóa đơn, và số tiền thuế giá trị gia tăng) và tích hợp vào hệ thống kế toán.

Ví dụ, phần mềm AI OCR như Docsumo có khả năng trích xuất dữ liệu chính xác cao, giúp việc xử lý hóa đơn diễn ra một cách suôn sẻ. Điều này giúp ngăn ngừa các lỗi nhập liệu thủ công và cải thiện hiệu quả công việc

Trích Xuất Dữ Liệu Tự Động Để Tối Ưu Hóa Quản Lý Hợp Đồng

Quản lý hợp đồng cũng là một lĩnh vực có thể áp dụng AI OCR. Các hợp đồng chứa những thông tin quan trọng như ngày hết hạn hợp đồng, ngày gia hạn, các bên tham gia và số tiền hợp đồng, nhưng việc quản lý thủ công là rất khó khăn. Bằng cách sử dụng AI OCR, có thể tự động trích xuất thông tin cần thiết từ hợp đồng và lưu trữ vào cơ sở dữ liệu.

Điều này cho phép xây dựng một hệ thống tự động thông báo thời gian gia hạn hợp đồng. Kết quả là, hiệu quả và độ chính xác trong quản lý hợp đồng sẽ được cải thiện đáng kể.

Trích Xuất Tự Động Dữ Liệu Hồ Sơ Y Tế Và Báo Cáo Chuẩn Đoán Trong Lĩnh Vực Y Tế

Việc sử dụng AI OCR cũng đang phát triển trong lĩnh vực y tế. Các tài liệu y tế như hồ sơ bệnh án và báo cáo chẩn đoán thường chứa nhiều chữ viết tay và thuật ngữ chuyên ngành, khiến việc số hóa chúng trở nên khó khăn. Bằng cách áp dụng AI OCR, có thể tự động trích xuất các thông tin cần thiết như tên bệnh nhân, ngày sinh, chẩn đoán và đơn thuốc từ các tài liệu này và tích hợp chúng vào hệ thống hồ sơ y tế điện tử.

Điều này giúp giảm bớt gánh nặng công việc cho các nhân viên y tế và việc chia sẻ thông tin y tế trở nên thuận tiện hơn. Việc triển khai AI OCR đóng góp lớn vào việc nâng cao hiệu quả và độ chính xác trong các cơ sở y tế.

Các Bước Cụ Thể Để Triển Khai AI OCR

Specific Steps for Implementing AI OCR

Các Bước Làm Rõ Mục Tiêu Và Yêu Cầu

Trước khi triển khai AI OCR, việc làm rõ mục tiêu muốn đạt được là rất quan trọng. Ví dụ, đặt ra các mục tiêu cụ thể như “Giảm 50% thời gian xử lý hóa đơn” hoặc “Loại bỏ tình trạng bỏ sót gia hạn hợp đồng.”

Ngoài ra, yêu cầu đối với AI OCR cũng cần được làm rõ. Điều này bao gồm việc xác định loại tài liệu cần xử lý, các trường dữ liệu cần thiết, mục tiêu độ chính xác, và yêu cầu tích hợp hệ thống, nhằm xây dựng nền tảng cho việc vận hành suôn sẻ sau khi triển khai.

Cách Chọn Phần Mềm AI OCR Phù Hợp

Phần mềm AI OCR có nhiều loại khác nhau, mỗi sản phẩm có các tính năng và đặc điểm khác nhau. Việc chọn sản phẩm phù hợp với mục tiêu và yêu cầu của bạn là rất quan trọng. Ví dụ, Docsumo hỗ trợ nhiều loại tài liệu không chuẩn như hóa đơn, hợp đồng và biên lai, cung cấp khả năng trích xuất dữ liệu chính xác cao và giao diện dễ sử dụng.

Ngoài ra, nó còn có khả năng tích hợp mạnh mẽ với các hệ thống hiện có, giúp việc vận hành sau khi triển khai diễn ra suôn sẻ. Việc so sánh các tính năng của từng sản phẩm và chọn phần mềm phù hợp nhất với nhu cầu của công ty bạn là chìa khóa thành công.

Chuẩn Bị Dữ Liệu Và Quy Trình Huấn Luyện Mô Hình AI OCR

Để cải thiện độ chính xác của AI OCR, việc chuẩn bị dữ liệu phù hợp và huấn luyện mô hình là rất cần thiết. Đầu tiên, thu thập dữ liệu mẫu của các tài liệu cần xử lý và huấn luyện mô hình AI OCR. Càng có nhiều dữ liệu huấn luyện, độ chính xác nhận diện của mô hình sẽ càng cao.

Đặc biệt, việc chuẩn bị dữ liệu đa dạng, bao gồm cả chữ viết tay và tài liệu có bố cục phức tạp là rất quan trọng. Điều này giúp mô hình AI OCR có thể xử lý các mẫu tài liệu đa dạng và trích xuất dữ liệu với độ chính xác cao trong quá trình vận hành thực tế.

Cách Đạt Được Sự Tích Hợp Suôn Sẻ với Các Hệ Thống Hiện Có

Để tận dụng hiệu quả dữ liệu được trích xuất bằng AI OCR, việc tích hợp với các hệ thống kế toán và hệ thống nghiệp vụ hiện có là điều không thể thiếu. Ví dụ, dữ liệu trích xuất từ hóa đơn có thể được tự động nhập vào hệ thống kế toán, hoặc thông tin từ hợp đồng có thể được đăng ký vào hệ thống quản lý hợp đồng.

Khi chọn phần mềm AI OCR, việc kiểm tra khả năng tích hợp với các hệ thống hiện có là rất quan trọng. Điều này mở rộng phạm vi sử dụng dữ liệu và giúp nâng cao hiệu quả công việc tổng thể.

Những Lưu Ý Và Giải Pháp Cho Các Vấn Đề Khi Triển Khai AI OCR

Precautions and Solutions for Challenges When Implementing AI OCR

Các Thách Thức Trong Việc Cải Thiện Độ Chính Xác Đối Với Chữ Viết Tay Và Bố Cục Phức Tạp

AI OCR có thể gặp khó khăn trong việc nhận dạng chữ viết tay và các tài liệu có bố cục phức tạp. Đặc biệt, khi ký tự không rõ ràng hoặc bố cục bị sai lệch, độ chính xác nhận dạng có thể bị giảm. Để nâng cao độ chính xác, việc sử dụng máy quét chất lượng cao và thực hiện xử lý hình ảnh trước là rất hiệu quả.

Ngoài ra, việc huấn luyện mô hình AI OCR với dữ liệu đa dạng có thể cải thiện độ chính xác nhận dạng. Việc cải tiến mô hình liên tục và tăng cường dữ liệu là chìa khóa để nâng cao độ chính xác.

Cách Cân Bằng Giữa Chi Phí Triển Khai Và Chi Phí Vận Hành

Việc triển khai phần mềm AI OCR phát sinh chi phí ban đầu và chi phí vận hành. Cần xem xét các khoản chi như phí bản quyền, chi phí máy chủ và chi phí bảo trì, đồng thời chú trọng đến hiệu quả chi phí.

Để giảm thiểu chi phí, có thể sử dụng dịch vụ AI OCR dựa trên nền tảng đám mây hoặc tận dụng phần mềm AI OCR mã nguồn mở. Việc lựa chọn giải pháp phù hợp với ngân sách và nhu cầu của doanh nghiệp là rất quan trọng, hướng tới việc giảm chi phí trong dài hạn.

Tầm Quan Trọng Của Việc Bảo Vệ Thông Tin Mật Và Thực Hiện Các Biện Pháp Bảo Mật

Các tài liệu được xử lý bằng AI OCR có thể chứa thông tin cá nhân hoặc thông tin mật. Do đó, việc thực hiện các biện pháp bảo mật là vô cùng quan trọng. Khi lựa chọn phần mềm AI OCR, cần ưu tiên các sản phẩm có tính năng bảo mật mạnh mẽ.

Cần thiết lập hợp lý nơi lưu trữ dữ liệu và quyền truy cập để ngăn chặn rò rỉ thông tin. Bằng cách thực hiện những biện pháp này, doanh nghiệp có thể yên tâm ứng dụng AI OCR và thúc đẩy hiệu quả công việc.

Tổng Kết: Trích Xuất Dữ Liệu Từ Tài Liệu Phi Cấu Trúc Một Cách Hiệu Quả Bằng AI OCR

Conclusion: Effectively Extracting Data from Unstructured Documents Using AI OCR

AI OCR là một công cụ mạnh mẽ giúp tối ưu hóa việc trích xuất dữ liệu từ các tài liệu phi cấu trúc. Công nghệ này mang lại nhiều lợi ích như nâng cao hiệu quả công việc, tăng độ chính xác và tận dụng tốt dữ liệu. Khi triển khai, cần làm rõ mục tiêu và yêu cầu, đồng thời lựa chọn phần mềm AI OCR phù hợp.

Ngoài ra, cần chú ý đầy đủ đến các yếu tố như độ chính xác, chi phí và bảo mật. Việc ứng dụng hiệu quả AI OCR sẽ giúp giải quyết các thách thức trong xử lý tài liệu phi cấu trúc và nâng cao hiệu suất công việc.

AI OCR: Significantly Improve Business Efficiency In Data Extraction From Non-Standard Documents! A Comprehensive Guide To The Specific Methods

Posted on by hello@scuti
AI OCR Greatly Improves Operational Efficiency Through Data Extraction from Unstructured Documents! A Thorough Explanation of Specific Methods

Hello, I am Kakeya, the representative of Scuti.

Our company specializes in services such as Offshore Development And Lab-type Development in Vietnam, as well as Generative AI Consulting. Recently, we have been fortunate to receive numerous requests for system development in collaboration with generative AI.

For those struggling with data extraction from non-standard documents, the advancement of AI OCR technology has made it possible to efficiently and accurately extract data from complex layouts and handwritten text. By automating data input and checking tasks that were previously done manually, significant reductions in time and costs can be achieved, and it also helps prevent human errors.

This article will explain in detail how AI OCR simplifies data extraction from non-standard documents and contributes to improving business efficiency. It will cover specific steps, use cases, and important considerations when implementing the technology. By adopting AI OCR, your business may undergo a dramatic transformation.

Basic Knowledge Of AI OCR And Its Application To Non-Standard Documents

Basic Knowledge Of AI OCR And Its Application To Non-Standard Documents

If you want to learn more about AI OCR, be sure to check out this article first.
Related article: What is AI OCR? A Detailed Explanation of the Latest Technology and Industry Use Cases

What is AI OCR? Understanding Its Technology And Mechanism

AI OCR (Optical Character Recognition) is a technology that automatically recognizes text information from digital documents, such as scanned images and PDFs, and converts it into text data. Traditional OCR was limited to documents with standardized fonts and layouts, but with advancements in AI technology, high-precision character recognition is now possible even for non-standard documents that include handwritten text or complex layouts.

By combining image processing technology, natural language processing, and machine learning, AI OCR understands the content of a document and extracts the necessary information. In particular, AI OCR using deep learning has greatly improved its ability to handle non-standard documents by learning from large amounts of data

Benefits Of AI OCR For Non-Standard Document Processing

AI OCR offers numerous benefits in processing non-standard documents.

  1. Improved Business Efficiency: Automating data entry that was previously done manually significantly saves time and reduces costs.
  2. Enhanced Accuracy: By preventing human errors, the accuracy of data entry is improved.
  3. Promotion of Data Utilization: Extracted data can be analyzed to contribute to business improvements and decision-making.
Benefits Of AI OCR For Non-Standard Document Processing

Specific Use Cases Of AI OCR

Specific Use Cases Of AI OCR

Improving Business Efficiency Through Automation Of Invoice Processing

AI OCR is highly effective in automating invoice processing. Companies receive numerous invoices daily, but manually processing them is time-consuming and labor-intensive. By implementing AI OCR, it becomes possible to automatically extract necessary information from invoices (such as invoice numbers, invoice dates, supplier names, invoice amounts, and sales tax amounts) and integrate it with accounting systems.

For example, AI OCR software like Docsumo has high-precision data extraction capabilities, allowing for smooth invoice processing. This helps prevent manual input errors and improves business efficiency.”

Automated Data Extraction For Streamlining Contract Management

Contract management is also an area where AI OCR can be utilized. Contracts contain important information such as the contract expiration date, renewal date, parties involved, and contract amount, but it is difficult to manage them manually. By utilizing AI OCR, it becomes possible to automatically extract necessary information from contracts and store it in a database.

This enables the construction of a system that automatically notifies the timing for contract renewals. As a result, the efficiency and accuracy of contract management are significantly improved.

Automatic Extraction of Medical Record and Diagnosis Report Data in the Healthcare Sector

The use of AI OCR is also advancing in the healthcare sector. Medical documents such as medical records and diagnosis reports often contain a large amount of handwritten text and specialized terminology, making it difficult to digitize them. By introducing AI OCR, it becomes possible to automatically extract necessary information such as the patient’s name, date of birth, diagnosis, and prescriptions from these documents and integrate them with electronic medical record systems.

As a result, the workload of healthcare professionals is reduced, and the sharing of medical information becomes more efficient. The implementation of AI OCR significantly contributes to improving efficiency and accuracy in medical settings.

Specific Steps For Implementing AI OCR

Specific Steps for Implementing AI OCR

Step to Clarify Objectives And Requirements

Before implementing AI OCR, it is crucial to clarify the objectives you want to achieve. For example, setting specific goals such as “Reduce invoice processing time by 50%” or “Eliminate contract renewal omissions.”

Additionally, the requirements for AI OCR must be clearly defined. This includes defining the types of documents to be processed, required data fields, accuracy targets, and system integration requirements, in order to establish a foundation for smooth operations after implementation.

How To Select the Appropriate AI OCR Software

AI OCR software comes in a wide range, with each product offering different features and characteristics. It is important to select a product that matches your objectives and requirements. For example, Docsumo supports various non-standard documents such as invoices, contracts, and receipts, offering high-precision data extraction capabilities and an easy-to-use interface.

Additionally, it has strong integration capabilities with existing systems, ensuring smooth operations after implementation. Comparing the features of different products and selecting the software that best fits your company’s needs is the key to success.

Data Preparation And AI OCR Model Training Process

To improve the accuracy of AI OCR, proper data preparation and model training are essential. First, collect sample data of the documents to be processed and train the AI OCR model. The more training data there is, the higher the recognition accuracy of the model will be.

It is particularly important to prepare diverse data, including handwritten text and documents with complex layouts. This allows the AI OCR model to handle various document patterns and extract data with high accuracy during actual operations.

How to Achieve Smooth Integration With Existing Systems

To effectively utilize the data extracted by AI OCR, integration with existing accounting systems and business systems is essential. For example, the data extracted from invoices can be automatically entered into the accounting system, or the information from contracts can be registered into a contract management system.

When selecting AI OCR software, it is important to check if it has robust integration capabilities with existing systems. This broadens the potential for data utilization and further enhances overall business efficiency.

Precautions And Solutions For Challenges When Implementing AI OCR

Precautions and Solutions for Challenges When Implementing AI OCR

Challenges In Improving Accuracy For Handwritten Text And Complex Layouts

AI OCR may face challenges in recognizing handwritten characters and documents with complex layouts. Especially when characters are unclear or the layout is distorted, recognition accuracy may decrease. To improve accuracy, it is effective to use a high-quality scanner and perform image preprocessing.

Furthermore, by training AI OCR models on diverse data, recognition accuracy can be improved. Continuous model improvement and data augmentation are the keys to enhancing accuracy.

How To Balance Implementation Costs And Operational Costs

The implementation of AI OCR software involves initial costs and operational expenses. It is important to consider license fees, server costs, and maintenance expenses, and to prioritize cost performance.

To reduce costs, one approach is to use cloud-based AI OCR services or leverage open-source AI OCR software. It is essential to choose a solution that matches your company’s budget and needs, aiming for long-term cost reduction.

How to Balance Implementation Costs and Operational Costs

The Importance Of Protecting Confidential Information And Implementing Security Measures

Documents processed by AI OCR may contain personal or confidential information. Therefore, implementing security measures is extremely important. When selecting AI OCR software, it is essential to choose a product with robust security features.

Properly managing data storage locations and access permissions is necessary to prevent information leaks. By taking these measures, AI OCR can be utilized with peace of mind to enhance operational efficiency.

Conclusion: Effectively Extracting Data From Unstructured Documents Using AI OCR

Conclusion: Effectively Extracting Data from Unstructured Documents Using AI OCR

AI OCR is a powerful tool for streamlining data extraction from unstructured documents. It offers numerous benefits such as improved operational efficiency, higher accuracy, and better data utilization. When implementing AI OCR, it is important to clearly define objectives and requirements and select appropriate software.

In addition, careful consideration should be given to factors such as accuracy, cost, and security. By effectively utilizing AI OCR, it is possible to address challenges related to unstructured document processing and achieve greater operational efficiency.

Dify MCP Plugin & Zapier: A Hands-On Guide to Agent Tool Integration

Posted on by Tuan Nguyen

Introduction

Leverage the power of the Model Context Protocol (MCP) in Dify to connect your agents with Zapier’s extensive application library and automate complex workflows. Before we dive into the integration steps, let’s quickly clarify the key players involved:

  • Dify: This is an LLMops platform designed to help you easily build, deploy, and manage AI-powered applications and agents. It supports various large language models and provides tools for creating complex AI workflows.
  • Zapier: Think of Zapier as a universal translator and automation engine for web applications. It connects thousands of different apps (like Gmail, Slack, Google Sheets, etc.) allowing you to create automated workflows between them without needing to write code.
  • MCP (Model Context Protocol): This is essentially a standardized ‘language’ or set of rules. It allows AI agents, like those built in Dify, to understand what external tools (like specific Zapier actions) do and how to use them correctly.

Now that we understand the components, let’s explore how to bring these powerful tools together.

Integrating Zapier with Dify via MCP

Zapier Setup

  1. Visit Zapier MCP Settings.
  2. Copy your unique MCP Server Endpoint link.
  3. Click “Edit MCP Actions” to add new tools and actions.
  4. Click “Add a new action”.
  5. Select and configure specific actions like “Gmail: Reply to Email”.
  6. To set up:
    – Click “Connect to a new Gmail account”, log in, and authorize your account.

    – For fields like thread, to, and body, select “Have AI guess a value for this field”.
  7. Repeat to expand your toolkit with “Gmail: Send Email” action.

MCP Plugins on Dify

  • MCP SSE: A plugin that communicates with one or more MCP Servers using HTTP + Server-Sent Events (SSE), enabling your Agent to discover and invoke external tools dynamically.
  • MCP Agent Strategy: This plugin integrates MCP directly into Workflow Agent nodes, empowering agents to autonomously decide and call external tools based on MCP-defined logic.

MCP SSE

Customize the JSON template below by inputting your Zapier MCP Server URL in place of the existing one. Paste the resulting complete JSON configuration into the installed plugin.

{
“server_name”: {
“url”: “https://actions.zapier.com/mcp/*******/sse”,
“headers”: {},
“timeout”: 5,
“sse_read_timeout”: 300
}
}

 

 

After setting things up, proceed to create a new Agent app. Ensure you enable your configured MCP SSE plugin under ‘Tools’. This allows the Agent to automatically trigger relevant tools based on the user’s intent, such as drafting and sending emails via an integrated Gmail action.

MCP Agent Strategy

Besides the SSE plugin, the MCP Agent Strategy plugin puts MCP right into your workflow’s Agent nodes. After installing it, set up the MCP Server URL just like before. This allows your workflow agents to automatically use Zapier MCP on their own to do tasks like sending Gmail emails within your automated workflows.

Final Notes

Currently (April 2025), Dify’s MCP capabilities are thanks to fantastic community plugins – our sincere thanks to the contributors! We’re also developing built-in MCP support to make setting up services like Zapier MCP and Composio within Dify even easier. This will unlock more powerful integrations for everyone. More updates are coming soon!

References: Dify MCP Plugin Hands-On Guide: Integrating Zapier for Effortless Agent Tool Calls

 

 

 

 

 

Posted in AI

Introduction to Mastra AI and Basic Installation Guide

Posted on by Cuong Dinh

Introduction to Mastra AI and Basic Installation Guide

In the booming era of AI development, the demand for open-source platforms that support building machine learning (ML) models is rapidly increasing. Mastra AI emerges as a flexible and easy-to-use tool that helps researchers and AI engineers efficiently build, train, and deploy complex ML pipelines. This article provides an overview of Mastra AI and a basic installation guide to get started.

What is Mastra AI?

According to the official documentation (mastra.ai), Mastra is an open-source framework designed to support building, training, and operating AI/ML pipelines at scale.

Mastra is optimized for:

  • Managing workflows of complex AI projects.

  • Tracking data, models, and experiments.

  • Automating the training, evaluation, and deployment processes.

  • Supporting customizable and easily extendable plugins.

Mastra aims to become a rapid “launchpad” for AI teams, suitable for both research (R&D) and production-grade systems.

Key Components of Mastra

  • Pipeline Management: Easily define and manage pipeline steps.

  • Experiment Tracking: Record and compare experimental results.

  • Deployment Tools: Support for exporting models and deploying them in production environments.

  • Plugin System: Integration with external tools like HuggingFace, TensorFlow, and PyTorch.

  • UI Dashboard: Visualize processes and results.

Basic Installation Guide for Mastra

To install Mastra, you can refer to the detailed guide here:
👉 Mastra Installation Guide

Summary of the basic steps:

1. System Requirements

To run Mastra, you need access to an LLM. Typically, you’ll want to get an API key from an LLM provider such as OpenAI , Anthropic , or Google Gemini . You can also run Mastra with a local LLM using Ollama .

2.Create a New Project

We recommend starting a new Mastra project using create-mastra, which will scaffold your project. To create a project, run:

npx create-mastra@latest

On installation, you’ll be guided through the following prompts:

After the prompts, create-mastra will:
  1. Set up your project directory with TypeScript
  2. Install dependencies
  3. Configure your selected components and LLM provider
  4. Configure the MCP server in your IDE (if selected) for instant access to docs, examples, and help while you code

MCP Note: If you’re using a different IDE, you can install the MCP server manually by following the instructions in the MCP server docs. Also note that there are additional steps for Cursor and Windsurf to activate the MCP server.

3. Set Up your API Key

Add the API key for your configured LLM provider in your .env file.

OPENAI_API_KEY=<your-openai-key>

Non-Interactive mode:

You can now specify the project name as either a positional argument or with the -p, --project-name option. This works consistently in both the Mastra CLI (mastra create) and create-mastra package. If both are provided, the argument takes precedence over the option.

3. Start the Mastra Server

Mastra provides commands to serve your agents via REST endpoints:

mastra run examples/quickstart_pipeline.yaml

Development Server

Run the following command to start the Mastra server:

 npm run dev

If you have the mastra CLI installed, run:

mastra dev

This command creates REST API endpoints for your agents.

Test the Endpoint

You can test the agent’s endpoint using curl or fetch:

curl -X POST http://localhost:4111/api/agents/weatherAgent/generate \
-H “Content-Type: application/json” \
-d ‘{“messages”: [“What is the weather in London?”]}’

 

Use Mastra on the Client

To use Mastra in your frontend applications, you can use our type-safe client SDK to interact with your Mastra REST APIs.

See the Mastra Client SDK documentation for detailed usage instructions.

Run from the command line

If you’d like to directly call agents from the command line, you can create a script to get an agent and call it:

Then, run the script to test that everything is set up correctly:

npx tsx src/index.ts

This should output the agent’s response to your console.

Posted in AI

© 2015 - 2025 Scuti. All rights reserved.